Testy
/kattechnologia/temewaluacja · modele językowe/typanalizy
Przebudowaliśmy Writera: test czytelnika dał 13:2 dla wersji z kontekstem labu i 13:2 dla krótszych, łatwiejszych do skanowania wpisów.
Testy
/kattechnologia/temewaluacja · open source i open weights/typanalizy
Fiszka 0.3 osiągnęła F1 0,496 na tekstach spoza arXiv; na tematach wspólnych z Gemini wynik obu systemów był zbliżony.
Testy
/kattechnologia/temewaluacja · modele językowe · open source i open weights/typanalizy
Fiszka 0.1 osiągnęła macro-F1 0,34; lokalni nauczyciele uzyskali 0,44, praktycznie tyle samo co dotychczasowe tematy Gemini.
Testy
/kattechnologia/temewaluacja · sprzęt · modele językowe/typanalizy
Test 7 lokalnych modeli AI na procesorze z 2011 roku, bez karty graficznej: ile zajmują RAM-u, jak szybko działają i jakie robią błędy.