FLock.io publikuje zarejestrowany przez stronę trzecią test dokładności na 68 pytaniach: model THIS/THAT 1.0 od FLock uzyskuje 94,1%, a Jev (hostowana usługa System One) — 76,5%. Wpis nazywa to obiecującym wynikiem dla wyspecjalizowanego modelu decyzyjnego, zaznaczając, że złożone zadania wymagające przeszukiwania grafów lub wieloetapowej arytmetyki wciąż stanowią wyzwanie.
In a test of 68 questions recorded by a third party for accuracy: - FLock's THIS / THAT Model 1.0: 94.1% - Jev (hosted System One service): 76.5% A promising result for a specialised decision model. Complex tasks requiring graph search or multi-step arithmetic remain
Malte Ubl uruchomił Jev od TypeSafe AI na istniejącej ewaluacji klasyfikatora: nasycił ewaluację pod względem jakości i był 6 razy szybszy niż Gemini 2.5 Flash Lite.
Autor wydał rozszerzenie DuckDB, które używa Jev od TypeSafe AI do szybkiej klasyfikacji wierszy w plikach CSV/Parquet lub tabelach DuckDB, około 10 sekund na 1k wierszy—szybciej niż LLM i wygodniej niż klasyfikator.
Autor streścił każdy artykuł za pomocą DeepSeek V4 Flash, a następnie przesłał tytuł, streszczenie i 24 możliwe tematy do Jev w celu klasyfikacji. Przetworzono 1018 artykułów o AI przy łącznym koszcie 0,08 USD i medianie opóźnienia end-to-end 256 ms na artykuł.
