Jev verslaat Gemini 2.5 Flash Lite op kwaliteit en snelheid in classifier-evaluatie
Malte Ubl voerde Jev van TypeSafe AI uit op een bestaande classifier-evaluatie: het verzadigde de evaluatie op kwaliteit en was 6x sneller dan Gemini 2.5 Flash Lite.
Test door derden vergelijkt nauwkeurigheid van FLock-modellen en Jev System One
Een derde partij testte de nauwkeurigheid op 68 vragen: THIS/THAT Model 1.0 van FLock scoorde 94,1% en de gehoste System One-dienst Jev 76,5%; het bericht noemt de resultaten bemoedigend voor een gespecialiseerd beslissingsmodel, maar complexe taken zoals grafiekdoorloop en meerstaps rekenwerk blijven beperkt.
제3자가 정확도 검증을 위해 기록한 68개 질문 테스트 결과: FLock의 THIS / THAT Model 1.0: 94.1% Jev (호스팅형 System One 서비스): 76.5% 특화된 의사결정 모델로서는 고무적인 결과입니다. 다만 그래프 탐색이나 여러 단계의 산술 연산이 필요한 복잡한 작업은 여전히 한계로 남아 있습니다.
· 0 likesOpen on X
More like this
Snelle rijclassificatie in DuckDB met Jev
De auteur heeft een DuckDB-extensie uitgebracht die TypeSafe AI's Jev gebruikt om rijen in CSV/Parquet-bestanden of DuckDB-tabellen snel te classificeren, ongeveer 10 seconden voor 1k rijen—sneller dan een LLM en ergonomischer dan een classifier.
1.018 AI-papers classificeren met Jev voor $ 0,08
De auteur vatte elk paper samen met DeepSeek V4 Flash en stuurde vervolgens de titel, samenvatting en 24 kandidaat-onderwerpen naar Jev voor classificatie. Er werden 1.018 AI-papers verwerkt tegen $ 0,08 totale kosten en 256ms mediane end-to-end latentie per paper.
