Jev slår Gemini 2.5 Flash Lite i kvalitet och hastighet i klassificerarutvärdering
Malte Ubl körde TypeSafe AI:s Jev mot en befintlig klassificerarutvärdering: den mättade utvärderingen i kvalitet och var 6x snabbare än Gemini 2.5 Flash Lite.
JevBench v1.2.6-uppdatering: tre nya modellrader
JevBench v1.2.6 är live med tre nya rader: openJev Verdict 1.4, SimpleJev Qwen3.8-27B och SimpleJev Qwen3.6-35B-A3B, utvärderade på samma 534 frysta beslut.
JevBench v1.2.6 is live with three new rows: • openJev Verdict 1.4 — #4, 72.5 • SimpleJev Qwen3.8-27B — #9, 67.3 • SimpleJev Qwen3.6-35B-A3B — #16, 63.8 Same frozen 534 decisions. Full table: https://benchmarkheaven.com/jev-models - Harold
· 0 likesOpen on X
More like this
Snabb radklassificering i DuckDB med Jev
Författaren har släppt ett DuckDB-tillägg som använder TypeSafe AI:s Jev för att snabbt klassificera rader i CSV/Parquet-filer eller DuckDB-tabeller, cirka 10 sekunder för 1k rader—snabbare än en LLM och mer ergonomiskt än en klassificerare.
Klassificering av 1 018 AI-artiklar med Jev för 0,08 $
Författaren sammanfattade varje artikel med DeepSeek V4 Flash och skickade sedan titel, sammanfattning och 24 möjliga ämnen till Jev för klassificering. 1 018 AI-artiklar bearbetades till en total kostnad av 0,08 $ och en medianänd-till-änd-fördröjning på 256 ms per artikel.
