Een codebase-classificator bouwen met Jev
Een ontwikkelaar deelt het bouwen van een codebase-classificator met Jev, suggereert dat dit overgeëngineerde code van agents kan oplossen, en vraagt wat er nu getest moet worden.
Jev is goed in zero-shot classificatie, maar gespecialiseerde classificatoren domineren commerciële use cases
Josh merkt op dat Jev goed presteert bij zero-shot classificatie, maar gespecialiseerde classificatoren voordeliger zijn in commerciële omgevingen. Hij vermeldt dat @trycua een klein model heeft afgestemd dat 99,7% scoorde op formulierinvullingsevaluatie, terwijl gehoste Jev 83,6% scoorde, en deelt zijn ervaring met het afstemmen van GLiNER 2.5 in 51 minuten.
Jev is great at zero-shot classification, but specialist classifiers will dominate commercial use cases. @trycua tuned a tiny model that scored 99.7% on their form-filling eval. Hosted Jev scored 83.6%. I tuned GLiNER 2.5 on a task in 51 minutes yesterday and it crushes
· 432 likesOpen on X
More like this
Jev maakt LLM-as-a-Judge 20–200x sneller en 40–400x goedkoper
Jev werd gebruikt om te bepalen welk model AGI is, met 20–200x snelheid en 40–400x lagere kosten, waardoor LLM-as-a-judge extreem snel en bijna gratis wordt.
Apps testen met TypeSafe Jev & OpenCode
Filip deelt een kleine demo die laat zien hoe snel apps testen met TypeSafe Jev en OpenCode kan zijn.
