Jev, 분류기 평가에서 품질과 속도 모두 우세
Malte Ubl이 TypeSafe AI의 Jev를 기존 분류기 평가에 적용한 결과, 품질에서 평가를 포화시켰고 Gemini 2.5 Flash Lite보다 6배 빨랐다.
JevBench v1.2.6 업데이트: 세 개의 새 모델 행 추가
JevBench v1.2.6이 공개되어 openJev Verdict 1.4, SimpleJev Qwen3.8-27B, SimpleJev Qwen3.6-35B-A3B 세 개의 새 행이 추가되었으며, 동일한 534개 고정 결정으로 평가되었습니다.
JevBench v1.2.6 is live with three new rows: • openJev Verdict 1.4 — #4, 72.5 • SimpleJev Qwen3.8-27B — #9, 67.3 • SimpleJev Qwen3.6-35B-A3B — #16, 63.8 Same frozen 534 decisions. Full table: https://benchmarkheaven.com/jev-models - Harold
· 0 likesOpen on X
More like this
Jev로 DuckDB 행 빠르게 분류하기
작성자가 DuckDB 확장을 공개했습니다. TypeSafe AI의 Jev를 사용해 CSV/Parquet 파일이나 DuckDB 테이블의 행을 빠르게 분류하며, 1k 행에 약 10초가 걸려 LLM보다 빠르고 분류기보다 편리합니다.
Jev로 AI 논문 1,018편 분류, 총비용 0.08달러
DeepSeek V4 Flash로 각 논문을 요약한 뒤 제목, 요약, 24개 후보 주제를 Jev에 보내 분류했다. 총비용 0.08달러, 논문당 중앙값 엔드투엔드 지연 256ms로 1,018편의 AI 논문을 처리했다.
