Jev, 분류기 평가에서 품질과 속도 모두 우세
Malte Ubl이 TypeSafe AI의 Jev를 기존 분류기 평가에 적용한 결과, 품질에서 평가를 포화시켰고 Gemini 2.5 Flash Lite보다 6배 빨랐다.
Jev 라벨링 및 다중 모델 비교 실습
저자는 Jev로 수동 라벨링한 경험을 공유하며, Jev가 opus로만 실행되고 실수로 다른 opus와 비교했다는 점을 지적하고, 이제 여러 다른 모델로 라벨링하도록 지시했다고 밝혔다.
אחד הדברים שצריך קצת לעבוד קשה פה זה לתייג ידנית גם עוד כל מיני דברים ואני צריך לוודא בעצמי (ומי אמר שאני רשאי לתייג כמו שצריך? מי עשה אותי תייגן?) גם שמתי לב בנוסף שjev רץ רק עם opus ומדד בטעות מול opus אחר. אז הנחיתי אותו עכשיו לעשות תיוגים עם מספר מודלים שונים ממספר
· 0 likesOpen on X
More like this
Jev로 DuckDB 행 빠르게 분류하기
작성자가 DuckDB 확장을 공개했습니다. TypeSafe AI의 Jev를 사용해 CSV/Parquet 파일이나 DuckDB 테이블의 행을 빠르게 분류하며, 1k 행에 약 10초가 걸려 LLM보다 빠르고 분류기보다 편리합니다.
Jev로 AI 논문 1,018편 분류, 총비용 0.08달러
DeepSeek V4 Flash로 각 논문을 요약한 뒤 제목, 요약, 24개 후보 주제를 Jev에 보내 분류했다. 총비용 0.08달러, 논문당 중앙값 엔드투엔드 지연 256ms로 1,018편의 AI 논문을 처리했다.
