Jev, 분류기 평가에서 품질과 속도 모두 우세
Malte Ubl이 TypeSafe AI의 Jev를 기존 분류기 평가에 적용한 결과, 품질에서 평가를 포화시켰고 Gemini 2.5 Flash Lite보다 6배 빨랐다.
제3자 테스트, FLock 모델과 Jev System One 정확도 비교
제3자가 68개 질문으로 정확도를 검증한 결과 FLock의 THIS/THAT Model 1.0은 94.1%, 호스팅형 System One 서비스 Jev는 76.5%를 기록했다. 특화된 의사결정 모델로서는 고무적이지만 그래프 탐색이나 다단계 산술 등 복잡한 작업에는 여전히 한계가 있다고 밝혔다.
제3자가 정확도 검증을 위해 기록한 68개 질문 테스트 결과: FLock의 THIS / THAT Model 1.0: 94.1% Jev (호스팅형 System One 서비스): 76.5% 특화된 의사결정 모델로서는 고무적인 결과입니다. 다만 그래프 탐색이나 여러 단계의 산술 연산이 필요한 복잡한 작업은 여전히 한계로 남아 있습니다.
· 0 likesOpen on X
More like this
Jev로 DuckDB 행 빠르게 분류하기
작성자가 DuckDB 확장을 공개했습니다. TypeSafe AI의 Jev를 사용해 CSV/Parquet 파일이나 DuckDB 테이블의 행을 빠르게 분류하며, 1k 행에 약 10초가 걸려 LLM보다 빠르고 분류기보다 편리합니다.
Jev로 AI 논문 1,018편 분류, 총비용 0.08달러
DeepSeek V4 Flash로 각 논문을 요약한 뒤 제목, 요약, 24개 후보 주제를 Jev에 보내 분류했다. 총비용 0.08달러, 논문당 중앙값 엔드투엔드 지연 256ms로 1,018편의 AI 논문을 처리했다.
