Awesome Jev: 초기 프로젝트와 사용 사례
커뮤니티가 초기 Jev 프로젝트와 아이디어를 모아 API 접근 권한이 있는 개발자가 실험 방향을 찾도록 돕습니다.
커뮤니티 사용자가 공식 Jev, AnyJev(Qwen3-4B), Laya, djev의 20문항 테스트 정확도를 비교했습니다. 공식 Jev는 전 문항 정답, AnyJev는 95%, Laya는 65%, djev는 35%에 그쳤습니다. 또한 djev는 선택지 순서를 바꾸었을 때 20문항 중 19문항의 답이 바뀌어 불안정함을 드러냈습니다.
准确率一下就拉开了: 官方 Jev 20 题全对 AnyJev(Qwen3-4B)95% Laya 65% djev(Mac 4bit)35% djev 更离谱,选项换个顺序,20 题里 19 题变了答案(想问问djev,你是属变色龙的吗😂)