TypeSafe AI, 인용 검사 도구에 추가
사용자가 인용 검사기에 @typesafeai를 추가하고 호평했으며 PaperTrellis에서 무료로 사용 가능. Jev와 의료 AI 태그 포함. Link
텐센트 논문, Jev와 주요 LLM 비교
이 게시물은 선택지 순서 변경에 대한 Jev의 판단력을 평가한 텐센트 연구 논문을 인용하여, 풀 수 있는 문제에서도 Jev가 자주 틀린다는 결과가 저자의 경험과 일치한다고 말합니다.
A paper by Tencent comparing the judgments of Jev with those of GPT, Claude, Gemini, and others. The results show that Jev often gets even solvable problems wrong when the order of the options is changed (Figure d). Somehow, this feels like it aligns with my experience.
· 37 likesOpen on X
More like this
JevBench: Jev 클래스 모델 최초 벤치마크 공개
JevBench는 Jev 클래스 모델을 위한 최초의 벤치마크입니다. TypeSafe AI의 원본 Jev가 75.3으로 1위, SemIf가 74.6으로 2위입니다. 전체 결과는 benchmarkheaven.com/jev-models에서 확인하세요. Link
Jev, 트롤리 문제 100회 연속 수행
게시물에 따르면 누군가 Jev에게 생명을 맡기고 트롤리 문제를 100회 연속 수행하게 했다. 첫 라운드에서 Jev는 99% 확률로 레버를 당겨 1명을 희생하고 5명을 구하는 선택을 했다.
