Back to explore

Jev vs GPT-5.4 하드 팩트체크: 재실행 시 유의미한 차이 없음, 비용 1/50

커뮤니티 재실행에서 Jev와 GPT-5.4는 통계적으로 구분하기 어려운 수준(3.3포인트 차이)이며, Jev 비용은 약 50분의 1.

I said Jev beat GPT-5.4 on hard fact-checks by 11.1 points. That was one run. Rerun five times, I can't tell them apart: 3.3 points, not significant. Jev costs a fiftieth as much. Raw runs: https://github.com/TheWayWithin/jev-bench… https://jamiewatters.work/journey/jev-ties-gpt-5-4…

Jev vs GPT-5.4 하드 팩트체크: 재실행 시 유의미한 차이 없음, 비용 1/50 1
· 0 likesOpen on X