TypeSafe AI, 인용 검사 도구에 추가
사용자가 인용 검사기에 @typesafeai를 추가하고 호평했으며 PaperTrellis에서 무료로 사용 가능. Jev와 의료 AI 태그 포함. Link
Jev의 다음 최적 행동 예측 정확도 테스트
Dorian Smiley가 Jev의 다음 최적 행동 예측 정확도를 테스트했습니다. 결과: 표준 정확도 98.6%, 일반화 정확도 41.5%. Jev는 현재 부분 프로그램에서 프로그램의 다음 상태를 예측합니다. 스위트는 25개 케이스로 20회 실행되었으며, 그중 7개 케이스는……
Testing Jev’s accuracy tonight for next best action prediction. The results: Canonical accuracy: 98.6% Generalization accuracy: 41.5% We ask Jev to predict the next state in a program from the current partial program. The suite has 25 cases and we ran it 20 times. Seven cases
· 0 likesOpen on X
More like this
JevBench: Jev 클래스 모델 최초 벤치마크 공개
JevBench는 Jev 클래스 모델을 위한 최초의 벤치마크입니다. TypeSafe AI의 원본 Jev가 75.3으로 1위, SemIf가 74.6으로 2위입니다. 전체 결과는 benchmarkheaven.com/jev-models에서 확인하세요. Link
Jev, 트롤리 문제 100회 연속 수행
게시물에 따르면 누군가 Jev에게 생명을 맡기고 트롤리 문제를 100회 연속 수행하게 했다. 첫 라운드에서 Jev는 99% 확률로 레버를 당겨 1명을 희생하고 5명을 구하는 선택을 했다.
