TypeSafe AI, 인용 검사 도구에 추가
사용자가 인용 검사기에 @typesafeai를 추가하고 호평했으며 PaperTrellis에서 무료로 사용 가능. Jev와 의료 AI 태그 포함. Link
독점 데이터 없이 Jev를 능가하는 모델, 가드 벤치마크에서 우위
Carlos Muñoz Ferrandis는 일주일, A100 2대, 공개 데이터셋과 합성 응답만으로 8개 공개 가드 벤치마크 중 6개에서 Jev를 이겼고, 평균 AUROC는 Jev의 0.934 대비 0.936, 단일 A100에서 요청당 90ms를 달성했다고 밝혔다.
It took us one week. Two A100s. Zero Alinia data. Only open datasets and synthetic replies. - Beating Jev on 6 of 8 public guard benchmarks. - 0.936 mean AUROC vs Jev’s 0.934 - 90 ms per request on one A100 .
· 0 likesOpen on X
More like this
JevBench: Jev 클래스 모델 최초 벤치마크 공개
JevBench는 Jev 클래스 모델을 위한 최초의 벤치마크입니다. TypeSafe AI의 원본 Jev가 75.3으로 1위, SemIf가 74.6으로 2위입니다. 전체 결과는 benchmarkheaven.com/jev-models에서 확인하세요. Link
Jev, 트롤리 문제 100회 연속 수행
게시물에 따르면 누군가 Jev에게 생명을 맡기고 트롤리 문제를 100회 연속 수행하게 했다. 첫 라운드에서 Jev는 99% 확률로 레버를 당겨 1명을 희생하고 5명을 구하는 선택을 했다.
