TypeSafe AI in Zitationsprüfer integriert
Nutzer hat @typesafeai in seinen Zitationsprüfer aufgenommen und lobt es; kostenlos testbar bei PaperTrellis, Tags Jev und KI in der Medizin. Link
Modell übertrifft Jev bei Guard-Benchmarks ohne proprietäre Daten
Carlos Muñoz Ferrandis berichtet, dass ihr Modell in einer Woche mit zwei A100 und nur offenen Datensätzen sowie synthetischen Antworten Jev bei 6 von 8 öffentlichen Guard-Benchmarks schlägt, einen mittleren AUROC von 0,936 im Vergleich zu Jevs 0,934 erreicht und auf einer einzelnen A100 90 ms pro Anfrage benötigt.
It took us one week. Two A100s. Zero Alinia data. Only open datasets and synthetic replies. - Beating Jev on 6 of 8 public guard benchmarks. - 0.936 mean AUROC vs Jev’s 0.934 - 90 ms per request on one A100 .
· 0 likesOpen on X
More like this
JevBench: Erster Benchmark für Jev-Klasse-Modelle veröffentlicht
JevBench ist der erste Benchmark für Jev-Klasse-Modelle. Das originale Jev von TypeSafe AI führt mit 75,3, gefolgt von SemIf mit 74,6. Vollständige Ergebnisse unter benchmarkheaven.com/jev-models. Link
Jev löst 100 Trolley-Probleme in Folge
Der Beitrag besagt, dass jemand Jev sein Leben anvertraut und es 100 Trolley-Probleme in Folge lösen ließ; in der ersten Runde zog Jev mit 99 % Wahrscheinlichkeit den Hebel und opferte 1, um 5 zu retten.
