TypeSafe AI in Zitationsprüfer integriert
Nutzer hat @typesafeai in seinen Zitationsprüfer aufgenommen und lobt es; kostenlos testbar bei PaperTrellis, Tags Jev und KI in der Medizin. Link
Fragenstellung wichtiger als das Modell: Jev vs. Laya Test
Im selben Test mit 430 Fällen ließ Jev 68–92 % der falschen Agentenberichte durch und Laya 84–88 % bei gezeigten Beweisen; stattdessen eine wörtliche Frage gestellt, ließ Jev nur etwa 1 % Fehler durch. Die Fragestellung ist wichtiger als das Modell.
Same 430-case test, two AI judges. Shown the evidence, Jev passed 68 to 92% of the false agent reports and Laya 84 to 88%. Asked one literal question instead, Jev let through about 1% of wrong counts and files. The question matters more than the model. https://cejel.dev/experiments
· 0 likesOpen on X
More like this
JevBench: Erster Benchmark für Jev-Klasse-Modelle veröffentlicht
JevBench ist der erste Benchmark für Jev-Klasse-Modelle. Das originale Jev von TypeSafe AI führt mit 75,3, gefolgt von SemIf mit 74,6. Vollständige Ergebnisse unter benchmarkheaven.com/jev-models. Link
Jev löst 100 Trolley-Probleme in Folge
Der Beitrag besagt, dass jemand Jev sein Leben anvertraut und es 100 Trolley-Probleme in Folge lösen ließ; in der ersten Runde zog Jev mit 99 % Wahrscheinlichkeit den Hebel und opferte 1, um 5 zu retten.
