TypeSafe AI in Zitationsprüfer integriert
Nutzer hat @typesafeai in seinen Zitationsprüfer aufgenommen und lobt es; kostenlos testbar bei PaperTrellis, Tags Jev und KI in der Medizin. Link
Bias-Probleme von Jev-as-Judge bei risikoreichen KI-Evaluierungen
Der Nutzer weist darauf hin, dass Jev-as-Judge Schwere- und Milde-Bias aufweist, die entfernt werden müssen, um für risikoreiche KI-Bewertungen nützlich zu sein.
Have you noticed that Jev-as-Judge has severity and leniency bias that you have to remove to be useful for high stakes AI Evals?
· 0 likesOpen on X
More like this
JevBench: Erster Benchmark für Jev-Klasse-Modelle veröffentlicht
JevBench ist der erste Benchmark für Jev-Klasse-Modelle. Das originale Jev von TypeSafe AI führt mit 75,3, gefolgt von SemIf mit 74,6. Vollständige Ergebnisse unter benchmarkheaven.com/jev-models. Link
Jev löst 100 Trolley-Probleme in Folge
Der Beitrag besagt, dass jemand Jev sein Leben anvertraut und es 100 Trolley-Probleme in Folge lösen ließ; in der ersten Runde zog Jev mit 99 % Wahrscheinlichkeit den Hebel und opferte 1, um 5 zu retten.
