TypeSafe AI ajouté à un vérificateur de citations
L'utilisateur a ajouté @typesafeai à son vérificateur de citations et le trouve excellent ; essai gratuit sur PaperTrellis, tags Jev et IA médicale. Link
Jev est à la traîne des LLM avancés sur les cas difficiles
Des tests indépendants montrent que Jev fait jeu égal avec les LLM sur la classification de sécurité et le routage d'outils, mais est en retrait sur les tâches ouvertes.
4/ The catch: they lose on hard cases. In one benchmark Jev scored 72.5% vs 84% for a frontier LLM. An independent test found decision models tie LLMs on safety classification and tool routing, and fall behind on open-ended tasks.
· 0 likesOpen on X
More like this
JevBench : premier benchmark pour les modèles de classe Jev
JevBench est le premier benchmark pour les modèles de classe Jev. Le Jev original de TypeSafe AI est en tête avec 75,3, suivi de SemIf à 74,6. Résultats complets sur benchmarkheaven.com/jev-models. Link
Jev réalise 100 dilemmes du tramway consécutifs
Le post indique que quelqu'un a confié sa vie à Jev et lui a fait réaliser 100 dilemmes du tramway consécutifs ; au premier tour, Jev a choisi d'actionner le levier avec 99 % de probabilité, sacrifiant 1 pour en sauver 5.
