THE JEV GUIDE · CURATED EDITION

Recherche scientifique.

Annonces, explications, démos et projets communautaires autour de TypeSafe Jev, organisés par thème. Chaque entrée renvoie à sa source sur X.

Sélection curée · Non exhaustive · Mise à jour manuelle

6757posts curés
3414vidéos originales

Realtime-Bench : Jev est le plus rapide, mais ne marque que 8 %

Principaux résultats de Realtime-Bench : le meilleur modèle GPT-6-Astra obtient 36 % ; Jev répond en moins d'une seconde, étant le modèle le plus rapide mais avec seulement 8 %. Le raisonnement n'aide que lorsque l'horloge est arrêtée ; avec un vrai chronomètre, penser lentement fait perdre. Même avec le temps figé, de nombreuses tâches restent non résolues.

Video frame from the original post: Realtime-Bench : Jev est le plus rapide, mais ne marque que 8 %

alphaXiv dévoile un modèle de décision 4B et le compare à Jev

alphaXiv indique avoir entraîné un modèle 4B sur 117 000 exemples de prise de décision ; ses performances sont presque identiques à celles de Jev, sauf en détection de sarcasme, avec une généralisation à des tâches inédites comme la gravité des discours haineux.

alphaXiv dévoile un modèle de décision 4B et le compare à Jev · original post image 1

Résultats Decision Bench : Jev 1.13 vs Clef Omni

Wasim Jalali partage les résultats du jour 9 de Decision Bench : Clef Omni se classe dernier sur 8 avec 87,2 % de précision, comparé à Jev 1.13 sur les questions cachées et le traitement du bruit. Il est prudent et laisse la plupart du bruit.

Résultats Decision Bench : Jev 1.13 vs Clef Omni · original post image 1Résultats Decision Bench : Jev 1.13 vs Clef Omni · original post image 2Résultats Decision Bench : Jev 1.13 vs Clef Omni · original post image 3

Un modèle dépasse Jev sur les benchmarks de garde sans données propriétaires

Carlos Muñoz Ferrandis rapporte qu'en une semaine, avec deux A100 et uniquement des jeux de données ouverts et des réponses synthétiques, son modèle bat Jev sur 6 des 8 benchmarks publics de garde, obtient une AUROC moyenne de 0,936 contre 0,934 pour Jev, et une latence de 90 ms par requête sur une seule A100.

Un modèle dépasse Jev sur les benchmarks de garde sans données propriétaires · original post image 1

Un article de Tencent compare Jev aux principaux LLM

Ce post cite un article de recherche de Tencent évaluant le jugement de Jev face à des changements d'ordre des options, montrant que Jev se trompe souvent même sur des problèmes solubles, ce qui correspond à l'expérience de l'auteur.

Un article de Tencent compare Jev aux principaux LLM · original post image 1

Classer des articles de modélisation robotique avec Jev

Ben Kolligs a utilisé Jev de @typesafe pour classer les titres et résumés d'articles sur la modélisation robotique, constatant que la part des modèles VLA est passée d'environ 10 % en 2023 à 38 % en janv.-sept. 2026, et celle des modèles du monde de 9 % à 18 %.

Classer des articles de modélisation robotique avec Jev · original post image 1

Étude comparative des modèles de décision inspirés de Jev

L'auteur compare les nouveaux modèles de décision basés sur #Jev avec de petits modèles locaux, indiquant que les API sont avantageuses avec peu d'exemples et que les résultats changent avec davantage de données. Link

Étude comparative des modèles de décision inspirés de Jev · original post image 1

Étude sur l'attribution de probabilités de Jev dans les tâches à réponses multiples

Le poste partage une étude sur le comportement des modèles dans les tâches à réponses multiples : les modèles peuvent classer les bonnes options avant les distracteurs tout en attribuant encore de faibles probabilités à certaines bonnes réponses. L'article évalue Jev et d'autres modèles sur MetaTool, HotpotQA et ECtHR. Link

Étude sur l'attribution de probabilités de Jev dans les tâches à réponses multiples · original post image 1Étude sur l'attribution de probabilités de Jev dans les tâches à réponses multiples · original post image 2