Back to explore

Étude sur l'attribution de probabilités de Jev dans les tâches à réponses multiples

Le poste partage une étude sur le comportement des modèles dans les tâches à réponses multiples : les modèles peuvent classer les bonnes options avant les distracteurs tout en attribuant encore de faibles probabilités à certaines bonnes réponses. L'article évalue Jev et d'autres modèles sur MetaTool, HotpotQA et ECtHR.

多答案任务里,模型能把正确选项全排在干扰项前,却仍可能给其中一些正确项过低概率。 https://arxiv.org/abs/2610.29217 论文在 MetaTool、HotpotQA 和 ECtHR 上,读取 Jev、Liquid d1、GPT-6 Luna Decisions

Étude sur l'attribution de probabilités de Jev dans les tâches à réponses multiples 1Étude sur l'attribution de probabilités de Jev dans les tâches à réponses multiples 2
· 0 likesOpen on X