Back to explore

Tencent-Papier vergleicht Jev mit großen LLMs

Der Beitrag zitiert ein Forschungspapier von Tencent, das die Urteilsfähigkeit von Jev bei geänderter Reihenfolge der Optionen bewertet. Die Ergebnisse zeigen, dass Jev selbst bei lösbaren Problemen oft falsch liegt, was mit der Erfahrung des Autors übereinstimmt.

A paper by Tencent comparing the judgments of Jev with those of GPT, Claude, Gemini, and others. The results show that Jev often gets even solvable problems wrong when the order of the options is changed (Figure d). Somehow, this feels like it aligns with my experience.

Tencent-Papier vergleicht Jev mit großen LLMs 1
· 37 likesOpen on X