Back to explore

Partage d'évaluation de la stabilité de traduction multilingue du modèle Jev

L'auteur testait auparavant la traduction multilingue des LLM avec Qwen 3.6, nécessitant plusieurs évaluations en raison de la forte variance. Après être passé à Jev, la variance était minime, une seule évaluation suffisait. Exemple : 7,5M tokens, 0,3165 $, 5 min 23 s.

LLMの英語からの多言語翻訳能力のテストは、今までQwen 3.6で評価していましたが、揺れが大きく、温度0だとその1つを固定することになるので、3回評価の中央値を使っていました。 Jevは揺れが誤差程度だったので、1回評価で作り直しました。 7.5Mtok, $0.3165, 5分23秒 https://github.com/7shi/multilingual-reader/blob/main/examples/tr/README.md…

Partage d'évaluation de la stabilité de traduction multilingue du modèle Jev 1
· 2 likesOpen on X