返回探索

Jev模型多语言翻译稳定性评估分享

作者此前用Qwen 3.6测试LLM多语言翻译能力,因波动大需多次评估取中位数。改用Jev后,波动仅误差级别,因此一次评估即可。示例成本为7.5M tokens、$0.3165、耗时5分23秒。

LLMの英語からの多言語翻訳能力のテストは、今までQwen 3.6で評価していましたが、揺れが大きく、温度0だとその1つを固定することになるので、3回評価の中央値を使っていました。 Jevは揺れが誤差程度だったので、1回評価で作り直しました。 7.5Mtok, $0.3165, 5分23秒 https://github.com/7shi/multilingual-reader/blob/main/examples/tr/README.md…

Jev模型多语言翻译稳定性评估分享 1
· 2 次赞在 X 打开