Back to explore

Compartilhando avaliação de estabilidade de tradução multilíngue do modelo Jev

O autor testou anteriormente a tradução multilíngue de LLMs com Qwen 3.6, que exigia várias avaliações devido à alta variabilidade. Após mudar para Jev, a variabilidade foi mínima, então uma única avaliação foi suficiente. Exemplo: 7,5M tokens, US$ 0,3165, 5min23s.

LLMの英語からの多言語翻訳能力のテストは、今までQwen 3.6で評価していましたが、揺れが大きく、温度0だとその1つを固定することになるので、3回評価の中央値を使っていました。 Jevは揺れが誤差程度だったので、1回評価で作り直しました。 7.5Mtok, $0.3165, 5分23秒 https://github.com/7shi/multilingual-reader/blob/main/examples/tr/README.md…

Compartilhando avaliação de estabilidade de tradução multilíngue do modelo Jev 1
· 2 likesOpen on X