Back to explore

Condivisione della valutazione della stabilità di traduzione multilingue del modello Jev

L'autore ha precedentemente testato la traduzione multilingue dei LLM con Qwen 3.6, che richiedeva più valutazioni a causa dell'elevata varianza. Dopo il passaggio a Jev, la varianza era minima, quindi una singola valutazione è bastata. Esempio: 7,5M token, 0,3165 $, 5 minuti 23 secondi.

LLMの英語からの多言語翻訳能力のテストは、今までQwen 3.6で評価していましたが、揺れが大きく、温度0だとその1つを固定することになるので、3回評価の中央値を使っていました。 Jevは揺れが誤差程度だったので、1回評価で作り直しました。 7.5Mtok, $0.3165, 5分23秒 https://github.com/7shi/multilingual-reader/blob/main/examples/tr/README.md…

Condivisione della valutazione della stabilità di traduzione multilingue del modello Jev 1
· 2 likesOpen on X