Back to explore

Chia sẻ đánh giá độ ổn định dịch đa ngôn ngữ của mô hình Jev

Trước đây tác giả thử nghiệm khả năng dịch đa ngôn ngữ của LLM với Qwen 3.6, cần nhiều lần đánh giá do biến động lớn. Sau khi chuyển sang Jev, biến động chỉ ở mức sai số, nên chỉ cần đánh giá một lần. Ví dụ: 7,5M token, 0,3165 USD, 5 phút 23 giây.

LLMの英語からの多言語翻訳能力のテストは、今までQwen 3.6で評価していましたが、揺れが大きく、温度0だとその1つを固定することになるので、3回評価の中央値を使っていました。 Jevは揺れが誤差程度だったので、1回評価で作り直しました。 7.5Mtok, $0.3165, 5分23秒 https://github.com/7shi/multilingual-reader/blob/main/examples/tr/README.md…

Chia sẻ đánh giá độ ổn định dịch đa ngôn ngữ của mô hình Jev 1
· 2 likesOpen on X