Back to explore

Qwenの順列平均とJevの改善比較

著者は、Qwenの出力を8順列で平均するとKL誤差が約79%減少し、720順列では約97%減少するが、Jevの改善はわずかであると報告しています。

If Qwen favors the first option, let every answer take a turn there—then average the probabilities. Averaging 8 permutations reduced its KL error by ~79%; all 720 reduced it by ~97%, relative to average single-order error. Jev improved only slightly.

Qwenの順列平均とJevの改善比較 1
· 0 likesOpen on X