Back to explore

Vergleich der Permutationsmittelung von Qwen mit Jev-Verbesserung

Der Autor berichtet, dass die Mittelung von 8 Permutationen der Qwen-Ausgaben den KL-Fehler um ~79% reduziert, alle 720 Permutationen um ~97%, während Jev nur eine geringfügige Verbesserung zeigt.

If Qwen favors the first option, let every answer take a turn there—then average the probabilities. Averaging 8 permutations reduced its KL error by ~79%; all 720 reduced it by ~97%, relative to average single-order error. Jev improved only slightly.

Vergleich der Permutationsmittelung von Qwen mit Jev-Verbesserung 1
· 0 likesOpen on X