Back to explore

동일 diff에 대한 Jev 점수가 인자 순서와 라벨에 따라 달라짐

사용자가 Jev에 동일한 diff를 A와 B로 제공하고 어느 것이 더 나은지 물었고, 인자 순서와 라벨이 점수에 영향을 주며 A는 약 0.95로 안정적이고 순서를 바꾸면 결과가 달라졌다.

(2/5) hit some wild results. argument order and labels both move the score i gave jev 2 identical diffs (labelled A and B) and asked which is better. the results were shocking: fork A at 0.95 (five runs: 0.95, 0.96, 0.95, 0.96, 0.96) put B first with the same names and A is

동일 diff에 대한 Jev 점수가 인자 순서와 라벨에 따라 달라짐 1
· 2 likesOpen on X