Back to explore

Ранжування тестів Jev: 96% падаючих тестів у перших 10%

На 113 багах Defects4J модель Jev ранжує тестові набори так, що 96% падаючих тестів з’являються в перших 10%, випереджаючи BM25 і GPT-5.4 nano для швидшого виявлення збоїв збірки.

Question: given a patch, can you rank a test suite so the tests that fail show up first? On 113 Defects4J bugs, how often is a failing test in the first 10%? BM25 → 73% GPT-5.4 nano → 92% Jev → 96% fail your builds quicker instead of waiting :)

Ранжування тестів Jev: 96% падаючих тестів у перших 10% 1
· 0 likesOpen on X