Back to explore

Ranking testów Jev: 96% nieudanych testów w pierwszej 10%

Na 113 błędach Defects4J model Jev sortuje zestawy testów tak, że 96% nieudanych testów pojawia się w pierwszych 10%, przewyższając BM25 i GPT-5.4 nano, aby szybciej wykrywać niepowodzenia buildów.

Question: given a patch, can you rank a test suite so the tests that fail show up first? On 113 Defects4J bugs, how often is a failing test in the first 10%? BM25 → 73% GPT-5.4 nano → 92% Jev → 96% fail your builds quicker instead of waiting :)

Ranking testów Jev: 96% nieudanych testów w pierwszej 10% 1
· 0 likesOpen on X