Jevでコードベース分類器を構築
開発者がJevでコードベース分類器を構築し、エージェントが生成する過剰設計なコードの解決策になり得ると述べ、次のテスト対象を尋ねている。
投稿によると、Everyの欠陥テストでJevは6/7の埋め込み問題を検出(Fable 5.1は7/7)、速度は約25倍。著者はjev-1.13.0の固定、毎回の呼び出しでログ確率とバージョンを記録し、自前のラベルで閾値を再調整することを推奨。
In Every's defect test (@danshipper) Jev caught 6/7 planted issues vs 7/7 for Fable 5.1, at ~25x the speed. Pin jev-1.13.0, log probs + version on every call, recalibrate thresholds on your own labels. https://every.to/vibe-check/mini-vibe-check-typesafe-s-jev-judged-everything-i-ve-written-in-0-7-seconds…