Back to GitHub projects

pytest-jev: семантические проверки выходных данных LLM с Jev

pytest-jev — это плагин pytest, добавляющий семантические проверки выходных данных LLM с помощью модели Jev от TypeSafe, возвращающей калиброванные вероятности. Поддерживает проверки holds/lacks/expect/choice/score, кэширование, настраиваемые пороги и запуск через OpenRouter.

该仓库是 pytest 插件,通过 TypeSafe Jev / System One 对 LLM 输出进行语义断言,README 包含可运行 demo、pytest 集成、benchmark 和使用文档,属于真实集成。

· 2 starsOpen on GitHub