Back to GitHub projects

pytest-jev : assertions sémantiques pour sorties LLM avec Jev

pytest-jev est un plugin pytest qui ajoute des assertions sémantiques pour les sorties LLM à l'aide du modèle Jev de TypeSafe, renvoyant des probabilités calibrées. Il prend en charge les vérifications holds/lacks/expect/choice/score, le cache, les seuils configurables et peut s'exécuter via OpenRouter.

该仓库是 pytest 插件,通过 TypeSafe Jev / System One 对 LLM 输出进行语义断言,README 包含可运行 demo、pytest 集成、benchmark 和使用文档,属于真实集成。

· 2 starsOpen on GitHub