Back to GitHub projects

pytest-jev: การยืนยันเชิงความหมายสำหรับเอาต์พุต LLM ด้วย Jev

pytest-jev เป็นปลั๊กอิน pytest ที่เพิ่มการยืนยันเชิงความหมายสำหรับเอาต์พุต LLM โดยใช้โมเดล Jev ของ TypeSafe ซึ่งคืนค่าความน่าจะเป็นที่ปรับเทียบแล้ว รองรับการตรวจสอบ holds/lacks/expect/choice/score แคช เกณฑ์ที่กำหนดได้ และสามารถรันผ่าน OpenRouter

该仓库是 pytest 插件,通过 TypeSafe Jev / System One 对 LLM 输出进行语义断言,README 包含可运行 demo、pytest 集成、benchmark 和使用文档,属于真实集成。

· 2 starsOpen on GitHub