JevalsJevals/jevals-dataข้อมูล Jevals: เกณฑ์มาตรฐานอิสระสำหรับ TypeSafe Jev
ข้อมูลเกณฑ์มาตรฐานอิสระที่เปรียบเทียบ Jev (โมเดล System One) ของ TypeSafe AI กับ LLM หลายตัวในด้านคะแนนการตัดสินใจ ความแม่นยำ การปรับเทียบ ต้นทุน และความหน่วง
100CC-BY-4.0
ไม่มีภาพหลอน: การประเมิน TypeSafe Jev ใน RAG
การทดลองที่วัดผลสามรายการเกี่ยวกับภาพหลอนใน RAG: การตรวจสอบคำพูด, Jev ของ TypeSafe และ STAIR ของ IBM มีคำถามที่ให้คะแนน 850+ รายการ พร้อมการตอบสนองดิบ
仓库包含对TypeSafe AI Jev模型在RAG场景中的多项实测评估（幻觉抑制、重排序、路由、重试决策），提供详细报告与可复现数据，属于实质性测试研究。
· 2 starsOpen on GitHub
More like this
JevalsJevals/jevals-data
ReallyArtificialReallyArtificial/stuntdoublestuntdouble: การประเมินพร็อกซีเงาสำหรับ Jev
พร็อกซี Node ที่ไม่มี dependencies ซึ่งส่งต่อคำขอไปยัง TypeSafe Jev ขณะที่โมเดลท้องถิ่น (Kev, Laya) ตัดสินใจแบบคู่ขนาน และสร้างรายงานว่าคุณสามารถสลับได้หรือไม่
106MIT
NearCaiNearCai/JevLightJevLight: กรอบงานประเมินการควบคุมสัญญาณจราจรบน CityFlow
กรอบงานควบคุมสัญญาณจราจรที่ใช้ CityFlow ซึ่งประเมินตัวควบคุม LLM ที่เข้ากันได้กับ TypeSafe Jev และ OpenAI ควบคู่กับเกณฑ์พื้นฐานแบบกฎและแบบการเรียนรู้เสริมแรงผ่านไปป์ไลน์จำลองเดียวกัน
000MIT