Dữ liệu Jevals: điểm chuẩn độc lập cho TypeSafe Jev
Dữ liệu benchmark độc lập so sánh Jev (mô hình System One) của TypeSafe AI với nhiều LLM về điểm quyết định, độ chính xác, hiệu chỉnh, chi phí và độ trễ.
AnyJev là một thư viện nghiên cứu mở giúp biến bất kỳ LLM mở nào thành mô hình quyết định kiểu Jev, cung cấp quyết định có kiểu, xác suất được hiệu chuẩn, hiệu chuẩn L0/L1 không cần huấn luyện và so sánh điểm chuẩn với Jev.
该仓库是一个实质性的研究项目,实现并评测了Jev风格的决策模型(AnyJev),将任意LLM转换为带类型化决策和可靠概率的模型,并与TypeSafe AI的Jev结果进行对比,属于深入研究Jev/System One思路的技术资源。