Back to explore

Mô hình cục bộ vs Jev: thử nghiệm so sánh độ chính xác

Tác giả đã chạy 8 mô hình cục bộ trên Mac với cùng các câu hỏi JevBench. Mô hình 4B khớp với Jev trên văn bản ngắn, nhưng với văn bản phức tạp, tất cả đều kém hơn 17+ điểm.

New article: how accurate are local models vs Jev, a cloud System One classifier? I ran 8 on a Mac, same JevBench questions. A 4B model matched Jev on short texts. On complex ones, all were 17+ points behind. https://rockyshikoku.medium.com/jev-style-text-classification-system-one-run-locally-how-accurate-can-it-get-57f30ed3594a… Video: minicpm5-2b classifying messages.

· 0 likesOpen on X