Penulis menguji akurasi klasifikasi Jev untuk pra-penyaringan konten terkait AI di AIHOT dan hasilnya solid; GLM 5.3 Flash benar semua tetapi paling lambat.
Finally got some time to test Jev. Its classification accuracy is indeed pretty good. On AIHOT, for a small pre-screening task—judging whether incoming content is AI-related—it's solid. GLM 5.3 Flash is the only one that got everything 100% right, but it's also the slowest and
Malte Ubl menjalankan Jev dari TypeSafe AI pada evaluasi klasifikasi yang ada; hasilnya memenuhi evaluasi dari sisi kualitas dan 6x lebih cepat dari Gemini 2.5 Flash Lite.
Penulis merilis ekstensi DuckDB yang menggunakan Jev dari TypeSafe AI untuk mengklasifikasikan baris dengan cepat di file CSV/Parquet atau tabel DuckDB, sekitar 10 detik untuk 1k baris—lebih cepat dari LLM dan lebih ergonomis daripada classifier.
Penulis merangkum setiap makalah dengan DeepSeek V4 Flash, lalu mengirim judul, ringkasan, dan 24 topik kandidat ke Jev untuk diklasifikasikan, memproses 1.018 makalah AI dengan total biaya $0,08 dan latensi end-to-end median 256ms per makalah.
