O autor testou a precisão de classificação do Jev para pré-triagem de conteúdo relacionado à IA no AIHOT, com resultados sólidos; o GLM 5.3 Flash acertou tudo, mas foi o mais lento.
Finally got some time to test Jev. Its classification accuracy is indeed pretty good. On AIHOT, for a small pre-screening task—judging whether incoming content is AI-related—it's solid. GLM 5.3 Flash is the only one that got everything 100% right, but it's also the slowest and
Malte Ubl executou o Jev da TypeSafe AI em uma avaliação de classificador existente: saturou a avaliação em qualidade e foi 6x mais rápido que o Gemini 2.5 Flash Lite.
O autor lançou uma extensão do DuckDB que usa o Jev da TypeSafe AI para classificar rapidamente linhas em arquivos CSV/Parquet ou tabelas DuckDB, cerca de 10 segundos para 1k linhas, mais rápido que um LLM e mais ergonômico que um classificador.
O autor resumiu cada artigo com o DeepSeek V4 Flash e enviou título, resumo e 24 tópicos candidatos ao Jev para classificação, processando 1.018 artigos de IA com custo total de US$ 0,08 e latência mediana de 256 ms por artigo.
