Em 55 solicitações reais de reconhecimento de intenção, o Jev teve média de 0,78 s contra 3 s do qwen3.8-flash, cerca de 4 vezes mais rápido.
55条真实的意图识别需求,qwen3.8-flash 平均3s/个, jev 平均0.78s ,4倍的差距 #jev #llm #agent #harness #deepseek #qwen
Malte Ubl executou o Jev da TypeSafe AI em uma avaliação de classificador existente: saturou a avaliação em qualidade e foi 6x mais rápido que o Gemini 2.5 Flash Lite.
O autor lançou uma extensão do DuckDB que usa o Jev da TypeSafe AI para classificar rapidamente linhas em arquivos CSV/Parquet ou tabelas DuckDB, cerca de 10 segundos para 1k linhas, mais rápido que um LLM e mais ergonômico que um classificador.
O autor resumiu cada artigo com o DeepSeek V4 Flash e enviou título, resumo e 24 tópicos candidatos ao Jev para classificação, processando 1.018 artigos de IA com custo total de US$ 0,08 e latência mediana de 256 ms por artigo.
