Um usuário realizou um benchmark personalizado comparando Jev com GPT-Terra para ingestão de documentos na base de conhecimento da empresa, descobrindo que o Jev é 94% mais rápido e 98,6% mais barato, embora a confiabilidade não tenha atingido o esperado.
Ran a custom benchmark comparing Jev with GPT-Terra, the current main model powering document ingestion for our company knowledge base. The results are promising, although reliability was not quite where I expected it to be. As expected, Jev was 94% faster and 98.6% cheaper than
Malte Ubl executou o Jev da TypeSafe AI em uma avaliação de classificador existente: saturou a avaliação em qualidade e foi 6x mais rápido que o Gemini 2.5 Flash Lite.
O autor lançou uma extensão do DuckDB que usa o Jev da TypeSafe AI para classificar rapidamente linhas em arquivos CSV/Parquet ou tabelas DuckDB, cerca de 10 segundos para 1k linhas, mais rápido que um LLM e mais ergonômico que um classificador.
O autor resumiu cada artigo com o DeepSeek V4 Flash e enviou título, resumo e 24 tópicos candidatos ao Jev para classificação, processando 1.018 artigos de IA com custo total de US$ 0,08 e latência mediana de 256 ms por artigo.
