Jev превосходит Gemini 2.5 Flash Lite по качеству и скорости в оценке классификатора
Malte Ubl прогнал Jev от TypeSafe AI на существующей оценке классификатора: он насытил оценку по качеству и оказался в 6 раз быстрее Gemini 2.5 Flash Lite.
Сравнительный тест FLock: модель THIS/THAT — 94,1%, Jev (размещённый System One) — 76,5%
FLock.io публикует записанный третьей стороной тест точности из 68 вопросов: модель THIS/THAT 1.0 от FLock набирает 94,1%, а Jev (размещённый сервис System One) — 76,5%. В посте это названо многообещающим результатом для специализированной модели принятия решений, при этом отмечается, что сложные задачи с поиском по графу или многошаговой арифметикой по-прежнему остаются трудными.
In a test of 68 questions recorded by a third party for accuracy: - FLock's THIS / THAT Model 1.0: 94.1% - Jev (hosted System One service): 76.5% A promising result for a specialised decision model. Complex tasks requiring graph search or multi-step arithmetic remain
· 2 likesOpen on X
More like this
Быстрая классификация строк в DuckDB с Jev
Автор выпустил расширение для DuckDB, использующее Jev от TypeSafe AI для быстрой классификации строк в CSV/Parquet-файлах или таблицах DuckDB: около 10 секунд на 1k строк — быстрее LLM и удобнее классификатора.
Классификация 1018 статей об ИИ с Jev за $0,08
Автор суммировал каждую статью с помощью DeepSeek V4 Flash, затем передал заголовок, аннотацию и 24 возможные темы в Jev для классификации. Обработано 1018 статей об ИИ при общих затратах $0,08 и медианной сквозной задержке 256 мс на статью.
