Jev превосходит Gemini 2.5 Flash Lite по качеству и скорости в оценке классификатора
Malte Ubl прогнал Jev от TypeSafe AI на существующей оценке классификатора: он насытил оценку по качеству и оказался в 6 раз быстрее Gemini 2.5 Flash Lite.
Автор сравнивает производительность Jev, Semif (qwen3.5-4B извлекает логиты из классификационной головы) и собственной дообученной BERT-подобной модели в интересующем сценарии: Jev превосходит Semif, но немного уступает собственной модели.
Recently I test the performance among Jev, Semif(qwen3.5-4B extract the logits from classification head) and my own fine-tuned bert-like model in one my interested scenario, Jev outperforms the Semif but a bit worse than mine