Jev против моделей генерации текста
Jev не генерирует свободный текст. Сравнительное видео показывает различие между параллельным принятием решений и генерацией текста по токенам.
Jev от TypeSafe AI: суждение и вероятность без генерации
Автор обобщает модель Jev от TypeSafe AI: она возвращает только суждения и вероятности вместо генерации текста ответа, и делится сценариями использования.
自分も悩んでた「LLMに判断させるか、生成させるか」問題、ようやく整理できた気がする。 TypeSafe AIが出した「Jev」、回答文を一切生成せず判断と確率だけ返す設計が面白い。要点と、自分なら使う場面をまとめておく。 🧵 #AI実装ノウハウ
· 0 likesOpen on X
More like this
Цены, оценки и происхождение названия Jev
Тред запуска объясняет оценки рабочих процессов code + AI, объявленную цену входных токенов и бесплатные выходные токены.
Модель Jev: генерация вероятностей для принятия решений, в 200 раз быстрее и в 400 раз дешевле LLM
Эта модель создана для принятия решений, а не генерации текста: она выдаёт вероятности для каждого варианта параллельно, а не ответ токен за токеном. Автор приводит упрощённый пример сравнения обычных LLM с этой моделью Jev.
