Jev im Vergleich zu textgenerierenden Modellen
Jev erzeugt keinen freien Text. Ein Vergleichsvideo zeigt den Unterschied zwischen paralleler Entscheidungsfindung und tokenweiser Texterzeugung.
Jev ist kein besseres LLM, sondern eine andere Systemkategorie
Der Beitrag weist darauf hin, dass die meisten KI-Teams 80 % der Inferenz mit einem 100-mal teureren Modell ausführen, und stellt Jev von TypeSafe AI als andere Systemkategorie vor.
Most AI teams are running 80% of their inference workload through a model that costs 100x more than it needs to. Not because they want to. Because there was no alternative. The alternative is here. Jev by @typesafeai is not a better LLM. It is a different category. A System
· 1 likesOpen on X
More like this
Preise, Evaluationen und der Name Jev
Der Launch Thread erklärt Code plus AI Workflow Evaluationen, den angekündigten Eingabepreis und kostenlose Ausgabetokens.
Jev-Modell: Wahrscheinlichkeitsgenerierung für Entscheidungen, 200× schneller und 400× günstiger als LLMs
Dieses Modell ist für Entscheidungsfindung statt Textgenerierung konzipiert und gibt Wahrscheinlichkeiten für jede Option parallel aus, anstatt Antworten Token für Token zu liefern. Der Autor zeigt ein vereinfachtes Beispiel für normale LLMs im Vergleich zu diesem Jev-Modell.
