Wikipedia länkrace: välja bland tusentals alternativ
Modellen väljer nästa steg bland hundratals eller tusentals länkar och visar snabba beslut med begränsade outputs. Inlägget innehåller en video på 4:04.
Test av Jev-modellen på bokstavsräkningsuppgifter
En användare testar om TypeSafe AI:s Jev-modell kan räkna r:en i strawberry och finner att prestandan liknar typiska LLM:er med inkonsekventa resultat.
can @typesafeai Jev count the r's in strawberry? no. 47% says 3, 47% says 2. a coin flip, same as every LLM. On 70% on 168 test words, it undercounts doubled letters like everyone then I gave it the letters instead of the word: ["s","t","r","a","w","b","e","r","r","y"]
· 149 likesOpen on X
More like this
Användningsfall för semantisk fråga med Jev och TypeSafe AI
Nathan LeClaire delar ett användningsfall för semantisk fråga för Jev och TypeSafe AI och noterar att man bara har skrapat på ytan.
Bygga en live BS-mätare för Trump vs Kamala-debatten med Jev
Författaren använde Jev för att köra en live BS-mätare på varje mening i Trump vs Kamala-debatten, med 5 ja/nej-frågor per kandidat, totalt 1 191 Jev-anrop, 1,18M tokens, 415 ms medianlatens och en total kostnad på $0,0497.
