Wikipedia bağlantı yarışı: binlerce seçenek arasından seçim
Model yüzlerce ya da binlerce bağlantı arasından sonraki adımı seçerek kısıtlı çıktılarla hızlı kararları gösterir. Gönderide 4:04 video var.
Jev modelinin harf sayma görevlerindeki performans testi
Bir kullanıcı, TypeSafe AI'nın Jev modelinin strawberry'deki r harflerini sayıp sayamadığını test ediyor ve performansının tipik LLM'ler gibi tutarsız olduğunu buluyor.
can @typesafeai Jev count the r's in strawberry? no. 47% says 3, 47% says 2. a coin flip, same as every LLM. On 70% on 168 test words, it undercounts doubled letters like everyone then I gave it the letters instead of the word: ["s","t","r","a","w","b","e","r","r","y"]
· 149 likesOpen on X
More like this
Jev ve TypeSafe AI ile anlamsal sorgulama kullanım örneği
Nathan LeClaire, Jev ve TypeSafe AI için anlamsal sorgulama kullanım örneğini paylaşıyor ve insanların henüz yüzeyi kazıdığını belirtiyor.
Jev ile Trump vs Kamala tartışması için canlı BS ölçer oluşturma
Yazar, Trump vs Kamala tartışmasının her cümlesinde canlı BS ölçer çalıştırmak için Jev'i kullandı; her adaya 5 evet/hayır sorusu, toplam 1.191 Jev çağrısı, 1,18M token, 415 ms medyan gecikme ve 0,0497 $ toplam maliyet.
