Back to explore

Gamen met Jev door logits uit Apples on-device model te halen

De auteur merkt op dat Jev alleen op basis van logits kan beslissen zonder te genereren, hackte daarom Apple Foundation Models om logits te extraheren en liet het model een spel spelen, lovend over de snelheid van de ingebouwde Mac-LLM.

Jevって要は、Logitsさえ取れれば生成せずに判断できるんよね。ということでApple Foundation ModelsをハックしてLogitsを取り出し、ゲームをプレイさせてみた。 Macにはじめから入ってるLLMでこれだけのスピードが出るのすごくない? #AppleIntelligence #Jev

· 2 likesOpen on X