Back to explore

Lokal 421M-modell Laya slår moln-Jev i hastighet

Laya är en öppen System 1-beslutsmodell som körs lokalt med 421M parametrar, ~1GB inferensminne, 86,5 beslut/sek, P50 ~9ms, poäng 46; jämfört med Jev: 3,2 beslut/sek, 317ms API-round-trip, poäng 1.

🚨 A LOCAL 421M MODEL JUST ATE CLOUD JEV ON SPEED Laya is an open-source System 1 decision model that runs on your machine. Laya: 86.5 decisions/sec, P50 ~9ms, score 46 Jev: 3.2 decisions/sec, 317ms API round-trip, score 1 Ships with: — 421M params — ~1GB inference memory

Lokal 421M-modell Laya slår moln-Jev i hastighet 1
· 0 likesOpen on X