Back to explore

Laya, alternative open source à Jev : modèle de décision non génératif à 32,8 ms/requête sur T4

Laya est une alternative open source à Jev : un modèle de décision non génératif à 32,8 ms par requête sur T4, prenant en charge plus de 100 langues, entièrement gratuit et auto-hébergeable. Il permet de déléguer le routage, la priorisation et les garde-fous auparavant confiés à une inférence LLM répétée, accélérant fortement les branchements d'agents.

JevにOSS対抗が速攻で出てきた Laya ・判断だけ返す非生成型モデル ・T4で32.8ms/問 ・100言語以上 ・完全無料・自前運用可 LLMで毎回考えさせてた振り分け・優先度判定・ガードレールを、この軽量モデルに逃がせる。 エージェント分岐の速度が段違いになるやつ。

· 0 likesOpen on X