Back to explore

Laya, öppen källkods-alternativ till Jev, lanseras: icke-generativ beslutsmodell på 32,8 ms/fråga på T4

Laya är ett öppen källkods-alternativ till Jev: en icke-generativ beslutsmodell på 32,8 ms per fråga på T4, stöd för över 100 språk, helt gratis och självhostbar. Den tar över routing, prioritering och guardrails som tidigare krävde upprepad LLM-inferens och snabbar upp agentförgreningar avsevärt.

JevにOSS対抗が速攻で出てきた Laya ・判断だけ返す非生成型モデル ・T4で32.8ms/問 ・100言語以上 ・完全無料・自前運用可 LLMで毎回考えさせてた振り分け・優先度判定・ガードレールを、この軽量モデルに逃がせる。 エージェント分岐の速度が段違いになるやつ。

· 0 likesOpen on X