Back to explore

Open-Source-Alternative zu Jev, Laya, veröffentlicht: nicht-generatives Entscheidungsmodell mit 32,8 ms/Abfrage auf T4

Laya ist eine Open-Source-Alternative zu Jev: ein nicht-generatives Entscheidungsmodell mit 32,8 ms pro Abfrage auf T4, Unterstützung für über 100 Sprachen, völlig kostenlos und selbst hostbar. Es übernimmt Routing, Priorisierung und Guardrails, die zuvor wiederholte LLM-Inferenz erforderten, und beschleunigt Agentenverzweigungen erheblich.

JevにOSS対抗が速攻で出てきた Laya ・判断だけ返す非生成型モデル ・T4で32.8ms/問 ・100言語以上 ・完全無料・自前運用可 LLMで毎回考えさせてた振り分け・優先度判定・ガードレールを、この軽量モデルに逃がせる。 エージェント分岐の速度が段違いになるやつ。

· 0 likesOpen on X