Back to explore

Jev'e açık kaynak rakip Laya geldi: üretken olmayan karar modeli, T4'te sorgu başına 32,8 ms

Laya, Jev'in açık kaynak alternatifi: T4'te sorgu başına 32,8 ms çalışan, 100'den fazla dili destekleyen, tamamen ücretsiz ve kendi sunucunuzda barındırılabilen üretken olmayan bir karar modeli. Daha önce tekrarlı LLM çıkarımı gerektiren yönlendirme, öncelik belirleme ve guardrail görevlerini devralarak ajan dallanmasını büyük ölçüde hızlandırıyor.

JevにOSS対抗が速攻で出てきた Laya ・判断だけ返す非生成型モデル ・T4で32.8ms/問 ・100言語以上 ・完全無料・自前運用可 LLMで毎回考えさせてた振り分け・優先度判定・ガードレールを、この軽量モデルに逃がせる。 エージェント分岐の速度が段違いになるやつ。

· 0 likesOpen on X