Back to explore

Jev comme couche de routage centrale d'un agent : la décision passe de 9,2 s à 15 ms

L'auteur utilise Jev comme couche de routage centrale d'un agent, chargée de décider à quel modèle de langage transmettre chaque requête selon la complexité de la tâche. Auparavant, cette décision tournait sur Opus et prenait environ 9,2 secondes ; avec Jev, elle revient en environ 15 ms.

ניסיתי את Jev כשכבת הניתוב המרכזית אצלי באייג׳נט. הוא מחליט לאיזה מודל שפה להעביר את הבקשה לפי מורכבות המשימה, ובא לעזור בקבלת החלטות מהירות יותר. קודם ההחלטה הזאת רצה על Opus ולקחה בערך 9.2 שניות. עם Jev היא חוזרת בערך ב-15ms >>

Jev comme couche de routage centrale d'un agent : la décision passe de 9,2 s à 15 ms 1
· 0 likesOpen on X