Back to explore

Jev Skill Suggestion comparé aux modèles Claude

Jev Skill Suggestion comparé aux modèles Claude avec 26 compétences, 10 prompts et 3 exécutions chacun : Jev 90 % de précision et 330 ms en médiane ; Haiku 80 % et 1,24 s ; Sonnet/Opus/Fable 100 % et 2,2–4,5 s. Jev échange un peu de précision contre des décisions 4 à 14 fois plus rapides.

I benchmarked Jev Skill Suggestion against Claude models with 26 skills, 10 prompts, and 3 runs each - Jev: 90% accuracy, 330ms median - Haiku: 80%, 1.24s - Sonnet/Opus/Fable: 100%, 2.2–4.5s So Jev trades a bit of accuracy for a 4–14× faster decision, while keeping the skill

Jev Skill Suggestion comparé aux modèles Claude 1
· 67 likesOpen on X