Jev活用のコツ:AIに文章を書かせない発想で問い合わせ対応が明確に
著者がJevの使用感を共有。最初は難しく感じたが、「AIに文章を書かせない」と捉えると一気に理解できた。問い合わせ対応を例に、従来はGPTやClaudeに丸投げして分析させるが、Jevは考え方が異なると述べている。
Balletの評価エージェントによる1,998件の複雑なサポートメッセージのテストで、Jevは0.095ドル・110秒、Claude Sonnet 5は4.34ドル・220秒。Sonnetの精度は約1ポイント高いものの、Jevは46倍安価。
Same 1,998 complex support messages. Same three questions. @typesafeai Jev: $0.095 and 110 seconds. @AnthropicAI Claude Sonnet 5: $4.34 and 220 seconds. Sonnet was about 1 point more accurate. Jev was 46× cheaper. That decision is what Ballet's evaluation agent does. It