Jev、メール分類ベンチマークでGeminiに敗れるも実運用を検討
著者は、産業サプライヤーからのドイツ語・英語のビジネスメール1,565通を10カテゴリで分類するベンチマークでJevをテストし、Geminiより精度が低いものの、誤りの傾向に関心を持ち、実運用を検討している。
著者は、Jevが話題になった直後にOpenAIやCloudflareが類似モデルを出してくることを挙げ、SaaSやAIaaS事業の難しさが増すと述べている。
今度はCloudaflareが「Jev」みたいな判定モデルをリリース 先日まで「Jevすごい!」と盛り上がっていたのに、すぐOpenAIやCloudflareが出してくる所を見ると、SaaSやAIaaSとかのビジネスは本当に難しくなるなあ