Jev、メール分類ベンチマークでGeminiに敗れるも実運用を検討
著者は、産業サプライヤーからのドイツ語・英語のビジネスメール1,565通を10カテゴリで分類するベンチマークでJevをテストし、Geminiより精度が低いものの、誤りの傾向に関心を持ち、実運用を検討している。
Jevが履歴書を採点した結果を示す。スコアが高いほど求人票から生成された可能性が高く、文書の統計的類似度分析と最終的なAI分析を組み合わせて採用詐欺を検出する。
Example result of #resumescrening for #hiringfraud, where #jev scores the resume, higher # being more likely to be generated from the JD + a statistical analysis of the documents to look for similarities and a final AI generated analysis.