James Long氏がJevで銀行生データから支払先説明を抽出テスト
James Long氏がJevを使い、個人財務ツールで最も厄介な問題である銀行生データからの支払先説明生成に挑戦。初回で約95%の完成度に達し、プロンプト改善の余地が多数あると述べている。
Jevが確率を返す際、デフォルトの0.5しきい値が決済チェックに十分か、調整すべきかを議論。
Jev gives you a probability. Getting a yes/no needs a threshold, and the default is 0.5. 0.51 and 0.99 both come back true. Fine on a spam filter. Not on a payment check. Do you change it, or leave it?