Back to explore

20ドルでJevスタイルのモデルを構築

Eldan氏が20ドルでWinnow-12Bを構築した経験を共有。主に合成意思決定データで学習し、実際の作業はフィルタリング、監査、反例、キュレーション。When2Callで1位、Decision Index 0.2で6/50位を獲得し、はるかに大きなモデルを上回った。

Built my own Jev-style model with $20. Winnow-12B was trained mostly on synthetic decision data. The real work was filtering, auditing, counterexamples, and curation. Result: #1 on When2Call, #6/50 on Decision Index 0.2, against much larger models. https://huggingface.co/EldanRing/Winnow-12B…

20ドルでJevスタイルのモデルを構築 1
· 0 likesOpen on X