Back to explore

Bouwde een Jev-stijlmodel voor $20

Eldan deelt ervaring met het bouwen van Winnow-12B voor $20: voornamelijk getraind op synthetische beslissingsgegevens, met het echte werk in filteren, auditen, tegenvoorbeelden en curatie. Resultaat: #1 op When2Call en #6/50 op Decision Index 0.2, beter dan veel grotere modellen.

Built my own Jev-style model with $20. Winnow-12B was trained mostly on synthetic decision data. The real work was filtering, auditing, counterexamples, and curation. Result: #1 on When2Call, #6/50 on Decision Index 0.2, against much larger models. https://huggingface.co/EldanRing/Winnow-12B…

Bouwde een Jev-stijlmodel voor $20 1
· 0 likesOpen on X