Back to explore

Een Jev-stijl beslissingsmodel draaien op een laptop

De auteur toont compacte Jev-stijl modellen gebaseerd op Qwen3.5 (0.8B–9B), waarbij 4B/9B in een 32GB Mac passen, CUDA en ROCm ondersteunen, en een supportticket in 495ms met kansen beantwoorden.

I RAN A DECISION MODEL ON MY LAPTOP TODAY 1. Kev: tiny Jev-style models built on Qwen3.5, 0.8B up to 9B 2. 4B/9B fit a 32GB Mac, also CUDA and ROCm 3. Answered a support ticket in 495ms with probabilities #OpenSource #LocalAI #ML

Een Jev-stijl beslissingsmodel draaien op een laptop 1
· 1 likesOpen on X