Écrire du C++ avec Jev en choisissant des tokens valides
L'auteur a expérimenté le modèle de décision/classification Jev de TypeSafe pour le C++ : à chaque étape, seuls des tokens valides étaient proposés.
John Wong partage les résultats de LFM3-VL-2B sur JevBench après 200 étapes de LoRA avec backbone gelé : dev 0,657 / test 0,452. Il précise que ce n'est pas comparable au 0,996 propriétaire, qu'il est environ 10 points derrière le meilleur open source de même taille et 25 à 30 points derrière Jev lui-même. Il compte poursuivre l'optimisation.
第一次跑分,先记个数。 LFM3-VL-2B 冻结主体 + 200 步 LoRA,JevBench 路线 0.657 dev / 0.452 test,原始准确率,跟闭源那 0.996 不是一把尺子。 同量级开源最好 0.753,我们差 10 个点,落在 2B 中下段;离 Jev 本体差一档,25 到 30 个点。 后面接着优化,数会动。