Back to explore

Jev nel benchmark di programmazione di state machine

Dorian Smiley condivide un benchmark: Gemini Flash Lite 3.1 ottiene 75,6% complessivo, Jev 72,2% complessivo, 100% nei compiti canonici e circa 6 volte più veloce; gli errori si concentrano su composizioni nuove.

New state machine programming benchmark: Gemini Flash Lite 3.1: 75.6% overall, 66.7% generalization. Jev: 72.2% overall, 61.4% generalization, but 100% on canonical tasks and ~6× faster. Jev’s misses are concentrated in specific novel compositions, not broad task failure. It is

Jev nel benchmark di programmazione di state machine 1
· 1 likesOpen on X