Back to explore

Integrazione di Jev in MiniMax H3 per accelerare la generazione video

L'autore ha integrato Jev in MiniMax H3, usando Jev per rendere sparsa l'elaborazione Attention, determinando l'importanza per livello e selezionando tassi di sparsità dell'1%, 3%, 5% e 10%, riducendo il tempo di generazione video su RTX4070 da 6 min 7 s a 3 min.

I integrated the popular Jev into MiniMax H3 to speed up video generation! Using Jev for sparsification of Attention processing. ・Jev determines importance per layer (4-step, targeting 49 layers) ・Jev selects sparsity rates of 1%, 3%, 5%, 10% On RTX4070, from 6 min 7 sec → 3

· 249 likesOpen on X