Back to explore

Jev utilise une seule passe avant pour la classification multitâche et peut remplacer les LLM de classification sémantique

Le post interprète la sortie du décodeur de Jev : au lieu d'une prédiction autorégressive du token suivant, il effectue une classification multitâche en une seule passe avant, ce qui permet de l'utiliser pour la classification sémantique et de remplacer directement un LLM existant, en routant l'information par le sens.

#Jev、デコーダーからの出力を、自己回帰的な次単語予測するんじゃなくて、単一フォワードパスでマルチタスク分類する、ってことで、「意味による分類」って用途で使われたLLMをそのまま置き換えるができると理解した。意味を通した情報のルーティング、ってことか。

· 1 likesOpen on X