Back to explore

Jev โอเพนซอร์ส: ตอบคำถามแบบมีชนิดในการส่งต่อครั้งเดียว

ผู้เขียนวางโมเดลที่สองไว้ข้าง LLM บน Spark โดยไม่เขียนข้อความ แต่รับสถานะและคำถามแบบมีชนิด แล้วตอบทุกคำถามในการส่งต่อครั้งเดียวพร้อมความน่าจะเป็น นี่คือเวอร์ชันโอเพนซอร์สของ Jev ที่ติดตั้งได้บน macOS และฮาร์ดแวร์ Nvidia

I put a second model next to the LLM on my Spark. It does not write text. You send it a state and typed questions, and it answers every one of them in a single forward pass, each with a probability. Yes it is Jev the open source version. It can be installed on macOS, any Nvidia

· 35 likesOpen on X