Технический блог Jev и ранний доступ
В конце треда Диого есть ссылки на официальный технический блог и вход в ранний доступ для дальнейшего чтения.
Обновление: следующий чекпоинт фактически достиг паритета калибровки Jev на MMLU, а 8-битная квантизация выглядит хорошо с ожидаемым локальным объёмом ~30 ГБ.
Update: next checkpoint has effectively reached Jev calibration parity on MMLU! Also 8 bit quant is looking good and should fit in ~30gb memory locally!