Это модель для расширения промптов, дообученная Wuli-art на базе Gemma4-12B-IT и специально обученная для генерации аудио и видео с помощью MiniMax-H3: формат FL2VA охватывает генерацию по тексту, первому кадру, последнему кадру и по обоим кадрам, а Ref2VA — генерацию по референсному изображению; оба варианта используют одни и те же веса. В репозитории представлены стандартная версия BF16 и квантованные версии FP8 / Int8, а также два независимых рабочих процесса ComfyUI; автор также создал страницу сравнения, где без расширения, оригинальная Gemma4, официальное расширение H3, переписывание lightx2v и данная модель демонстрируются параллельно на 9 примерах и 45 видеороликах.
Почему это важно Превращает краткий запрос в описание сцены, действий, движения камеры и звука; задачи с первым/последним кадром и с референсным изображением используют одни и те же веса, что позволяет напрямую интегрировать модель перед H3 в ComfyUI.
Объятия лайков 5 · Объятия роста рейтинга 5 · Объятия загрузок 0
Лицензия: разрешено коммерческое использование · ComfyUI: упомянуто в карточке модели · Видеопамять: ≈29 ГБ (оценка)
Лицензионные ограничения по регионам: лицензия на открытые веса MiniMax H3 не распространяется на Европейский союз, Великобританию, Южную Корею и США (Excluded Territories в LICENSE); в этих регионах требуется отдельная лицензия от MiniMax.
Причины
- Лицензия Apache-2.0, загрузка доступна через синхронизацию с ModelScope
- На странице сравнения можно синхронно воспроизводить видео и раскрывать исходные и расширенные промпты
Использование
- Загрузите файлы модели в ComfyUI, перетащите на холст файл minimax_h3_gemma4_pe_fl2va.json или minimax_h3_gemma4_pe_ref2va.json, выберите стандартную или квантованную версию в узле загрузки PE, после запуска подключите результат расширения к процессу генерации H3
Риски
- Для версии BF16 модели размером 12B, согласно оценке по количеству параметров, требуется около 29 ГБ видеопамяти; при меньшем объеме памяти выбирайте версии FP8 / Int8; для рабочих процессов также необходимо установить пользовательские узлы, упомянутые в карточке модели
- Результаты расширения предназначены для использования совместно с MiniMax-H3, лицензия H3 не действует в Европейском союзе, Великобритании, Южной Корее и США