Bộ LoRA do NineCrowns phát hành dành cho mô hình tạo sinh âm thanh và hình ảnh kết hợp MiniMax-H3, hỗ trợ lấy mẫu từ 3 đến 4 bước, bao gồm phiên bản chung cho video từ khung hình đầu/cuối, từ hình ảnh và từ văn bản, cùng phiên bản đồng bộ khẩu hình với nhiều ảnh tham chiếu. Mỗi phiên bản đều có bản nén khoảng 340 MiB và bản đầy đủ với rank 64. Tác giả cho biết trong quá trình chưng cất (distillation) đã kết hợp ba độ chính xác của mô hình cơ sở: GGUF Q4_K_M, INT8 và BF16, nên một LoRA duy nhất có thể dùng chung. Khi kết hợp với mô hình cơ sở Q4_K_M, có thể chạy trên VRAM dưới 9 GiB, tạo ra video dài tối đa 15 giây kèm âm thanh nổi. Kho lưu trữ đi kèm các workflow ComfyUI cho độ phân giải 480P và 768P, khuyến nghị CFG 1, lấy mẫu euler từ 3 đến 4 bước, và cường độ LoRA là 1.0.
Tại sao quan trọng Số bước lấy mẫu ít giúp rút ngắn đáng kể thời gian tạo video cục bộ, kho lưu trữ đi kèm 6 workflow ComfyUI; các con số về hiệu quả và VRAM đều do tác giả tự báo cáo.
Lượt thích (Hug) 3 · Điểm tăng (Hug) 3 · Lượt tải (Hug) 393
Giấy phép: Thương mại có điều kiện (giới hạn bởi mô hình cơ sở) · ComfyUI: Có thể sử dụng · VRAM: Không được ghi rõ
Giấy phép theo khu vực: Giấy phép trọng số mở của MiniMax H3 không bao gồm Liên minh châu Âu, Vương quốc Anh, Hàn Quốc và Hoa Kỳ (các Lãnh thổ bị loại trừ trong LICENSE), tại bốn khu vực này cần tìm sự cấp phép riêng từ MiniMax.
Lý do
- Cung cấp các thiết lập ComfyUI được khuyến nghị đầy đủ và các workflow có thể chạy trực tiếp, kèm theo video so sánh ở nhiều độ chính xác khác nhau
Cách sử dụng
- Trong ComfyUI, tải mô hình cơ sở MiniMax-H3 tương ứng với nhánh (dùng GGUF Q4_K_M nếu VRAM dưới 9 GB), áp dụng LoRA phiên bản FL2VA hoặc Ref2VA với cường độ 1.0, cấu hình BetaSamplingScheduler và MiniMaxH3SigmaShift theo thẻ mô hình
Rủi ro
- Các tuyên bố về độ sắc nét, mức tiêu thụ VRAM, quy mô huấn luyện, v.v. đều đến từ tác giả và chưa được xác minh độc lập
- Kho lưu trữ ghi nhãn Apache-2.0, nhưng mô hình cơ sở MiniMax-H3 có giấy phép thương mại có điều kiện và không bao gồm Liên minh châu Âu, Vương quốc Anh, Hàn Quốc và Hoa Kỳ; sử dụng tại bốn khu vực này cần tìm sự cấp phép riêng từ MiniMax