Tên gốc: MOSS-Image-IDM-2-Steps
Dựa trên MOSS-Image-SFT, sau khi được chưng cất từng bước qua lodestones 8 bước và darask 0 4 bước, mô hình được huấn luyện bằng hàm mất mát IDM (Intrinsic Distribution Matching) để trở thành LoRA tạo ảnh trong 2 bước, không cần CFG. Tác giả cho biết trên các prompt chứa nhiều văn bản được giữ lại để đánh giá, một số prompt cho kết quả ở 2 bước tốt hơn so với mô hình giáo viên 50 bước; ngoài ra còn có một phiên bản chỉnh sửa thử nghiệm v2.
Tại sao quan trọng MOSS có thể tạo ảnh poster, menu chứa văn bản chỉ với 2 bước, đây là bản cài đặt mã nguồn mở đầu tiên trong cộng đồng được huấn luyện theo phương pháp IDM.
Huy hiệu Hugging Face 42 · Điểm tăng trên Hugging Face 42 · Lượt tải trên Hugging Face 0
Giấy phép: Được phép sử dụng thương mại · ComfyUI: Có đề cập trong thẻ mô hình · VRAM: Không ghi rõ
Lý do
- Tác giả chủ động ghi rõ phiên bản chỉnh sửa v2 làm giảm chất lượng tạo ảnh từ văn bản chung, vui lòng dùng v1 cho tác vụ tạo ảnh từ văn bản
- Có kèm Demo Space trực tuyến và bộ ảnh mẫu
Cách dùng
- Dùng v1 trong thư mục runs/idm/export/000750/ để tạo ảnh từ văn bản; dùng v2 ở thư mục gốc của kho lưu trữ hoặc adapter_v2/ để chỉnh sửa thuộc tính cục bộ, chạy 2 bước, không bật CFG
Rủi ro
- Đây là bản cài đặt của cộng đồng, các đánh giá chỉ là so sánh quy mô nhỏ do tác giả thực hiện; hai checkpoint có mục đích sử dụng khác nhau, chọn sai sẽ làm giảm chất lượng