Оригинальное название: MOSS-Image-IDM-2-Steps
На основе MOSS-Image-SFT, после поэтапной дистилляции через lodestones за 8 шагов и darask за 0 4 шагов, обучена как LoRA за 2 шагов без использования CFG с помощью функции потерь IDM (внутреннее согласование распределений). Авторы утверждают, что на выделенных промптах с плотным текстом результаты некоторых промптов за 2 шагов превосходят модель-учитель за 50 шагов; также существует экспериментальная версия для редактирования v2.
Почему это важно MOSS может генерировать изображения с текстом (плакаты, меню) всего за 2 шагов. Это первая открытая реализация в сообществе, обученная по методу IDM.
Лайки «обнимашек» 42 · Рост рейтинга «обнимашек» 42 · Загрузки «обнимашек» 0
Лицензия: разрешено коммерческое использование · ComfyUI: упомянуто в карточке модели · Видеопамять: не указана
Причины
- Авторы явно указывают, что версия для редактирования v2 ухудшает качество генерации изображений по тексту; для генерации изображений используйте v1
- Приложены онлайн-демо Space и группы примеров
Использование
- Для генерации изображений по тексту используйте v1 из папки runs/idm/export/000750/; для локального редактирования атрибутов используйте v2 из корня репозитория или папки adapter_v2/, за 2 шагов, без CFG
Риски
- Это реализация сообщества, оценка основана на собственном небольшом сравнении авторов; две контрольные точки имеют разное назначение, неправильный выбор ухудшит результат