MOSS-Image-pose-controlnet

Il s'agit d'un modèle de contrôle entraîné selon la méthode LoRA d'édition : le squelette coloré généré par DWPose (sur fond noir, incluant le corps, les mains et le visage) est transmis comme unique image de référence au nœud Text Encode MOSS-Image Edit. Le modèle suit la pose du squelette, tandis que le personnage, les vêtements et la scène sont déterminés par le prompt. Le rang des couches linéaires LoRA est 64, celui des couches convolutives est 16, et l'étape sélectionnée est la 4500. L'auteur a également publié deux LoRA similaires pour le contrôle par carte de profondeur et par segmentation en aplats de couleur. Le dépôt inclut un workflow ComfyUI et plusieurs exemples d'images.

Il s'agit d'un modèle de contrôle entraîné selon la méthode LoRA d'édition : le squelette coloré généré par DWPose (sur fond noir, incluant le corps, les mains et le visage) est transmis comme unique image de référence au nœud Text Encode MOSS-Image Edit. Le modèle suit la pose du squelette, tandis que le personnage, les vêtements et la scène sont déterminés par le prompt. Le rang des couches linéaires LoRA est 64, celui des couches convolutives est 16, et l'étape sélectionnée est la 4500. L'auteur a également publié deux LoRA similaires pour le contrôle par carte de profondeur et par segmentation en aplats de couleur. Le dépôt inclut un workflow ComfyUI et plusieurs exemples d'images.

Pourquoi c'est important MOSS-Image permet désormais de contrôler la pose des personnages. Le même auteur a également publié deux LoRA de contrôle basés sur les cartes de profondeur et de segmentation.

J'aime 11 · Score de tendance 11 · Téléchargements 0

Licence : usage commercial autorisé · ComfyUI : mentionné dans la fiche du modèle · VRAM : non spécifiée

Raison

  • Licence Apache-2.0 ; pour chaque série d'exemples, l'image de contrôle et les résultats obtenus avec trois prompts différents sont fournis

Utilisation

  • Chargez MOSS-Image-SFT, régllez l'intensité du LoRA sur 1.0, définissez le format d'édition sur ai-toolkit (à configurer dans les deux nœuds d'encodage, positif et négatif), utilisez 30 étapes, une CFG de 4, et le sampler euler + simple ; extrayez le squelette à l'aide de DWPose via comfyui_controlnet_aux

Risques

  • Il ne s'agit pas de l'adaptateur officiel de MOSS pour la fusion couleur/profondeur ; les membres manquants dans le squelette ne peuvent pas être complétés par le prompt
  • Entraîné et recommandé uniquement pour MOSS-Image-SFT

Ouvrir

抱脸 image-to-image 新模型

Parcourir les dernières actualités IA