MOSS-Image-pose-controlnet

이것은 편집 LoRA 방식으로 학습된 제어 모델입니다. DWPose로 생성된 컬러 스켈레톤(검은 배경에 신체, 손, 얼굴 포함)을 유일한 참조 이미지로 Text Encode MOSS-Image Edit 노드에 전달하면, 모델은 스켈레톤의 포즈를 따르며 캐릭터, 의상, 장면은 프롬프트로 결정됩니다. LoRA 선형 레이어 rank 64, 컨볼루션 레이어 rank 16을 사용하며, 4500번째 스텝을 선택합니다. 저자는 심도 맵 제어와 평면 색상 블록 분할 제어 두 가지 유사한 LoRA도 함께 공개했으며, 저장소에는 ComfyUI 워크플로우와 여러 예시 이미지가 포함되어 있습니다.

이것은 편집 LoRA 방식으로 학습된 제어 모델입니다. DWPose로 생성된 컬러 스켈레톤(검은 배경에 신체, 손, 얼굴 포함)을 유일한 참조 이미지로 Text Encode MOSS-Image Edit 노드에 전달하면, 모델은 스켈레톤의 포즈를 따르며 캐릭터, 의상, 장면은 프롬프트로 결정됩니다. LoRA 선형 레이어 rank 64, 컨볼루션 레이어 rank 16을 사용하며, 4500번째 스텝을 선택합니다. 저자는 심도 맵 제어와 평면 색상 블록 분할 제어 두 가지 유사한 LoRA도 함께 공개했으며, 저장소에는 ComfyUI 워크플로우와 여러 예시 이미지가 포함되어 있습니다.

왜 중요한가 MOSS-Image에 제어 가능한 인물 포즈 기능이 추가되었으며, 같은 저자는 심도 맵과 분할 맵 두 가지 제어 LoRA도 공개했습니다.

좋아요 11 · 상승 점수 11 · 다운로드 수 0

라이선스: 상업적 사용 가능 · ComfyUI: 모델 카드에 언급됨 · VRAM: VRAM 정보 미표기

이유

  • Apache-2.0 라이선스; 예시 이미지 각 그룹마다 제어 이미지와 세 가지 다른 프롬프트의 결과가 제시됨

사용법

  • MOSS-Image-SFT 로드, LoRA 강도 1.0, 편집 형식을 ai-toolkit로 설정(양수 및 음수 인코딩 노드 모두 설정 필요), 30 스텝, CFG 4, euler + simple 사용; 스켈레톤은 comfyui_controlnet_aux의 DWPose로 추출

리스크

  • 공식 MOSS 색상/심도 결합 어댑터가 아님; 스켈레톤에 없는 신체 부위는 프롬프트로도 생성되지 않음
  • MOSS-Image-SFT에서만 학습 및 권장됨

열기

抱脸 image-to-image 新模型

최신 AI 소식 보기