Qwen-Image-2.1-TailSteer

TailSteer는 Qwen-Image-2.1의 마지막 학습 단계로, 저자들은 기본 모델의 생성 및 편집 능력을 거의 그대로 유지하면서 이전 라운드의 결과를 다음 라운드 입력으로 사용할 때 누적되는 텍스처 드리프트를 줄인다고 설명합니다. Add & Preserve 평가의 10번째 라운드에서 편집 영역 외 지역의 PSNR은 1.22 dB 높고, LPIPS는 11.5% 낮습니다. 저장소에는 전체 가중치가 포함되어 있으며, 아키텍처와 로딩 방식이 공식 버전과 동일하여 모델 ID만 교체하면 되고 ComfyUI 사용법도 제공합니다. 평가 세트와 학습 데이터셋도 함께 공개됩니다.

TailSteer는 Qwen-Image-2.1의 마지막 학습 단계로, 저자들은 기본 모델의 생성 및 편집 능력을 거의 그대로 유지하면서 이전 라운드의 결과를 다음 라운드 입력으로 사용할 때 누적되는 텍스처 드리프트를 줄인다고 설명합니다. Add & Preserve 평가의 10번째 라운드에서 편집 영역 외 지역의 PSNR은 1.22 dB 높고, LPIPS는 11.5% 낮습니다. 저장소에는 전체 가중치가 포함되어 있으며, 아키텍처와 로딩 방식이 공식 버전과 동일하여 모델 ID만 교체하면 되고 ComfyUI 사용법도 제공합니다. 평가 세트와 학습 데이터셋도 함께 공개됩니다.

왜 중요한가 다중 라운드 편집 시 매번 출력이 다음 입력으로 사용되면 세부 사항이 점점 흐려지는데, 이 버전은 이러한 누적 드리프트를 줄이는 데 특화되어 있습니다.

Hugging Face 좋아요 40 · Hugging Face 상승 순위 39 · Hugging Face 다운로드 141

라이선스: 연구 전용 · ComfyUI: 모델 카드에 언급됨 · VRAM: 약 18 GB 추정

이유

  • Hugging Face any-to-any 상승 순위 3위 (관심도만 반영)
  • 모델 카드에 기본 모델과 TailSteer의 20라운드 연속 편집 비교 GIF 및 모든 프롬프트가 첨부됨

사용법

  • diffusers에서 QwenImage21Pipeline.from_pretrained("Lyricccco/Qwen-Image-2.1-TailSteer")를 사용하고, 각 라운드의 출력을 다음 라운드의 입력으로 전달합니다. ComfyUI는 모델 카드에 따라 기본 모델 파일을 교체합니다.

리스크

  • Qwen 연구 라이선스를 따르므로 상업적 사용 불가
  • 개선 수치는 저자가 자체 구축한 평가 세트에서 측정된 것이며, 약 7B 파라미터로 VRAM 요구 사항은 기본 모델과 유사합니다.

열기

抱脸 any-to-any 上升榜第 3

최신 AI 소식 보기