Viggle Image Swap:按角色设定图替换照片里的人

Viggle 发布的 Qwen-Image-2.1 LoRA(rank 256):把照片里的人整个换成角色设定图里的角色,脸、头发、身体和衣服都换,原图的姿势、表情、构图、背景和光线保留。每个要换的人配一张 1536×1024 的设定图(左三分之一是肖像,右三分之二是正、侧、背三视图);也可以把真人脸照贴进肖像格,但单独一张照片不支持。默认 6 步、不用 CFG;加 --turbo 时前 2 步由 LoRA 定人物,后 6 步交给 Qwen-Image-2.1-Turbo 补细节。输出约 1 MP。官方在一张 B200 上测得每张约 2.2 秒、峰值显存 46 GB,turbo 约 4.1 秒、55 GB。

原题:Viggle/Viggle-Image-Swap

Viggle 发布的 Qwen-Image-2.1 LoRA(rank 256):把照片里的人整个换成角色设定图里的角色,脸、头发、身体和衣服都换,原图的姿势、表情、构图、背景和光线保留。每个要换的人配一张 1536×1024 的设定图(左三分之一是肖像,右三分之二是正、侧、背三视图);也可以把真人脸照贴进肖像格,但单独一张照片不支持。默认 6 步、不用 CFG;加 --turbo 时前 2 步由 LoRA 定人物,后 6 步交给 Qwen-Image-2.1-Turbo 补细节。输出约 1 MP。官方在一张 B200 上测得每张约 2.2 秒、峰值显存 46 GB,turbo 约 4.1 秒、55 GB。

为什么重要 做角色植入、广告和剧照改编时不用重新摆拍,一张照片可同时换掉两个人,默认六步出图

上升分 47 · 点赞 49 · 下载量 2004

理由

  • 一次可换多人,并能指定保留哪一个;swap.py 按人物位置(左、右、第几个)自动写提示词
  • 附带色调校正:按未变化的背景像素把整体亮度拉回原图

用法

  • 按 README 安装指定版本的 transformers、peft 和固定提交的 diffusers
  • python inference/swap.py --src scene.png --char sheet.png "man in a green shirt" --out out.png;多人用多个 --char 加 --left 指定位置,--kept 指定保留的人
  • 要更锐利的细节加 --turbo(会多加载 Qwen-Image-2.1-Turbo)

风险

  • Qwen Research 许可,只能用于研究和评测,商用要另向 Qwen 团队申请;--turbo 加载的模型同样受限
  • 作者列出的局限:新角色有时保留原人的衣服,姿势和构图可能漂移;--turbo 偶尔把原人的配饰、衣服甚至整个人带回来
  • 可用于替换真人形象,使用他人肖像前要取得授权,发布时注明 AI 生成
  • 显存需求大;本条未运行,效果以模型卡为准

打开

Hugging Face Trending

浏览最新 AI 动态