H3 Character Swap LoRA V1.5(把视频里指定的人换成参考图角色)

Akatz Labs 给 MiniMax-H3 多参考模式(Ref2VA)训练的角色替换 LoRA:输入一段原视频和一张角色图,把视频里指定的那个人换成图中角色,同时跟随原视频的姿势、视线、表情和动作,保留场景和其他人。9 月 25 日首发 V1,10 月 16 日发 V1.5(推荐版),10 月 17 日加了配合作者 H3 Relay 2.0 的原生 ComfyUI 工作流。近 7 期没有收录。

Akatz Labs 给 MiniMax-H3 多参考模式(Ref2VA)训练的角色替换 LoRA:输入一段原视频和一张角色图,把视频里指定的那个人换成图中角色,同时跟随原视频的姿势、视线、表情和动作,保留场景和其他人。9 月 25 日首发 V1,10 月 16 日发 V1.5(推荐版),10 月 17 日加了配合作者 H3 Relay 2.0 的原生 ComfyUI 工作流。近 7 期没有收录。

上升分 57 · 点赞 704 · 下载量 137211

理由

  • 解决“保留表演、换演员”的需求:提示里用 <Video 1> 指原视频、<Picture 1> 指角色图,写清要换的是谁(例如“紫衬衫的男人”)即可,作者说没有训练额外的触发词。
  • V1.5 从 V1 出发再训 1,000 步,加入运动视频目标和面部裁剪;作者放了 V1 / V1.5 对比视频,称 V1.5 更能保住风格化的脸、发型和角色身份,同时明说这些是挑选的样例,不是整体评测。
  • 训练过程公开:V1 数据集 akatz-ai/H3-Character-Swap-v1 和 V1.5 的 run-summary.json(秩 16、学习率 1e-5、起点文件哈希)都在仓库里;V1.5 文件约 155 MB。

用法

  • ComfyUI:另备 H3 Ref2VA 底模、文本编码器和 VAE,把 h3_character_swap_v1.5.safetensors 放进 LoRA 目录,用 model-only LoRA 加载器,强度 1.0;V1.5 用来替换 V1,不要两个一起叠。
  • 作者测过的配方:Ref2VA INT8 底模 + 本 LoRA 强度 1.0 + 单独的 minimax_h3_fl2v_turbo_8step_v1.0_768p 加速 LoRA 强度 1.0,8 步、CFG 1、采样器 er_sde、调度器 normal;24 fps,先做一段短的连续镜头(作者 V1 测试里 4–5 秒比 14 秒更稳)。
  • 需要遮罩、续接长段和保留原声时,装作者的 H3 Relay 2.0,用仓库 examples 里的 H3-Character-Swap-Relay-V2 工作流。

风险

  • 作者自称实验性模型:角色身份、动作时间、表情、遮挡和硬切镜头都可能漂;V1 训练只有 94 组合成的图像编辑样本,多人替换没有专门训练。本栏目没看过对比视频。
  • 成片里的原声是工具后期直接拷回去的,不说明 LoRA 能还原音频,也不能修正口型错位。
  • 换真人涉及肖像权和深度伪造风险,只用自己有权使用的视频和角色图。许可是 MiniMax H3 社区许可(不是 Apache),作者提醒其标准授权不覆盖美国、欧盟、英国和韩国,商用或在这些地区使用要先看原条款。

打开

Hugging Face Trending

浏览最新 AI 动态