원제: Hy-Nomas-Diffusers
텐센트 Hy-Nomas는 자유형 및 다중 라운드 인터랙션을 지원하는 비디오 세계 생성 모델입니다. 한 번에 하나의 비디오 세그먼트를 생성하며, 사용자는 생성 과정에서 텍스트 지시를 통해 객체를 추가하거나, 스타일과 장면을 변경하고, 동작을 서술하거나, 카메라 경로를 제공하여 시점을 제어할 수 있습니다. 이 모델은 세그먼트별 자기회귀 DiT, Qwen 텍스트 인코더, 카메라 조건 모듈 및 PixelUMM 비디오 디코더로 구성되며, 세그먼트 간에 컨텍스트를 전달하기 위해 지속되는 KV 캐시를 사용합니다. 이 저장소는 증류된 BF16 Diffusers 가중치이며, 예제는 4 단계의 노이즈 제거를 사용하여 704 × 1280, 24 FPS의 출력을 생성합니다.
중요한 이유 '세계 모델'을 단순히 보는 것에서 걷고 수정하는 것으로 전환합니다. 객체 추가, 스타일 및 장면 변경, 동작 서술, 시점 제어가 모두 동일한 생성 과정에서 이루어집니다.
Hugging Face 좋아요 14 · Hugging Face 상승 점수 0 · Hugging Face 다운로드 154
라이선스: 조건부 상업적 사용 · ComfyUI: 모델 카드에 언급됨 · VRAM: 약 21 GB 추정
이유
- Hugging Face tencent 계정
- ComfyUI: 서드파티 ComfyUI 패키지: t8star/HY-Nomas-Comfy
- 점수 35 (freshness 0 / source 15 / heat 0 / comfy 4 / vram 4 / demo 5 / license 7)
사용법
- Diffusers의 HyNomasModularPipeline을 사용하여 로드하거나, 공식 데모에서 먼저 시도해 볼 수 있습니다.
리스크
- 모델 카드는 apache-2.0로 표시되어 있지만, LICENSE 원문에는 지역, 규모 또는 용도에 대한 제한이 포함되어 있으므로 원문을 기준으로 합니다.
- 프로그램으로 추정한 VRAM은 약 21 GB입니다(offload 미포함).