ReDiverse-MiniMax-H3

ReDiverse는 일리노이 대학교 어바나-샴페인, fal, 존스 홉킨스 대학교의 연구입니다: 저자들은 소수 단계 증류 모델에서 시드를 바꿔도 거의 동일한 화면이 생성되는 이유는 첫 번째 단계의 특정 모듈 활성화가 더 적은 방향으로 압축되기 때문임을 발견했습니다. 이 rank-32 LoRA는 4단계 MiniMax-H3 Turbo가 해당 위치에서 원본 MiniMax-H3의 활성화를 정렬하도록 하며, 첫 번째 단계 샘플링에만 적용됩니다; 저자들은 VBench에서의 다양성 점수가 36.5에서 44.1로 상승했으며, 학습이 필요 없는 ReDiverse-TF를 추가로 적용하면 50.9가 된다고 보고했습니다(원본 다단계 모델은 52.5). 또한 같은 기간에 6단계 Pika H3 Flex용 버전도 공개되었으며, 두 파일의 크기는 각각 612 MB입니다.

ReDiverse는 일리노이 대학교 어바나-샴페인, fal, 존스 홉킨스 대학교의 연구입니다: 저자들은 소수 단계 증류 모델에서 시드를 바꿔도 거의 동일한 화면이 생성되는 이유는 첫 번째 단계의 특정 모듈 활성화가 더 적은 방향으로 압축되기 때문임을 발견했습니다. 이 rank-32 LoRA는 4단계 MiniMax-H3 Turbo가 해당 위치에서 원본 MiniMax-H3의 활성화를 정렬하도록 하며, 첫 번째 단계 샘플링에만 적용됩니다; 저자들은 VBench에서의 다양성 점수가 36.5에서 44.1로 상승했으며, 학습이 필요 없는 ReDiverse-TF를 추가로 적용하면 50.9가 된다고 보고했습니다(원본 다단계 모델은 52.5). 또한 같은 기간에 6단계 Pika H3 Flex용 버전도 공개되었으며, 두 파일의 크기는 각각 612 MB입니다.

왜 중요한가 소수 단계 증류 모델은 시드를 바꿔도 거의 동일한 장면을 생성하는 경우가 많습니다; 이 방법은 첫 번째 단계에서만 작동하며 나머지 단계는 기존 방식을 따릅니다. 또한 같은 기간에 Pika H3 Flex 버전도 공개되었습니다.

하트(좋아요) 9 · 하트 상승 점수 9 · 하트 다운로드 수 48

라이선스: 조건부 상업적 사용 가능 · ComfyUI: 현재 없음 · VRAM: 명시되지 않음

지역 라이선스: MiniMax H3 오픈 웨이트 라이선스는 EU, 영국, 한국, 미국(LICENSE의 Excluded Territories)을 포함하지 않으며, 이 네 지역에서는 MiniMax로부터 별도의 라이선스를 받아야 합니다.

이유

  • 논문, 활성화 탐지 코드 및 동일 시드 비교 예시 포함; 같은 시리즈에는 SDXL, SD3, Wan 2.1 버전도 있음

사용법

  • github.com/H-furkan/rediverse를 클론하고 envs/README.md에 따라 비디오 환경을 설정한 후, Hugging Face에서 약관에 동의하고 로그인하여 hf download ReDiverse/ReDiverse-MiniMax-H3 --local-dir ReDiverse-MiniMax-H3을 실행합니다. python -m h3.generate --arm rediverse_ft --adapter ReDiverse-MiniMax-H3 --prompt "…" --num-samples 4를 실행하세요; Pika H3 Flex 버전은 해당 저장소의 generate_pika.py를 사용하며, --compare 옵션을 추가하면 어댑터가 없는 동일 시드 영상도 함께 생성됩니다

리스크

  • 연구 목적으로 공개되었으며, MiniMax H3 커뮤니티 라이선스의 적용을 받습니다. EU, 영국, 한국 및 미국에서는 사용할 수 없습니다. 다운로드 시 로그인 및 약관 동의가 필요합니다
  • --arm rediverse로 학습이 필요 없는 방향성을 추가할 경우, 각 새로운 프롬프트에 대해 원본 모델을 25번 먼저 실행해야 합니다(저자들은 80 GB H100에서 약 1 GPU 시간이 소요된다고 보고했습니다). 텍스트-투-비디오에만 학습 및 테스트되었으며, 저자들은 명령줄 스크립트만 제공했고 ComfyUI 노드는 현재 없습니다

열기

抱脸 text-to-video 新模型

최신 AI 소식 보기