DyCraft: 프로그래밍 에이전트가 애니메이터처럼 스토리보드를 그려 3D 장편 애니메이션을 제작하게 하다

최신 프로그래밍 에이전트는 훌륭한 3D 장면과 관절이 있는 객체를 생성할 수 있지만, 긴 시간의 애니메이션을 만들 때는 종종 전체 스크립트를 한 번에 작성하여 객체가 서로 관통하거나 지지가 없으며 동작이 부자연스럽고 수정하기도 어려운 경우가 많습니다. DyCraft는 애니메이터의 방식을 차용했습니다: 먼저 사용자 프롬프트를 상세한 계획으로 확장하고 정적 장면을 구성한 후, 3D 스토리보드를 작성합니다. 각 주요 포즈는 개별적으로 구성하고 디버깅할 수 있는 정적 장면이며, 마지막으로 인접한 두 프레임의 검증된 시작 및 종료 상태 사이에서 동작 도구를 사용하여 국소적인 운동을 보완합니다. 저자들은 휴머노이드 로봇, 인간 및 동물 캐릭터, 기계 장치 등 24개의 다중 샷 장편 애니메이션 작업에서 Codex 내의 기본 GPT-6 에이전트와 기존 에이전트 솔루션을 비교했으며, DyCraft가 물리적 위반이 현저히 적고 인간 평가에서도 더 자주 선택되었다고 보고했습니다.

원제: DyCraft: An Agentic System for Long-Horizon 4D Scene Generation

최신 프로그래밍 에이전트는 훌륭한 3D 장면과 관절이 있는 객체를 생성할 수 있지만, 긴 시간의 애니메이션을 만들 때는 종종 전체 스크립트를 한 번에 작성하여 객체가 서로 관통하거나 지지가 없으며 동작이 부자연스럽고 수정하기도 어려운 경우가 많습니다. DyCraft는 애니메이터의 방식을 차용했습니다: 먼저 사용자 프롬프트를 상세한 계획으로 확장하고 정적 장면을 구성한 후, 3D 스토리보드를 작성합니다. 각 주요 포즈는 개별적으로 구성하고 디버깅할 수 있는 정적 장면이며, 마지막으로 인접한 두 프레임의 검증된 시작 및 종료 상태 사이에서 동작 도구를 사용하여 국소적인 운동을 보완합니다. 저자들은 휴머노이드 로봇, 인간 및 동물 캐릭터, 기계 장치 등 24개의 다중 샷 장편 애니메이션 작업에서 Codex 내의 기본 GPT-6 에이전트와 기존 에이전트 솔루션을 비교했으며, DyCraft가 물리적 위반이 현저히 적고 인간 평가에서도 더 자주 선택되었다고 보고했습니다.

왜 중요한가 범용 프로그래밍 에이전트가 한 번에 전체 애니메이션 스크립트를 작성하면 클리핑(관통)이나 공중 부양 문제가 자주 발생하지만, 개별적으로 검증 가능한 키프레임으로 분리하면 물리적 오류가 현저히 줄어듭니다

좋아요 3 · 코드 스타 수 11

이유

  • 한 문장으로 약 1분 분량의 Blender 애니메이션 생성: 계획, 프롬프트 재작성, CAD 모델링, 스토리보드, 동작 작성, 물리 검사 및 검토를 위한 기존 도구 제공
  • 객체 및 장면 하위 에이전트는 독립적으로 사용 가능하며 URDF 또는 GLB로 내보낼 수 있음; 자체 URDF 로봇 및 스켈레톤이 있는 캐릭터를 가져올 수 있음
  • 논문에서 소개된 24편의 단편 영화와 Blender 프로젝트, 계획, 스토리보드가 Hugging Face 데이터셋 jefftan969/dycraft-films에 공개되어 있습니다

사용법

  • 코드: https://github.com/jefftan969/dycraft;pip install -e . 실행 후 python -m dycraft.install check / tools / cad / blender / library 순서대로 실행
  • python -m dycraft.cli --backend codex --layer animation --prompt "…" (또는 --backend로 Claude Code 선택 가능), --max-hours를 사용하여 시간 예산 제어

리스크

  • 로그인된 Claude Code 또는 Codex가 필요하며, 기본 추론 강도는 xhigh이고 단일 실행 예산은 12시간으로 구독 한도나 API 비용 소모가 큼
  • 에이전트가 샌드박스 내에서 무인 상태로 실행됨; 샌드박스가 시작되지 않을 때 --allow-unsandboxed를 사용하면 모든 파일에 대한 읽기/쓰기 권한이 부여되므로 권장하지 않음
  • Linux x86_64만 지원됨; 평가는 저자가 자체 구축한 작업에서의 비교이며, 본 항목에서는 실행되지 않았습니다

열기 · 코드 · Hugging Face 논문 페이지

Hugging Face Daily Papers

최신 AI 소식 보기