原題:DyCraft: An Agentic System for Long-Horizon 4D Scene Generation
最先端のプログラミングエージェントは優れた 3D シーンや関節付きオブジェクトを書き出すことができますが、長時間のアニメーションを作成する際には、スクリプト全体を一気に書きがちで、その結果、オブジェクト同士が貫通したり、支持構造が欠けたり、動きが不自然になったりし、修正も困難になります。DyCraft はアニメーターのアプローチを参考にしています。まずユーザーのプロンプトを詳細な計画に拡張して静的シーンを構築し、次に 3D ストーリーボードを作成します。各キーポーズは個別に構築・デバッグ可能な静的シーンであり、最後に隣接する2フレーム間で検証済みの開始状態と終了状態の間で、モーションツールを用いて局所的な動きを補完します。著者らは、24 件のマルチショット長尺アニメーションタスク(ヒューマノイドロボット、人間および動物キャラクター、機械装置)において、Codex 内のネイティブ GPT-6 エージェントや従来のエージェント手法と比較し、DyCraft は物理的な違反が明らかに少なく、人間の評価者によってもより頻繁に選択されると述べています。
なぜ重要か 汎用プログラミングエージェントがアニメーション全体を一度に書き出すと、メッシュの貫通や浮遊が発生しやすいですが、個別に検証可能なキーフレームに分割することで、物理的なエラーが明らかに減少します
いいね 3 · コードスター数 11
理由
- ワンプロンプトで約1分間の Blender アニメーションを生成:計画、プロンプトの書き換え、CAD モデリング、ストーリーボード作成、モーション記述、物理チェック、レビュー用の既存ツールが揃っています
- オブジェクトおよびシーンサブエージェントは単独でも使用可能で、URDF または GLB 形式でエクスポートできます。独自の URDF ロボットやスケルトン付きキャラクターをインポートすることも可能です
- 論文内の 24 本の短編映画は、Blender プロジェクト、計画、ストーリーボードとともに Hugging Face データセット jefftan969/dycraft-films に公開されています
使い方
- コード:https://github.com/jefftan969/dycraft;pip install -e . を実行した後、python -m dycraft.install check / tools / cad / blender / library の順に実行します
- python -m dycraft.cli --backend codex --layer animation --prompt "…"(--backend で Claude Code を選択することも可能)を使用し、--max-hours で時間予算を制御します
リスク
- ログイン済みの Claude Code または Codex が必要で、デフォルトの推論強度は xhigh、1回あたりの予算は 12 時間であり、サブスクリプション枠または API 費用の消費が大きくなります
- エージェントはサンドボックス内で無人実行されます。サンドボックスが起動しない場合、--allow-unsandboxed を指定すると全ファイルへの読み書きが可能になりますが、推奨されません
- Linux x86_64 のみサポートされています。評価は著者による独自タスクでの比較であり、本項目では実行されていません
開く · コード · Hugging Face 論文ページ