Tiêu đề gốc: DyCraft: An Agentic System for Long-Horizon 4D Scene Generation
Các tác nhân lập trình tiên tiến có thể viết ra các cảnh 3D và các vật thể có khớp nối khá tốt, nhưng khi tạo hoạt ảnh dài, chúng thường viết trọn vẹn một đoạn kịch bản trong một lần, dẫn đến hiện tượng các vật thể xuyên qua nhau, thiếu điểm tựa, chuyển động không tự nhiên và rất khó để chỉnh sửa lại. DyCraft học hỏi phương pháp của các nhà làm phim hoạt hình: trước tiên mở rộng lời nhắc của người dùng thành một kế hoạch chi tiết và dựng sẵn cảnh tĩnh, sau đó tạo 3D storyboard, trong đó mỗi tư thế chủ chốt đều là một cảnh tĩnh có thể được xây dựng và gỡ lỗi riêng biệt, cuối cùng sử dụng các công cụ chuyển động để bổ sung chuyển động cục bộ giữa các trạng thái bắt đầu và kết thúc đã được xác minh ở hai khung hình liền kề. Các tác giả so sánh trên 24 nhiệm vụ hoạt ảnh dài nhiều cảnh quay (robot hình người, nhân vật con người và động vật, cơ cấu máy móc) với tác nhân GPT-6 gốc trong Codex và các giải pháp tác nhân trước đây, cho biết DyCraft có ít vi phạm vật lý rõ rệt hơn và thường được các đánh giá viên con người lựa chọn hơn.
Tại sao quan trọng Các tác nhân lập trình tổng quát khi viết toàn bộ hoạt ảnh trong một lần thường gặp lỗi xuyên mô hình, lơ lửng; sau khi tách thành các khung hình chính có thể xác minh riêng biệt, lỗi vật lý giảm đáng kể
Thích 3 · Số sao mã nguồn 11
Lý do
- Tạo hoạt ảnh Blender dài khoảng một phút từ một câu lệnh: lập kế hoạch, viết lại lời nhắc, mô hình hóa CAD, storyboard, viết chuyển động, kiểm tra vật lý và xem xét lại đều có các công cụ sẵn có
- Hai tác nhân con cho đối tượng và cảnh cũng có thể được sử dụng riêng lẻ, xuất ra URDF hoặc GLB; có thể nhập robot URDF và nhân vật có bộ xương của riêng bạn
- 24 phim ngắn trong bài báo cùng với dự án Blender, kế hoạch và storyboard đã được đưa vào bộ dữ liệu Hugging Face jefftan969/dycraft-films
Cách dùng
- Mã: Sau khi chạy https://github.com/jefftan969/dycraft;pip install -e . , lần lượt chạy python -m dycraft.install check / tools / cad / blender / library
- python -m dycraft.cli --backend codex --layer animation --prompt "…" (cũng có thể chọn Claude Code bằng --backend), sử dụng --max-hours để kiểm soát ngân sách thời gian
Rủi ro
- Yêu cầu đã đăng nhập vào Claude Code hoặc Codex, cường độ suy luận mặc định là xhigh, ngân sách mỗi lần chạy là 12 giờ, tiêu tốn nhiều hạn mức đăng ký hoặc chi phí API
- Tác nhân chạy không giám sát trong môi trường sandbox; nếu sandbox không khởi động được, tùy chọn
--allow-unsandboxedsẽ cho phép nó đọc và ghi toàn bộ tệp của bạn, không khuyến nghị sử dụng - Chỉ hỗ trợ Linux x86_64; đánh giá là so sánh do các tác giả thực hiện trên các nhiệm vụ tự xây dựng, mục này chưa được chạy thử