Tiêu đề gốc: Any3R
Any3R tái tạo cảnh từ các hình ảnh được chụp bởi bất kỳ máy ảnh chiếu trung tâm nào chỉ với một lần tính toán phía trước: ống kính pinhole thông thường, ống kính có biến dạng, mắt cá hơn 180°, toàn cảnh 360°, và sự kết hợp của chúng trong cùng một cảnh. Mỗi góc nhìn được mô tả bằng trường tia sáng (hướng của từng pixel), mô hình dự đoán độ sâu dọc theo các tia sáng cho mỗi góc nhìn, vị trí máy ảnh và đám mây điểm hợp nhất. Bài báo, mã nguồn và trang dự án đã được công khai.
Tại sao quan trọng Không cần chuẩn hóa loại ống kính hoặc khử biến dạng trước khi tái tạo 3D, tài liệu toàn cảnh và mắt cá có thể sử dụng trực tiếp.
Hug点赞 2 · Hug上升分 2 · Hug下载 321
Giấy phép: Phi thương mại · ComfyUI: Chưa có · VRAM: ≈3 GB (ước tính)
Lý do
- Bảng xếp hạng tăng trưởng image-to-3d của Hug
- Điểm số 27 (mới 5 / nguồn 5 / độ nóng 0 / comfy 0 / vram 13 / demo 0 / giấy phép 4)
Cách sử dụng
- git clone kho lưu trữ chính thức và pip install -e ., tải bằng Any3R.from_pretrained
Rủi ro
- Giấy phép nghiên cứu phi thương mại của FAIR, không được phép sử dụng thương mại