Titre original : Any3R
Any3R reconstruit des scènes à partir d'images prises par n'importe quelle caméra à projection centrale en une seule passe de calcul avant : objectifs à trou d'épingle standard, objectifs déformés, fisheye dépassant 180°, panoramiques à 360°, ainsi que leur mélange au sein d'une même scène. Chaque vue est décrite par un champ de rayons (la direction pour chaque pixel), et le modèle prédit la profondeur le long des rayons pour chaque vue, la pose de la caméra et le nuage de points fusionné. L'article, le code et la page du projet sont publiés.
Pourquoi c'est important La reconstruction 3D ne nécessite plus d'unifier les types d'objectifs ni de corriger les distorsions ; les images panoramiques et fisheye peuvent être utilisées directement.
J'aime Hugging Face 2 · Montée dans le classement Hugging Face 2 · Téléchargements Hugging Face 321
Licence : Non commercial · ComfyUI : Indisponible · VRAM : ≈3 GB (estimation)
Raisons
- Montée dans le classement image-to-3d de Hugging Face
- Score 27 (fraîcheur 5 / source 5 / popularité 0 / comfy 0 / vram 13 / démo 0 / licence 4)
Utilisation
- Clonez le dépôt officiel avec git et exécutez pip install -e ., puis chargez via Any3R.from_pretrained
Risques
- Licence de recherche non commerciale FAIR, usage commercial interdit