Meta SAM 3D icône
Meta SAM 3DIcône vérifiée Veriblue
#11 dans Modèle 3D
4.7/5
« Reconstruisez des objets et des personnes en 3D à partir d'une simple photo : SAM 3D Objects crée des scènes et des maillages détaillés, SAM 3D Body estime les poses complètes du corps/des mains/des pieds avec une grande précision, le tout en open source et intégrable. »
En savoir plus : ChatGPT Perplexity
Icône vérifiée
Outil Vérifié
Gratuit 5913

Meta SAM 3D : reconstruisez objets, scènes et corps humains en 3D depuis une simple photo

Meta SAM 3D est un duo de modèles de reconstruction 3D signé Meta: il recrée des objets, des scènes et des corps humains complets à partir d'une seule photo. Le tout ne coûte rien, entre la démo en ligne du Segment Anything Playground et les poids en libre téléchargement sur GitHub et Hugging Face. Lors de tests de préférence humaine, ses reconstructions l'ont emporté au moins 5 fois contre 1 face aux méthodes antérieures. Le Playground n'existe qu'en anglais, mais vos photos, elles, n'ont pas d'accent.

Avantages
  • Reconstruction 3D complète depuis une seule photo
  • Démo gratuite, code et poids téléchargeables
  • Gère les objets à moitié cachés et les scènes chargées
  • Corps humains livrés avec un squelette exploitable
Inconvénients
  • GPU sérieux requis pour une exécution locale
  • Chaque personne d'une photo de groupe est traitée séparément
  • Pose des mains encore perfectible

Deux modèles sous le capot: SAM 3D Objects et SAM 3D Body

SAM 3D regroupe deux modèles publiés au sein de la collection Segment Anything: SAM 3D Objects, qui reconstruit la géométrie, la texture et la position des objets et des scènes, et SAM 3D Body, qui estime la pose et la forme des corps humains.

Concrètement, vous chargez une photo de votre salon, vous cliquez sur le fauteuil, et le modèle en déduit un objet 3D entier, face cachée comprise. SAM 3D Body repose sur Momentum Human Rig (MHR), un format de maillage qui sépare le squelette de la forme du corps, et se guide avec des masques ou des points clés.

  • Objets: maillages texturés exportables, y compris en GLB
  • Corps: pose et morphologie via le rig MHR, prédiction guidable
  • Scènes: personnes et objets recomposés dans un même espace 3D
SAM 3D présenté et testé en français
De la photo au modèle 3D dans Blender, pas à pas

Photos encombrées, objets à moitié cachés: le terrain de jeu de SAM 3D

SAM 3D a été entraîné avec une chaîne d'annotation mêlant humains et modèles, qui combine pré-entraînement synthétique et alignement sur des images réelles; SAM 3D Body part d'un jeu de plusieurs milliards d'images.

Là où la photogrammétrie réclame des dizaines de prises de vue, une image de smartphone suffit ici, même dans une pièce en désordre. Meta s'en sert déjà en production: la fonction View in Room de Facebook Marketplace place un lampadaire ou une table dans votre intérieur avant l'achat. Face à Hunyuan3D de Tencent, plutôt tourné vers les maillages optimisés pour le temps réel, SAM 3D mise sur la reconstruction des personnes et des scènes entières.

ProfilCe que SAM 3D apporteExemple d'usage
Artiste 3D, jeu vidéoUn maillage texturé de départ depuis une photoAccessoires et décors à retravailler
E-commerceDes produits visualisables en volumeAperçu type View in Room
Robotique, rechercheUne lecture spatiale des scènes réellesSimulation et manipulation d'objets
Effets spéciaux, ARDes corps posés et riggés via MHRDoublures numériques, essayage virtuel

Du Playground gratuit à Blender: la mise en route

Le Segment Anything Playground est le chemin le plus court: vous déposez vos images dans le navigateur, sélectionnez humains ou objets, et récupérez la reconstruction sans installation ni carte bancaire.

Pour aller plus loin, checkpoints et code d'inférence se téléchargent sous la SAM License, usage commercial permis avec quelques garde-fous. Les amateurs de projets IA open source sur GitHub y trouveront aussi MHR, le modèle paramétrique de corps humain (prévoyez un bon GPU, votre ventilateur s'en souviendra).

Côté francophone, pas de version française pour l'instant: Playground, blog et documentation restent en anglais, mais la manipulation est assez visuelle pour ne bloquer personne.

Questions fréquentes

Meta SAM 3D est-il gratuit ?

Oui. La démo du Segment Anything Playground est gratuite dans le navigateur, et les poids des deux modèles se téléchargent sans frais sur GitHub et Hugging Face. Des API tierces hébergent aussi les modèles en facturant à la génération, mais rien ne vous y oblige.

Peut-on utiliser SAM 3D dans un projet commercial ?

La SAM License autorise l'usage commercial, avec des restrictions comme l'interdiction des applications militaires. Vous restez propriétaire de vos travaux dérivés, et le rig MHR est publié sous une licence commerciale permissive. Relisez le texte officiel avant tout déploiement en production.

Peut-on importer les résultats de SAM 3D dans Blender ?

Les maillages générés s'exportent notamment en GLB, un format que Blender ouvre nativement. Des tutoriels détaillent le parcours complet de la photo au logiciel 3D. Comptez ensuite un nettoyage du maillage pour un usage professionnel.

Quelles sont les limites de SAM 3D ?

SAM 3D Body traite chaque personne séparément, sans modéliser les contacts entre individus ou avec les objets, et Meta reconnaît que la pose des mains doit encore progresser. Côté objets, la fidélité du résultat dépend beaucoup de la qualité de la photo d'origine.

Verdict : Les studios de jeu, les labos de robotique et les habitués de Blender tiennent là une source de matière 3D gratuite et sérieuse; pour des ressources légères prêtes pour le temps réel, une passe de retopologie complète le flux.

★ Outils IA de Prestige ★
IA Alternatives à Meta SAM 3D
Gratuit
Gratuit
Gratuit
Freemium
Gratuit
Gratuit
Gratuit
Freemium