Convertir des images 2D en modèles 3D utilisables dans Blender

Si votre flux de travail créatif vous oblige à créer des modèles 3D, vous serez peut-être intéressé par un nouvel outil d’IA qui en est actuellement à ses premiers stades de développement. En exploitant la puissance de l’IA et de l’apprentissage automatique, vous pouvez désormais transformer de simples images plates en 2D en modèles 3D. Vous pouvez ainsi transformer en modèles 3D toutes les images que vous avez créées à l’aide de générateurs d’images IA tels que Midjourney, Stable Diffusion ou même le nouveau DallE 3. Vous pouvez ensuite les utiliser dans un logiciel de modélisation 3D tel que Blender.

Mais avant de commencer, il faut se rappeler que cet outil d’apprentissage automatique de l’IA n’en est qu’à ses débuts et qu’il ne transforme pas complètement une image 2D plate en un fantastique modèle 3D prêt à être mis en production. Cependant, dans sa dernière version, il est encore capable de créer des modèles 3D à partir d’images plates simples et nettes, dont vous pouvez voir quelques exemples ici. En revanche, il a du mal à créer des modèles 3D à partir d’images 3D plus complexes. Les images 3D plus complexes, qui n’ont peut-être pas fonctionné à la perfection, pourront néanmoins être modifiées dans Blender, ce qui vous donnera peut-être un point de départ pour l’échelle et au moins un modèle 3D que vous pourrez ensuite manipuler.

L’application s’appelle DreamGaussian : Generative Gaussian Splatting for Efficient 3D Content Creation, ce qui n’est pas peu dire. Elle est disponible gratuitement sur le site web de Hugging Face et l’application en ligne a été conçue à l’aide de Gradio. Si vous ne connaissez pas Gradio, sachez qu’il a été spécialement conçu pour faciliter la construction et la démonstration de vos modèles d’apprentissage automatique, en vous permettant d’intégrer une interface web conviviale afin que tout le monde puisse l’utiliser. Regardez la vidéo de démonstration ci-dessous pour en savoir plus sur ses capacités et ses limites.

Conversion d’images 2D en modèles 3D à l’aide de l’IA

DreamGaussian est un cadre de génération de contenu 3D. L’outil d’IA a été conçu pour être convivial, les utilisateurs n’ayant qu’à glisser-déposer une image et à cliquer sur Générer 3D pour lancer le processus.

Transformer des images 2D en modèles 3D

Le passage d’images 2D à des modèles 3D manipulables représenterait un bond en avant dans le flux de travail des concepteurs 3D, des modeleurs et des équipes de production. Dans la modélisation 3D traditionnelle, le processus commence souvent par un croquis conceptuel ou une image 2D. Les concepteurs doivent ensuite interpréter manuellement ces images plates et les reconstruire dans un environnement 3D. Cela demande beaucoup de temps et d’expertise pour s’assurer que le modèle 3D représente fidèlement le concept original. Le processus manuel n’est pas seulement laborieux, il peut aussi introduire des erreurs ou des incohérences qui peuvent nécessiter d’autres révisions.

La possibilité de convertir automatiquement des images 2D en modèles 3D permet de supprimer une grande partie du travail manuel. Imaginez qu’il suffise d’importer un croquis en 2D dans un logiciel comme Blender pour qu’il soit automatiquement converti en un modèle 3D prêt à être manipulé. Cela accélérerait considérablement les étapes initiales de la conception et de la modélisation, permettant aux professionnels de se concentrer davantage sur l’affinage et l’amélioration du modèle plutôt que sur sa construction à partir de zéro. Cela rendrait également l’ensemble du processus de conception plus accessible à ceux qui sont compétents en matière de création de concepts, mais pas nécessairement experts en logiciels de modélisation 3D.

En outre, cette avancée pourrait rationaliser la collaboration entre les différentes équipes d’une chaîne de production. Par exemple, les concepteurs, les modélistes et les animateurs pourraient travailler de manière plus cohérente, car ils auraient tous affaire au même modèle de base généré automatiquement. Cela permet de s’assurer que tout le monde est sur la même longueur d’onde dès le départ, réduisant ainsi les malentendus et les allers-retours. Dans des secteurs comme le cinéma, les jeux et la réalité virtuelle, où le temps est souvent compté, de tels gains d’efficacité pourraient se traduire par des économies significatives et une mise sur le marché plus rapide des produits.

Malgré ces limites, le potentiel de DreamGaussian est indéniable. Cet outil pourrait constituer un fantastique service d’IA permettant de créer des modèles 3D à partir d’images. Cela pourrait ouvrir une toute nouvelle voie pour les artistes numériques et les concepteurs graphiques, en leur offrant une nouvelle façon d’améliorer leurs flux de travail. Il est évident que l’outil d’apprentissage automatique nécessite plus de travail, mais il donne un aperçu fantastique de ce à quoi nous pouvons nous attendre à l’avenir pour la création de modèles 3D. Maintenant que les images 2D sont si faciles à créer, les convertir en modèles 3D semble être la prochaine étape logique.

DreamGaussian représente une avancée significative dans le domaine de la création de contenu 3D, en exploitant la puissance de l’IA. Il permet aux utilisateurs de créer des modèles 3D à partir d’images 2D. Bien qu’il reste des points à améliorer, le potentiel de l’outil pour accroître l’efficacité de la création 3D et ouvrir de nouvelles opportunités est indéniable.

Crédit photo : Mr Lemon

Lire plus Guide:

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *