Nouvelle approche : créer des formes 3D réalistes avec l'IA générative du MIT

ParisDes chercheurs du MIT ont mis au point une méthode innovante pour créer des formes 3D plus réalistes grâce à l'intelligence artificielle générative. Habituellement, la création de modèles 3D détaillés pour la réalité virtuelle ou l'ingénierie exige beaucoup de temps et un travail minutieux. Bien que la génération d'images 2D à partir de texte ait beaucoup progressé, obtenir des modèles 3D de qualité similaire a été plus difficile. Cette nouvelle approche améliore une technique appelée Score Distillation Sampling (SDS) pour surmonter ces défis.
Le processus commence par transformer une forme en 3D aléatoire en une image en 2D. Un modèle d'IA améliore ensuite l'image pour la rendre nette. Ce cycle se répète jusqu'à ce que l'objet en 3D soit satisfaisant. Des chercheurs du MIT ont découvert un problème provoquant des images floues à cause du bruit. Au lieu d'utiliser des calculs complexes et lents, ils ont opté pour une méthode simple pour deviner les parties manquantes dans le rendu en 3D, obtenant ainsi des images plus nettes.
Principaux éléments de l'étude :
- Exploitation d'un modèle de diffusion d'images pré-entraîné pour accroître l'efficacité.
- Mise en œuvre de techniques d'approximation pour améliorer la clarté des formes.
- Évitement de la remise à niveau coûteuse des modèles, réduisant ainsi le temps et les dépenses globales.
- Amélioration de la compréhension mathématique des techniques d'IA générative pour de meilleurs développements futurs.
10 février 2025 · 15:47
L'IA s'impose : l'impact de l'automatisation sur l'emploi IT aux États-Unis
Cette méthode innovante améliore la qualité des formes 3D et simplifie leur création, tout en accélérant le processus. Elle constitue un outil numérique précieux pour les concepteurs, leur permettant de réaliser des modèles plus détaillés et réalistes avec moins d'effort. Ces avancées dans les techniques informatiques sont essentielles pour les secteurs qui recourent à la modélisation 3D, tels que le jeu vidéo, l'animation et la conception en ingénierie.
Les chercheurs du MIT améliorent l'intelligence artificielle en utilisant des modèles de diffusion existants, ce qui permet de progresser sans tout reconstruire. Cette méthode est plus efficace et facilite l'expansion. Leur travail s'inscrit dans une tendance plus large visant à améliorer l'IA en apportant des modifications intelligentes plutôt qu'en réinventant les systèmes. Cependant, l'utilisation de modèles actuels implique de conserver les problèmes existants, tels que les biais et les imprécisions. Les travaux futurs s'efforceront probablement de résoudre ces problèmes.
Cette technique promet d'améliorer les applications en réalité virtuelle et technologies connexes. Des experts du MIT, d'Oxford et de plusieurs entreprises technologiques collaborent pour perfectionner les outils d'IA pour le design. Cela pourrait transformer la manière dont les industries créent et utilisent du contenu 3D.
L'étude est publiée ici:
http://dx.doi.org/10.48550/arXiv.2405.15891et sa citation officielle - y compris les auteurs et la revue - est
Artem Lukoianov, Haitz Sáez de Ocáriz Borde, Kristjan Greenewald, Vitor Campagnolo Guizilini, Timur Bagautdinov, Vincent Sitzmann, Justin Solomon. Score Distillation via Reparametrized DDIM. Submitted to arXiv, 2024 DOI: 10.48550/arXiv.2405.15891

8 février 2025 · 23:24
Les géants de la tech s'affrontent : la guerre de l'IA commence.

29 décembre 2024 · 02:20
Les divisions de l'IA : analyse des biais dans les modèles d'apprentissage automatique

28 décembre 2024 · 04:35
Des scientifiques évaluent l'IA pour des prédictions sur le vieillissement et la santé durable

27 décembre 2024 · 08:36
Collaborer avec l'IA pour révolutionner la recherche scientifique inspirée de la biologie
Partager cet article