Nowa metoda na realistyczne kształty 3D dzięki AI z użyciem Score Distillation Sampling

Czas czytania: 2 minut
Przez Maria Sanchez
- w
Realistyczne kształty 3D generowane przez zaawansowaną technologię AI.

WarsawBadacze z MIT opracowali innowacyjny sposób na tworzenie realistyczniejszych kształtów 3D z wykorzystaniem generatywnej sztucznej inteligencji. Zazwyczaj proces tworzenia szczegółowych modeli 3D na potrzeby wirtualnej rzeczywistości lub inżynierii jest czasochłonny i wymaga dużego nakładu pracy. Chociaż generowanie obrazów 2D z tekstu stało się znacznie bardziej zaawansowane, osiągnięcie podobnej jakości w modelach 3D było do tej pory trudniejsze. Nowa metoda ulepsza technikę zwaną Score Distillation Sampling (SDS), aby sprostać tym wyzwaniom.

Proces rozpoczyna się od przekształcenia losowego kształtu 3D w obraz 2D. Następnie model AI poprawia obraz, aby był wyraźniejszy. Cykl ten powtarza się, dopóki obiekt 3D nie będzie wyglądać poprawnie. Badacze z MIT zauważyli problem rozmytych obrazów z powodu szumów. Zamiast używać skomplikowanych i wolnych obliczeń, zastosowali prostszą metodę do uzupełnienia brakujących części przy renderowaniu 3D, co prowadzi do uzyskania ostrzejszych obrazów.

Kluczowe elementy badania obejmują:

  • Wykorzystanie wcześniej wytrenowanego modelu dyfuzji obrazów w celu zwiększenia efektywności.
  • Wprowadzenie technik przybliżenia dla lepszej wyrazistości kształtów.
  • Unikanie kosztownego ponownego trenowania modeli, co skraca czas i zmniejsza wydatki.
  • Doskonalenie matematycznych podstaw technik generatywnej sztucznej inteligencji dla lepszego rozwoju w przyszłości.

Nowa metoda poprawia jakość 3D modeli, czyniąc je szybszymi i łatwiejszymi do stworzenia. Działa jako cyfrowe narzędzie wspierające projektantów, umożliwiając im tworzenie bardziej szczegółowych i realistycznych projektów bez dużego wysiłku. Udoskonalenia w technikach komputerowych są istotne dla branż wykorzystujących modelowanie 3D, takich jak gry, animacja i projektowanie inżynieryjne.

Naukowcy z MIT usprawniają AI, wykorzystując już istniejące modele dyfuzji, co pozwala na postępy bez konieczności budowania wszystkiego od zera. Ta metoda jest bardziej wydajna i łatwiejsza do rozwijania. Ich prace wpisują się w szerszy trend ulepszania AI poprzez wprowadzanie inteligentnych zmian zamiast całkowitego przekształcania systemów. Jednak korzystanie z obecnych modeli oznacza również, że zachowują one istniejące problemy, takie jak uprzedzenia i niedokładności. Przyszłe prace prawdopodobnie skupią się na rozwiązaniu tych kwestii.

Ta technika ma zrewolucjonizować zastosowanie rzeczywistości wirtualnej i pokrewnych technologii. Zespoły ekspertów z MIT, Oxfordu oraz różnych firm technologicznych wspólnie pracują nad ulepszaniem narzędzi AI do projektowania. Może to odmienić sposób, w jaki branże tworzą i wykorzystują treści 3D.

Badanie jest publikowane tutaj:

http://dx.doi.org/10.48550/arXiv.2405.15891

i jego oficjalne cytowanie - w tym autorzy i czasopismo - to

Artem Lukoianov, Haitz Sáez de Ocáriz Borde, Kristjan Greenewald, Vitor Campagnolo Guizilini, Timur Bagautdinov, Vincent Sitzmann, Justin Solomon. Score Distillation via Reparametrized DDIM. Submitted to arXiv, 2024 DOI: 10.48550/arXiv.2405.15891

Sztuczna Inteligencja: Najnowsze wiadomości

Udostępnij ten artykuł

Komentarze (0)

Opublikuj komentarz