Od gier do architektury, rzeczywistość wirtualna i rozszerzona obiecuje niesamowite możliwości transformacji sposobu, w jaki doświadczamy cyfrowych przestrzeni. Jednak ożywienie wyobraźniowych środowisk VR/AR wymagało do tej pory skomplikowanego rzemiosła modelowania 3D... aż do teraz.
Oto fascynująca rzecz: AI niedawno osiągnęła zdolność automatycznego generowania szczegółowych modeli 3D jedynie na podstawie opisów tekstowych lub wejściowych obrazów 2D. To eliminuje nieefektywny wysiłek manualny, jednocześnie otwierając nowe kreatywne horyzonty.
Przyjrzyjmy się, jak działa ta nowa technologia i jak może kształtować przyszłość immersyjnego obliczenia w różnych branżach.
Nauczanie AI tajników modelowania 3D
Kluczem, który umożliwia projektowanie modeli 3D oparte na AI, jest głębokie uczenie się. Na przykład, badacze z Nvidii wytrenowali AI o nazwie GauGAN na setkach tysięcy obrazów krajobrazów sparowanych z mapami segmentacji lokalizującymi elementy takie jak niebo, drzewa i trawa.
Z czasem GauGAN nauczył się analizować podstawowe atrybuty wizualne w obrazach wejściowych i generować realistyczne obrazy krajobrazów. Obecnie nowe systemy stosują podobne techniki głębokiego uczenia się do analizy i rekonstrukcji obiektów 3D.
Poprzez narażenie modelu AI na ogromne ilości danych treningowych modeli 3D przez miesiące lub lata, zaczyna on wykrywać skomplikowane wzorce i relacje między kształtami, teksturami, oświetleniem i innymi elementami. Po otrzymaniu nowego tekstowego polecenia lub obrazu, inteligentnie łączy nauczone komponenty 3D, aby dopasować się do opisu lub wskazówek wizualnych.
W ten sposób AI udaje prawdziwą wiedzę ekspercką — nie jest wymagana rzeczywista znajomość modelowania 3D!
Otwarcie bram eksperymentowania
To przełomowe osiągnięcie AI ma ogromne implikacje dla usprawnienia projektowania światów 3D. Zamiast ręcznie rzeźbić każdy element, deweloperzy mogą po prostu poprosić AI o wygenerowanie zestawów modeli 3D, postaci i scen unikalnych dla ich potrzeb.
Minęły czasy zasobochłonnego modelowania środowisk VR/AR i mozolnych poprawek. AI do projektowania gier zbliża się teraz do szybkiego przepływu pracy projektowej, który zachęca do nieograniczonego eksperymentowania.
Nawet początkujący twórcy zyskują nową zdolność tworzenia profesjonalnej jakości zasobów 3D, opisując pożądane modele własnymi słowami, zamiast uczyć się specjalistycznego oprogramowania 3D. Ten efekt demokratyzacji otwiera możliwość budowania realistycznych światów VR/AR dla każdego, kto jest gotów wyobrazić sobie oryginalne koncepcje.
Fotorealistyczne rekonstrukcje z zwykłych obrazów
Niesamowicie, niektórzy modelarze AI potrafią również odtworzyć interpretacje 3D z standardowych obrazów 2D. Konwertuj obrazy 2D na 3D za pomocą technik AI, które analizują cechy takie jak oświetlenie, tekstury, kontury i cienie, aby oszacować geometrię rzeczywistego świata.
Chociaż szacunki AI zwykle wymagają jeszcze poprawek, to podnosi ciężar tworzenia formy 3D — odnajdując inspirację z dowolnego obrazu referencyjnego. To podejście do rekonstrukcji zdjęć otwiera bezwysiłkowe bramy do replikacji istniejących środowisk w VR/AR.
Powiedzmy, że chcesz modelować doświadczenie VR Wieży Eiffla na podstawie pocztówki, którą kupiłeś w Paryżu. Zamiast ręcznie planować jej skomplikowane stalowe konstrukcje od podstaw, wystarczy wprowadzić obraz do modelarza 3D AI. Chwilę później, inteligentna rekonstrukcja tego zabytku pojawia się, gotowa do zaimportowania do twojego wirtualnego paryskiego placu!
Postacie generowane przez AI ożywają
Być może najbardziej zdumiewającym zastosowaniem jest automatyczne syntezowanie przez AI całych postaci 3D. Wystarczy opisać atrybuty, takie jak kostiumy, pozy, rozmiary i emocje, a zaawansowane systemy, takie jak generator postaci AI Meshy, dynamicznie renderują pasujących ludzi 3D lub mityczne stworzenia w ciągu kilku sekund, które można następnie udostępniać w aktywnej społeczności, gdzie twórcy wymieniają się pomysłami i współpracują.
W miarę jak wirtualne przestrzenie stają się coraz bardziej skoncentrowane na obecności społecznej niż na bezdusznych tłach, narzędzia, które bez wysiłku generują awatary i postacie do zamieszkiwania tych światów, mają ogromną wartość. Łagodzą one ogromne obciążenia związane z tworzeniem dzieł sztuki, które w przeciwnym razie utrudniają rozwój ekosystemów metaverse i zaludnionych światów wirtualnych.
To wskazuje na przyszłość z nieskończenie zróżnicowanymi, na zamówienie wirtualnymi istotami na wyciągnięcie ręki. I podobnie jak inne modelery AI, możliwości łatwo się skalują - można stworzyć 1 lub 1000 unikalnych postaci, po prostu pisząc więcej opisów.
Wzrost rynku odzwierciedla szum
Biorąc pod uwagę te transcendentalne implikacje twórcze, przemysły VR/AR oczekują gwałtownych trajektorii wzrostu w nadchodzących latach. Jedna z prognoz IDC z 2021 roku przewiduje, że same narzędzia do generowania zasobów i treści do gier przez AI rozrosną się do rynku wartego 7 miliardów dolarów do 2025 roku.
Z wirtualnymi światami, które wkrótce mają osiągnąć mainstreamową wykonalność, wczesni uczestnicy, którzy dziś ustanawiają przyczółki w ekosystemie, z pewnością zbiorą znaczne nagrody jutro.
Jednak, mimo że społeczne przyjęcie pozostaje stosunkowo umiarkowane, wciąż istnieją pytania kulturowe dotyczące odpowiedniego wykorzystania przypadków dla generatywnej AI. Czy narzędzia wzmacniające indywidualną kreatywność mogą jednocześnie deprecjonować szersze ludzkie rzemiosło? Jak ewoluują postrzegania sztuki tworzonej przez komputer?