От игр до архитектуры, виртуальная и дополненная реальность обещает невероятные возможности для трансформации нашего восприятия цифровых пространств. Но воплощение воображаемых VR/AR сред в жизнь требует сложного мастерства 3D моделирования... до сих пор.
Вот что удивительно: AI недавно достиг способности автоматически генерировать детализированные 3D модели просто из текстовых описаний или 2D изображений. Это устраняет неэффективные ручные усилия, открывая новые творческие горизонты.
Давайте исследуем, как работает эта новая технология и как она может повлиять на будущее иммерсивных вычислений в различных отраслях.
Обучение AI основам 3D моделирования
Ключ, который делает возможным проектирование 3D моделей на базе AI, — это глубокое обучение. Например, исследователи Nvidia обучили AI под названием GauGAN на сотнях тысяч изображений ландшафтов, сопоставленных с картами сегментации, указывающими элементы, такие как небо, деревья и трава.
Со временем GauGAN научился анализировать базовые визуальные атрибуты входных изображений и выдавать реалистичные ландшафтные картины. Теперь новые системы применяют аналогичные методы глубокого обучения для анализа и реконструкции 3D объектов.
Путем демонстрации модели AI множества данных для обучения 3D моделям в течение месяцев или лет, она начинает выявлять сложные паттерны и взаимосвязи между формами, текстурами, освещением и многим другим. Получив новый текстовый запрос или изображение, она затем интеллектуально комбинирует изученные 3D компоненты, чтобы соответствовать описанию или визуальным подсказкам.
Таким образом, AI имитирует реальную экспертность в предмете — никакие реальные знания 3D моделирования не требуются!
Открытие шлюзов для экспериментов
Этот прорыв AI имеет огромные последствия для упрощения процесса проектирования 3D миров. Вместо того чтобы вручную создавать каждый объект, разработчики могут просто попросить AI сгенерировать массивы 3D моделей, персонажей и сцен, уникальных для их нужд.
Прошли времена ресурсозатратного моделирования VR/AR сред и кропотливых исправлений. AI для проектирования игр теперь приближается к быстрому итерационному рабочему процессу, который поощряет безграничные эксперименты.
Даже новички получают новую возможность создавать профессиональные 3D активы, описывая желаемые модели своими словами, а не изучая специализированное 3D программное обеспечение. Этот эффект демократизации открывает возможность создания реалистичных VR/AR миров для любого, кто готов воплотить оригинальные концепции.
Фотореалистичные воссоздания из обычных изображений
Удивительно, но некоторые AI моделировщики могут обратным образом создавать 3D интерпретации из стандартных 2D изображений. Преобразуйте 2D изображения в 3D, используя AI техники для анализа таких качеств, как освещение, текстуры, контуры и тени, чтобы оценить геометрию реального мира.
Хотя оценка AI обычно все еще требует доработки, она снимает основную нагрузку 3D формы — находя из любого вдохновляющего референсного изображения. Этот подход к фото реконструкции открывает легкие пути к воссозданию существующих сред в VR/AR.
Скажем, вы хотите смоделировать VR опыт Эйфелевой башни по открытке, которую вы купили в Париже. Вместо того чтобы вручную планировать ее сложные стальные конструкции с нуля, просто передайте изображение AI 3D моделировщику. Через несколько мгновений появляется интеллектуальное воссоздание достопримечательности, готовое к импорту в вашу виртуальную парижскую площадь!
AI-сгенерированные персонажи оживают
Возможно, самое удивительное применение — это автоматическое создание ИИ целых 3D-персонажей. Вы просто описываете такие атрибуты, как костюмы, позы, размеры и эмоции, и сложные системы, такие как генератор персонажей AI Meshy, динамически создают подходящих 3D-людей или мифических существ за считанные секунды, которые затем можно поделиться в их активном сообществе, где создатели обмениваются идеями и сотрудничают.
По мере того, как виртуальные пространства становятся более ориентированными на социальное присутствие, а не на безжизненные фоны, инструменты, которые без труда создают аватары и фигуры для обитания в этих мирах, имеют невероятную ценность. Они снимают огромные нагрузки на создание произведений искусства, которые в противном случае затрудняли бы развитие экосистем метавселенной и населенных виртуальных миров.
Это указывает на будущее с бесконечно разнообразными, индивидуальными виртуальными существами на кончиках наших пальцев. И, как и другие ИИ-моделлеры, возможности легко масштабируются — создавайте 1 или 1000 уникальных персонажей, просто написав больше описаний.
Рост рынка отражает ажиотаж
Учитывая эти трансцендентные творческие последствия, индустрии VR/AR ожидают стремительных траекторий роста в ближайшие годы. Один прогноз IDC на 2021 год предсказывает, что только инструменты для создания игровых активов и контента на основе ИИ вырастут до рынка в 7 миллиардов долларов к 2025 году.
С учетом того, что виртуальные миры вскоре могут стать мейнстримом, ранние игроки, закладывающие основы экосистемы сегодня, наверняка получат значительные награды завтра.
Тем не менее, хотя общественное восприятие остается относительно умеренным, культурные вопросы об уместности использования генеративного ИИ все еще остаются. Могут ли инструменты, усиливающие индивидуальное творчество, одновременно обесценивать более широкое человеческое мастерство? Как изменяются восприятия компьютерного искусства?