Как нейросети меняют подход к созданию игровой 3D-графики

И как их можно применять в своей работе уже сейчас. Разберемся в этой статье, а заодно посмотрим на 5 самых перспективных инструментов для 3D-арта.

Tripo AI
Luma AI Genie
3Dpresso
3DFY
CSM-AI
Заключение

Искусственный интеллект — один из самых ярких и неоднозначных трендов игровой индустрии. Он способен навсегда изменить наше представление о создании 3D-контента для игр. Яркие, детализированные модели, необычные арты и концепты… Но насколько нейросети на самом деле применимы, когда речь идет о реальном геймдеве? Можно ли их использовать в своей работе уже сейчас, не теряя в качестве — и если да, то как именно?

В Athena studio мы специализируется на создании 3D арт-контента. Команда наших художников создавала арт для таких игровых студий, как 1C, Gaijin, Saber Int. Игровой аутсорсинг давно доказал свою эффективность, помогая даже самым крупным студиям повысить качество, сократить сроки и стоимость производства арт контента.

В ходе наших исследований мы обратили внимание на те нейросети, чей функционал уже сейчас может влиять на процесс создания контента. В этом обзоре мы подробно рассмотрели каждую из них и поразмышляли над тем, как и где их можно применить в работе над 3D-артом для игр.

В данный момент все нейросети используют собственные сервера для обработки запросов пользователей. Практически все они также имеют пробный период, позволяющий ознакомиться с программой самостоятельно и оценить ее возможности. Именно этим мы и занялись.

Tripo AI — наиболее функциональная нейросеть из рассмотренных. Оперативно создает 3D-ассеты, может работать как с текстовыми описаниями, так и с фотографиями и нарисованными концептами.

Способ генерации моделей: Ввод текста, загрузка наброска или изображений.

Плюсы:

Преобразование концептов из фото в 3D. Tripo AI может эффективно конвертировать 3D с концепта персонажа или предмета.
Простота использования. Подойдет даже специалисту, только начинающему знакомство с 3D-моделингом.
Быстрая генерация. Нейросеть создает модель за 30-40 минут.
Выгодный пробный период. Дает неограниченное число драфтов, безлимитное количество скачиваний. Пока платные пакеты еще не появились, есть возможность сделать неограниченное количество ассетов в хорошем качестве.
Скачивание готовых генераций. Есть возможность скачивать модели, уже имеющиеся на сервере нейросети — через поиск по словам.
Экспорт с учётом текстур. ИИ добавляет текстуры, встроенные в сам файл ассета.

Минусы:

Плохая сетка ассета. Сгенерированную 3D-модель нужно будет доработать вручную.
Платная версия в разработке. На данный момент у пользователей нет возможности заплатить, чтобы получить приоритет по скорости генерации, если это важно.
Нет ИИ текстурирования. Функционал в разработке, в дальнейшем планируется предоставить его обладателям платной подписки.

Luma AI Genie представляет собой инструмент для создания персонажей, пропсов и элементов окружающей среды через текстовые запросы. Генерирует 3D-модели в широком диапазоне визуальных стилей.

Способ генерации моделей: При помощи текстового редактора и написания подходящих промтов.

Плюсы:

Предварительная генерация. Нейросеть создает несколько вариантов модели, из которых пользователь может выбрать наиболее подходящий для финального рендера. А значит, не нужно тратить время на рендер всех предлагаемых моделей.
Качество проработки ассетов. В отличие от своих конкурентов, Luma AI обеспечивает более высокую детализацию и выразительность сгенерированных моделей.
Работа с разными визуальными стилями.Нейросеть генерирует как реалистичные, так и стилизованные ассеты.
Бесплатное использование. Можно сделать любое количество моделей без ограничений.
Скачивание с текстурами. Можно скачать модель со всеми картами (diffuse, normal, metal, roughness).

Минусы:

Необходимость доработки моделей.Модели, созданные Luma AI, нуждаются в исправлении топологии и доработке деталей. Готовые ассеты можно использовать лишь на начальных этапах работы, с последующим доведением до нужного уровня качества.
Загруженность серверов. На данный момент у серверов Luma AI Genie возникают задержки в обработке запросов. Генерация выбранного финального рендера может занимать до нескольких часов.
Нельзя рассмотреть пререндеры. Выбирать, какой из пререндеров отправить на полноценный цикл рендера, придется только по превью. Разглядеть детали можно будет только после итоговой генерации — а она занимает до нескольких часов.

3Dpresso — нейросеть для генерации 3D-моделей из видео. Её отличие — в том, что для работы вам потребуется видео предмета с разных ракурсов, на основе которого и будет проводиться генерация.

Способ генерации моделей: Загрузка видео с разных ракурсов. Генерация текстур происходит через написание подходящих промтов.

Плюсы:

Генерация 3D-моделей из видео. 3Dpresso создает 3D-модели из коротких видео длительностью от 1 минуты с вращением камеры вокруг необходимого предмета.
Создание текстур. Нейросеть позволяет изменять текстуры загруженной модели и создавать новые при помощи текстовых описаний.
Интерфейс. 3Dpresso имеет простой и интуитивно понятный интерфейс, что делает его доступным для пользователей с ограниченным опытом в области моделирования и визуализации.
Пробный период. Можно сделать 3 бесплатных генерации ассета, 10 бесплатных текстур. Скачать без платной подписки можно 1 модель.

Минусы:

Время обработки. Генерация и обработка результатов в 3Dpresso занимают до нескольких часов, особенно при работе с видео.
Необходимость доработки. Модели, сгенерированные с использованием 3Dpresso, чаще всего требуют доработки форм, коррекции топологии, разверток и текстур. В данный момент ИИ создает ассеты с лишним мешем и видимыми дефектами в текстурах.
Скачивание без текстур. Скачать можно только меш.

3DFY использует алгоритмы нейросетей для преобразования фотографий и текста в 3D-модели. Главный ее плюс в том, что созданные модели сразу имеют хорошую топологию.

Данный ИИ анализирует пространственную информацию с фотографий для воссоздания модели в виртуальном пространстве. 3DFY отлично справляется с генерацией простых элементов окружения, пропсов и оружия.

Способ генерации моделей: Ввод текста и выбор типа модели в меню.

Плюсы:

Простота использования. Нет необходимости в глубоких знаниях 3D-моделирования. Достаточно выбрать тип объекта и доработать его при помощи промтов.
Время обработки. Нейросеть обрабатывает запросы и генерирует 3D-модели около 5-10 минут.
Качество моделей. Сгенерированные в 3DFY модели имеют неплохой полигонаж и текстуры.

Минусы:

Ограниченность в выборе. 3DFY ограничивается небольшим выбором предметов и элементов окружения — диваны, столы, лампы, столовые приборы, мечи и т.п.
Нельзя выгрузить модели в пробном периоде. В пробном периоде можно сделать 10 генераций, но нельзя скачать модель с сервера.
Наличие мелких багов. В созданных 3DFY моделях, несмотря на хорошую сетку, есть мелкие дефекты, которые нужно будет исправлять вручную.

CSM AI позволяет быстро создавать контент на основе реальных фотографий или концепт-изображений. У нее получаются качественные генерации при использовании более реалистичных изображений или изображений с наиболее четкими и контрастными тенями.

Способ генерации моделей: Загрузка изображения для обработки.

Плюсы:

Тщательная проработка и выразительность моделей. Может формировать детальных и выразительных персонажей, объекты и элементы окружения.
Пробный период. Можно генерировать и скачивать модели без ограничений по количеству.
Экспорт с текстурами. Нейросеть прикладывает к модели текстуры, вложенные в сам файл с ассетом.

Минусы:

Низкий уровень исполнения моделей. Требует последующей доработки, так как сделанные ИИ ассеты схематичны и не соответствуют техническим требованиям проектов.
Высокая загрузка серверов. Обработка занимает от одного до нескольких часов, что представляет сложности для творчества.
Низкая скорость работы в пробном периоде. Без подписки ИИ работает медленнее.

Основной вклад нейросетей в создание 3D-контента — в ускорении генерации идей и концептов, а также в эффекте мозгового штурма и создании базы, с которой в дальнейшем смогут работать художники.

Одним из дополнительных вариантов доработки созданных 3D-моделей является их перевод в 2D-формат, чтобы затем улучшить при помощи нейросетей для двухмерной графики.

Современные AI не требуют наличия больших вычислительных мощностей у пользователя. Однако, чтобы полностью воплотить свою идею в виртуальном пространстве, не обойтись без глубоких технических знаний и креативного видения.

В перспективе ИИ упростит рабочие процессы и автоматизирует часть задач. Но пока люди являются потребителями и конечными пользователями, они будут ожидать от игровой графики креативности, которую может принести только человек. В конце концов, ИИ — всего лишь инструмент.

Благодарю за внимание. Оставайтесь в курсе новых достижений!