Стартап с искусственным интеллектом создает удобные для ходьбы 3D-миры из отдельных фотографий с ограничениями

World Labs разработала систему искусственного интеллекта, которая превращает отдельные фотографии в трехмерную среду, которую вы можете исследовать в веб-браузере. Несмотря на инновационность, технология сталкивается со значительными техническими ограничениями в ее нынешнем виде.

Компания заявляет, что ее система отличается от других моделей искусственного интеллекта в этой области, потому что она создает согласованную 3D-среду, а не просто пиксели. Эти виртуальные пространства поддерживают стабильность и следуют основным правилам физики.

Opulentes Palastinterieur mit Bedienoberfläche: WASD-Tasten zur Navigation, Maussteuerung für Umsicht, goldene Kronleuchter und Barockgemälde.
На веб-сайте World Labs доступны различные демонстрационные миры, по которым пользователи могут перемещаться

Текущие ограничения технологии существенны. Пользователи могут пройти всего несколько виртуальных метров, прежде чем наткнуться на невидимые барьеры. Система также показывает регулярные проблемы с рендерингом, когда объекты иногда неправильно сливаются.

Платформа включает в себя различные функции камеры, такие как регулируемая глубина резкости и динамическое освещение. World Labs описывает этот релиз как "ранний предварительный просмотр". Компания сгенерировала исходные 2D-изображения с помощью нескольких инструментов искусственного интеллекта: Flux 1.1 Pro, Ideogram, Midjourney и DALL-E.

Пока World Labs продемонстрировала только демонстрационные среды. Компания не выпускала программное обеспечение для предварительного просмотра и не публиковала техническую документацию с бенчмарками.

Несмотря на то, что World Labs находится на ранней стадии разработки, она получила венчурное финансирование в размере 230 миллионов долларов. Reuters сообщает, что среди инвесторов венчурные фирмы Andreessen Horowitz и New Enterprise Associates, а также технологические компании AMD, Intel и Nvidia.

В 20-лицо компании был Founded Ма исследователь Фей-Фей Ли, который создал возможность интеграции в проект и раньше вел Google облако Ай дивизии. Через World Labs Ли стремится разработать "модели большого мира", способные понимать трехмерные физические пространства.

Хотя World Labs планирует запустить свой первый коммерческий продукт в 2025 году, остается неясным, сможет ли компания преодолеть свои технические проблемы к тому времени.

Создано в генераторе видео Luma от KolerskyAI

В последнее время наблюдается значительный прогресс в создании 3D-сцен на базе искусственного интеллекта. WonderWorld, представленный прошлой осенью, сократил время создания новых 3D-сцен с нескольких часов до всего лишь десяти секунд.

Еще одна разработка была разработана стартапами Etched и Decart с их проектом "Oasis". Эта система создает воспроизводимые 3D-миры в режиме реального времени со скоростью 20 кадров в секунду.

Хотя игровой мир в стиле Minecraft допускает базовые взаимодействия, такие как перемещение, прыжки и подбирание объектов, в нем наблюдаются проблемы с согласованностью. Игроки, обернувшись, могут оказаться в совершенно иной среде, чем раньше.

Краткие сведения

AI startup World Labs разработала систему, которая использует отдельные фотографии для создания трехмерных сред, по которым можно перемещаться в браузере. По данным World Labs, технология позволяет создавать согласованные 3D-миры, которые следуют законам физики, но по-прежнему имеет значительные ограничения в плане свободы передвижения и рендеринга.
Несмотря на раннюю стадию разработки, World Labs уже привлекла венчурный капитал в размере 230 миллионов долларов от инвесторов, включая Андреессена Горовица, New Enterprise Associates, AMD, Intel и Nvidia. Основатель Фей-Фей Ли планирует разработать "модели большого мира", которые смогут понять трехмерный физический мир.
В последние годы в разработке 3D-генерации с помощью искусственного интеллекта достигнут значительный прогресс, о чем свидетельствуют проекты Etched и Decart's WonderWorld и "Oasis", которые могут значительно сократить время, необходимое для создания новых 3D-сцен и создания игровых миров в режиме реального времени.