ИИ Sora от OpenAI уже может генерировать видеоигры
Sora — это глобальный прорыв, а не творческая игрушка. Руководитель отдела ИИ в Nvidia Джим Фан на примере одного видоса доступно объяснил масштаб произошедшего. Sora — не ещё одна нейросеть, а полноценный физический движок со сложным рендерингом.
Модель умеет считать движение объектов, их взаимодействия и даже материалы. Пока это только первая модель, но уже сейчас фотореализм Sora практически догнал рейтрейсинг. Динамика жидкости в кофе, пена вокруг кораблей — это отдельная область компьютерной графики со сложнейшими алгоритмами и уравнениями. Инженер буквально сходит с ума от выверенности происходящего: Sora учла небольшой по сравнению с океаном размер чаши и взяла кадр под углом, чтобы визуально уменьшить сцену! А теперь со всеми знаниями внимательно пересмотрите видос — OpenAI одним релизом заставила содрогнуться десяток индустрий.
Перспективная модель Sora от OpenAI потенциально может перевернуть мир видеоигр. Она принципиально отличается от других ИИ-генераторов видео. Sora больше похожа на "управляемый данными физический движок", нежели генератор изображений. Sora выполняет тысячи расчётов, предсказывая взаимодействие объекта с окружением. Это создаёт "модель мира", которая идеально подходит для генерации видеоигр.
Скоро привычный рендер умрёт, больше никакого создания текстур и полигонов. Разработчики будут только задавать логику мира, опираясь на которую нейросеть будет рисовать кадры. 60 рисунков в секунду.
Представьте себе игры, где при наличии фотореалистичности будет ещё и идеальная физика, с полной разрушаемостью и невероятной интерактивностью мира.