AI-видео по вселенным "Warhammer 40K", "Game Of Thrones" и "Harry Potter"

"Неофициальный трейлер несуществующего фильма, сгенерированный с помощью нейронных сетей"

"Гарри Поттер и Молот Войны"

1 февраля 2024 года Павел Перегудов на своем ютуб-канале опубликовал AI-видео "Гарри Поттер и Молот Войны", в котором объединил вселенные "Warhammer 40K", "Игра Престолов" и "Гарри Поттер". В данный момент фанатский трейлер публикуется во многих телеграмм-каналах, посвященных тематике искусственного интеллекта (к примеру, "Метаверсище и ИИще" и "Технологии | Нейросети | Боты"), но чем же он смог зацепить людей и как он пришел к мысли объединения этих вселенных в единое целое?

Павел Перегудов

Для начала стоит рассмотреть повнимательнее личность Павла - кто он и как он пришел к идее создания подобного материала?

Павел Перегудов - российский продюсер и актер, участвовал в создании нескольких фильмов: игровых, короткометражных и документальных. Он занимается видеопроизводством более 15 лет в качестве СЕО и продюсера видеопродакшена "Студия Проспект", а также является участником и призером множества кинофестивалей, включая Short Film Corner Каннского международного кинофестиваля, НО, что более интересно для нас, Павел с 2017 года активно изучает нейросети и их возможности, является соучредителем двух ИИ-стартапов, работающих в области промышленности и частной космонавтики. Во всех его проектах используются технологии машинного обучения и искусственного интеллекта. Также Павел с 2022 года является креативным продюсером “Питчинга региональных киностартапов”. Это важное отраслевое мероприятие, которое проходит по инициативе Фонда поддержки регионального кинематографа (ФПРК), оно помогает малым инновационным коллективам и энтузиастам в кинематографии донести свои идеи напрямую профессионалам киноотрасли. В 2023 году эти два направления: кинематография и нейросети, наконец достаточно глубоко переплелись и это стало предметом его наиболее пристального исследования и экспериментов. С этого года Павел стал не только энтузиастом ИИ-видео с практическими экспериментами в этой области, но и активным участником конференций и форумов, посвященных применению нейросетей в кино- и медиа индустриях. Одна из таких лекций, посвященная развитию технологий и применению нейросетей в кинематографе, прошла в конце 2023 года в Казани: VidMK23 (большой ежегодный форум о видео).

Лекция Павла с форума VidMK23.

Также важно упомянуть, что Павел является не только действующим медиапродюсером, но и членом Ассоциации лабораторий по развитию ИИ в РФ, в некотором роде его можно назвать AI-первопроходцем российского кинематографа.

Что это за "микс"?

Мне кажется, что внутри каждого из нас живёт исследователь, который зачастую задается вопросом: "А что если..?". Я уточнил у Павла что руководило им при выборе темы завирусившегося ролика.

"Нейросети в области видео и кино (именно генеративные модели text2video) пока еще находятся в экспериментальной области: некоторые инструменты, которые я использовал в этой работе появились не более 2 месяцев назад и пока проходят период “отладки и тестирования”. Но я, наблюдая как все стремительно развивается, сейчас уже точно могу сказать что в ближайшее время эти технологии станут отраслевым стандартом медиапроизводства потому что ту свободу творчества, которую они дают невозможно сравнить ни с одним из текущих традиционных инструментами, задействованными сегодня в производстве кино. Своим шуточным экспериментом я хотел прежде всего привлечь внимание и зрителей, и профессионалов кино, что мы стоим на пороге одного из самых величайших прорывов в индустрии развлечения со времен появления звука в кино или интернета. Именно поэтому захотелось “соединить несоединяемое”, удивить теми технологическими возможностями, которые открываются прямо на наших глазах"
ответ Павла на мой вопрос

При производстве трейлера "Гарри Поттер и Молот Войны" было использовано довольно большое количество различных нейросетей. Вот основные из них:

  • Все изображения генерировались в Midjourney v6
  • Анимирование в интерфейсе ComfyUI с моделью StableVideoDiffusion
  • Апскейл видео Topaz Video AI 4
  • Фейсвап в https://www. deepswapper.com/
  • Липсинк в https://synclabs.so/
  • Голоса https://elevenlabs.io/

Итог

Данное видео является отличной визуализацией способностей нейросетей и человеческой фантазии, но, все же, показывает насколько ИИ далек от искусства, создаваемого человеком.
В своей следующей статье, написанной в соавторстве с самим Павлом, мы рассмотрим технический и этический вопросы об использовании нейросетей в современном творчестве, а также затронем тему нейросетей в современном геймдеве.

88
3 комментария

когда уже будет экранизация пиздец супер байкера?

Ответить

так-так, что за байкер? )))

Ответить