Видео маслом: Руина

Итог трехнедельного изучения нейронок: Nerf+EbSynth

Вначале я сделал видеосъемку с облетом вокруг исходного объекта.

Затем произвел раскадровку видео и прогнал через Nerf, где получил частично объемное изображение. Настроил камеру и снял рендер.

Полученное видео разбил на кадры. С помощью программы "Dynamic Auto-Painter PRO 7" сделал стилизацию 1, 80 и 100 кадра под акварель.

Следующий шаг был запуск EbSynth, по ключевым кадрам он насаживает текстуры опорного кадра. Программа очень простая в обращении и работает достаточно быстро. Рендер 100 кадров занял 2 минуты (3070 RTX).

Ну, а дальше, объединил всё в Сони Вегасе и получил конечное видео.

Основные проблемы:

1) Видны резкие изменения стиля у опорных кадров. Их можно вылечить с помощью махинаций с картой глубины. Это следующий шаг, нужно осваивать Премьер и Афтер Эффект;

2) Nerf чрезвычайно чувствителен к исходному видео. Лучше загружать меньше кадров, но с большим разрешением. Нормальные исходники получаются только при облете вокруг объекта, как попало снимать пока нельзя :(

Затрачено времени:

Съемка исходника - 2 минуты

Тренировка Nerf - 30 минут

Рендер видео 15 минут

Создание опорных кадров - 10 минут

Синтезирования новых кадров - 5 минут

Объединение кадров и их разбивка - 10

Итого: 72 минуты

А на то, чтобы заставить работать эти сетки и программы 10 часов. Как говорится, ламер - это судьба.

В целом я очень доволен результатом, огромный простор для творческих решений. Программы довольно доступны для освоения. Основная трудность их установка.

Большая благодарность дтферам за помощь, особенно @42 и @fofun ! Вы клевые!

#nerf