Я слышал здесь любят нейросети?

Есть некоторое видео со статичным фоном, задача: превратить его визуально в мультипликацию.

Собственно вот пример нужного видео:

Первым делом я попробовал классические фильтры из какой-то старой программы, предоставляющей бесплатный период пользования. Получилось ну не особо неприемлемо:

В видео понятно конечно что имелось ввиду, но все же это мазня.

Далее в ход пошла более хитрая штука - EbSynth. Это не нейросеть, но в этой программе нужно выбрать 1 кадр, обрисовать его в нужной стилистике и на основе этого кадра программа потом стилизует все видео. Я не художник, но результат уже намного чище, а проблемы начинаются тогда, когда форма объектов сильно меняется:

Артефакты, когда я убираю лист бумаги, выглядят ужасно.

И собственно такой вопрос: есть ли сейчас в доступности какие-то средства, может быть на нейросетях и, может быть, даже платные, чтобы легко и без боли решить текущую задачу?

99
13 комментариев

Прямо без боли и в два клика сейчас ты не сможешь сделать. Такие вещи делаются наполовину через нейросетку, наполовину — через долгое и упорное траханье на этапе композинга)

3
Ответить

Ручками каждый кадр нужно дорисовать 
Как это в ротоскопии и делается

Ответить

Такие вещи делаются наполовину через нейросеткуДа, какую?

Ответить

В EbSynth нужно каждый раз обрисовывать кадры, где появляются артефакты. Вот есть видео, где человек рассказывает, как он делает видео с помощью этой программы.

2
Ответить

Да, это было в туториале. Но стиль придется заказывать у художника, а чем больше ключевых кадров, тем больше придется ему заплатить 🤷‍♂️

Ответить

Крутые у него видосы конечно. Но стиль у меня вызывает смешанные чувства.

Ответить

Обрежь видео по высоте там где артефакты.

Ответить