OpenPose editor для ControlNet в Stable Diffusion

Друзья, когда ControlNet только вышел я сразу вам рассказывал, что уже через неделю будет расширение которое позволит нам редактировать позу прям в автоматике и даже без фотографии в качестве референса.

OpenPose editor для ControlNet в Stable Diffusion

Это расширение уже здесь

Установка очень простая переходите на вкладку Extensions – Avalibaile – Load находите в списке openpose-editor, Install, обратно на прошлую вкладку и Applay and Restart UI. Готово у вас появилась вкладка OpenPose Editor.

OpenPose editor для ControlNet в Stable Diffusion

Настройки тут простые как пять копеек, вы указываете размер своего холста т.е. разрешение будущей картинки. А потом берете скелетик и двигаете его так как хотите. Скелеты имеют по три точки на ногах, руках и теле, и еще несколько на голове, кликните на точку и удерживайте и вы можете легко поставить персонажа в нужную вам позу.

Я например поставлю вот в такую странную позу:

OpenPose editor для ControlNet в Stable Diffusion

Нужно немного приноровится чтобы понимать как точка за какой сустав отвечает, но схема рабочая.

Когда поза выставлена вы можете сохранить её как PNG чтобы использовать позднее, сохранить как JSON чтобы импортировать в другие программы, или сразу же отправить в ControlNet и сделать из этой позы картинку. Мы так и поступим.

Это мы уже на вкладке txt2img и все готово к работе
Это мы уже на вкладке txt2img и все готово к работе

Не забываем нажать галочку Enable и выставить модель openpose, препроцессор мы не ставим т.к. уже сделали эту работу сами. Генерируем!

Не спрашивайте хотел ли я получить именно это, но результатом я доволен как слон
Не спрашивайте хотел ли я получить именно это, но результатом я доволен как слон

Но это еще не все, если мы хотим сделать нескольких персонажей в этом нет никакой проблемы, просто увеличиваем размер холста, так, чтобы они физически помещались и жмем на кнопочку ADD.

<p>Я так вообще устрою пакистанский рейв.</p>

Я так вообще устрою пакистанский рейв.

А вот и результат, отличная динамичная сцена с минимумом усилий и тремя персонажами, в инпеинтинге сможем сделать им разные лица.

OpenPose editor для ControlNet в Stable Diffusion

Что еще тут есть полезного, на вкладке OpenPose Editor мы можем выставить позу по фотке и отредактировать её, для этого загрузите фото через кнопку Detect from Image. Если хочется то корректируем, или сразу закидываем в ControlNet.

Получаем позу из фотки в один клик
Получаем позу из фотки в один клик

Генерируем получаем превосходный результат.

Кстати, у этого нового персонажа еще нет имени, если есть идеи пишите в комментарии.
Кстати, у этого нового персонажа еще нет имени, если есть идеи пишите в комментарии.

Друзья, теперь все стало гораздо проще и удобнее, это очень важная веха которая меняет все.

Ну и раз уж я стал вашим местным оракулом, то расскажу как дальше будет развиваться эта тема. Появятся готовые пресеты для поз, чтобы выставленную позу можно было сохранить, будет библиотека с готовыми позами, ведь их можно загружать из JSON т.е. из программ для 3д моделирования и много откуда еще. И будет доработан в конце концов openhand и руки мы сможем выставлять точно так же в этом же расширении. Ну и в конце концов само расширение переедет по ближе, во вкладку генерации чтобы прямо там же создавать.

До этого по моим скромным оценкам уже по больше времени, думаю около месяца. Будем подождать. А пока have fun мои хорошие.

---

Вот мой список полезных ресурсов:

  • Арт-нейросети от Nerual Dreming основной канал по нейросетям - подпишитесь, чтобы быть в курсе всего!
  • Nerual Dreming на YouTube тут проводятся стримы и выкладываются гайды - подпишитесь!
  • Nerual Dreming на Boosty - записи всех стримов, ххх сеты, ассеты и секретные гайды только для подписчиков, и доступ в чат для самых продвинутых.
  • ДЕНЬГИ - чат, где мы учимся зарабатывать на наших нейро-талантах вместе с настоящими профи.
  • ЧЕЛЛЕНДЖИ - группа с новыми нейро-челенджами каждый день - участвуй!
  • СКЛАД - все, что нужно для вашей нейросети: лоры, модели, эмбединги - осторожно, там нет цензуры.
  • АДМИНСКАЯ - группа для администраторов нейро-каналов, добавьте свой канал в био, прежде чем подавать заявку.
  • Чат нейро-операторов - общайтесь, задавайте вопросы, делитесь опытом с более чем 500 нейро-операторами.
6363
43 комментария

Сипасипа блат! =)))

6
Ответить
5
Ответить

это бомба. можно было конечно и скетчем позы рисовать, но тут прям удобнее и нагляднее

2
Ответить

Это оно еще кривое и косое на скорую руку, через пару месяцев я думаю это будет нормально выглядящая 3дшненькая кукла типа тех на которых художники тренируются)

2
Ответить

Как и ожидалось постепенно все превращается большой и комплексный нейро редактор. Надо будет поразвлечься. Еще бы и с Blender это все состыковать..

2
Ответить

Для блендера там куче связок и пайпов уже)

1
Ответить

Комментарий недоступен

1
Ответить