Генерация 3D моделей по 2D картинке теперь и на домашних видеокартах
Пользователь Igor Aherne выложил в свободный доступ сборку Trellis — мощный AI-инструмент для генерации 3D моделей из изображений от Microsoft, оптимизированную для видеокарт с 8 Гб видеопамяти (типа моей 4060)
Идем на Github, качаем архив, распаковываем его себе и запускаем run-gradio-fp16.bat. Если у вас 12-16 GB, то можно запустить полную версию с полной точностью (а не половинной). Можно работать через также через API.
После в браузере получаем доступ к UI по ссылке 127.0.0.1:7860. Генерация на моей видеокарте 3D-ассета занимает порядка 20 секунд, GLB файла (меш + текстуры) порядка 30 секунд.
Исходное изображение и 3D-модель:
И еще:
Вот такой меш получается по итогу.
вау кривая топология и тектсуры с запеченным светом, то что надо для огромных эпичных сцен(сарказм)
Вспоминаем, как рисовали нейросетки в самом начале. Тут же пока только-только.
с 8 Мб памяти(ಠ_ಠ)━☆ﾟ.*･｡ﾟ
Поправил.... Хотя у меня была видеокарта с 4 Мб еще :)
А нет по анимации чего ?
Опенсурсной пока качественной не увидел. 2D сейчас https://hailuoai.video/ делает, но там бесплатно немного можно - 3 генерации в день.
Для индюхи топово ящитаю