LORA это мой первый опыт с Dreambooth-подобной тренировкой модели лично. Что бы она заработала так, как нужно, требуется достичь некоего барьера, который бы перезаписал знание токена, что требует от 6 до 13+ тысяч шагов, судя по треду, а так же судя по личным наблюдениям. Моя тренировка для стиля начала давать хоть какие-то результаты в нужном ключ…
пум-пум-пум, но памяти реально жрёт мало 1660ti vram=3.6/4.2GB
Ух, боль.
Но, всё ещё куда лучше дримбута на процессоре, где на каждую тыщу шагов надо 10 часов