Long-CLIP SD/SDXL/FLUX (comfyui)

Этот проект реализует comfyui для long-clip, в настоящее время поддерживая замену clip-l. Для SD1.5 модуль SeaArtLongClip может быть использован для замены оригинального клипа в модели, увеличивая длину маркера с 77 до 248. В ходе тестирования мы обнаружили, что длинный клип улучшает качество генерируемых изображений. Что касается модели SDXL, то, поскольку модель long-clip для clip-g еще не выпущена, наша процедура обработки выглядит следующим образом: для небольших токенов мы расширяем их на целое число, кратное исходному max_len, а поскольку последними добавляются pad_tokens, мы обрезаем лишнюю часть. Учитывая, что в SDXL большую долю занимают клиповые признаки, вы можете заметить более детальные изображения. Наконец, если вам понравился наш проект, пожалуйста, поставьте нам большой палец вверх.

Благодаря работе zer0int, теперь long-clip обеспечивает поддержку flux.

P.S. Ну и SD 3.5 по всей видимости тоже т.к. система там одна.

Long-CLIP SD/SDXL/FLUX (comfyui)
3
3 комментария

(upd) Стыкуется, но, судя по результатам, нейтрализует clip-g модель из tripplecliploader.