Stable Diffusion в Google Colab дополнение и использование LoRA. Создаём дизайн для сайтов



Это видео будет дополнением к видеоролику Как установить Stable Diffusion в Google Colab.

Я покажу как можно решить различные возникающие проблемы и ошибки.

А также как можно установить и использовать дополнения LoRA для Stable Diffusion в Google Colab.

И покажу одно дополнение, с его помощью можно создавать примеры дизайна для различных сайтов.

И так обо всём по порядку.

Время от времени при работе с блокнотом Stable Diffusion в Google Colab могут возникать различные ошибки.

Для их исправления создатель этого блокнота переодически выпускает его обновления.

Вот я открыл страницу в GitHub

Видим что последнее обновление было 2 часа назад.

Мы открываем блокнот кликая по картинке с заголовком AUTOMATIC1111.

Открывается новая страница с блокнотом.

У нас, если мы уже копировали блокнот к себе, уже есть копия на Google Диске.

Откроем его двумя кликами и скопируем путь к модели Deliberate.

После чего можно закрыть эту вкладку.

Далее сохраняем страницу с новой версией на Google Диск, нажимая на ссылку Копировать на Диск в верху страницы.

Появляется сообщение, что блокнот скопирован и нужно открыть его копию в новой вкладке браузера.

Переименовываем нашу копию блокнота на Google Диске, я добавляю дату — 29 — 03 — 2023.

И далее запускаем последовательно каждую из секций, как было показано в уже упомянутом видео.

Не забудьте вставить путь к модели Deliberate в поле Path_to_MODEL.

Теперь рассмотрим что такое LoRA для Stable Diffusion и как можно использовать в Google Colab.

Модели LoRA — это небольшие обученные модели для Stable Diffusion, которые вносят дополнительные изменения в генерацию изображений и используются вместе со стандартными моделями («checkpoint files» формата «ckpt» или «safetensors»).

Обычно они в 10-100 раз меньше, чем уже привычные модели «checkpoint files».

Это делает их очень привлекательными для людей, имеющих обширную коллекцию моделей.

LoRA расшифровывается как Low-Rank Adaptation, и подразумевает под собой — математический метод уменьшения количества обучаемых параметров.

Я нашел интересную модель LoRA PagePlanner [EXPERIMENTAL]

Которая позволяет легко создавать дизайн для сайтов.

Как добавит её в наш блокнот Stable Diffusion в Google Colab.

В начале мы скачиваем файл с моделью, как видите он имеет размер 144,12 Мб.

Пока скачивается файл, скопируем данные текстовой подсказки для одного из примеров.

Открываем Google Диск в браузере.

Переходим последовательно в папку SD, далее stable-diffusion-webui, models и в ней папку Lora.

Сюда загружаем наш скаченный файл pageplanner_v10.safetensors

Теперь переходим в наш блокнот Stable Diffusion, он оставался у нас открыт во вкладке браузера.

Тут два варианта дальнейших действий.

Первый — когда вы уже запускали блокнот, то нужно заново запустить секцию Start Stable-Diffusion.

Второй — когда не запускали, то пройти все этапы запуская последовательно каждую из секций.

Открываем ссылку в новой вкладке.

Под кнопкой Generate нажимаем третью красную кнопочку.

Далее переключаемся на вкладку LoRA и видим нашу модель.

Щелкаем по ней в строке для ввода подсказки добавляется специальный код.

Мы переходим на вкладку Textual Inversion.

И далее вводим параметры из текстовой подсказки, которые мы скопировали себе в текстовый документ.

И нажимаем на кнопку Generate.

Получаем изображение с примером дизайна сайта Природа.

Далее попробуем ещё один пример — сайт с планетами.

Можно изменить количество изображений на 4.

В прошлом видео я забыл рассказать, что все созданные изображения сохраняются на Google Диск.

Переходим последовательно в папку SD, далее stable-diffusion-webui, outputs и txt2img-images.

Здесь папки с изображениями разбитыми по дням.

И еще в папке stable-diffusion-webui храниться JSON файл с настройками ui-config.json

В нём прописаны начальные значения для всех параметров Stable Diffusion.

Вы всегда можете переключиться от модели Deliberate к стандартной модели Stable Diffusion 1.5. в поле Stable Diffusion Checkpoint.

Запускаем генерацию заново и получаем новые изображения для дизайна сайтов.

Давайте сгенерируем дизайн для сайта питомника щенков хаски.

Спасибо за просмотр этого видео на тему «Stable Diffusion в Google Colab дополнение и использование LoRA. Создаём дизайн для сайтов».

Если вы нашли это видео полезным, пожалуйста, ставьте лайк, делитесь и подписывайтесь на наш канал, чтобы получить больше новых видео.

Оставьте комментарий