Преобразование изображения в изображение с помощью FLUX.1: Интуиция и руководство
•Метод SDEdit использует диффузионные модели для создания новых изображений на основе существующих и текстовых подсказок. •Метод применяется к FLUX.1. •Скрытая диффузия работает в скрытом пространстве меньшей размерности. •Процесс диффузии состоит из прямого и обратного рассеивания. •Шум добавляется в скрытое пространство по определенному графику. •Генерация изображений зависит от дополнительной информации, такой как текст. •Текст кодируется и передается в модель для направления процесса. •В обратном процессе SDEdit начинается с входного изображения + масштабированного шума. •Процесс обратного распространения выполняется с использованием зашумленного скрытого изображения и подсказки. •Установка зависимостей и загрузка конвейера FluxImg2Img. •Квантование и заморозка частей конвейера для соответствия графическому процессору. •Определение функции для загрузки изображений в нужном размере. •Запуск конвейера с параметрами для генерации изображений. •Модель создает изображения, соответствующие текстовой подсказке, но с некоторыми вольностями. •Важные параметры: numinferencesteps и сила. •Необходимость поиска более быстрого и точного подхода для улучшения результатов.
Этот пост подготовила нейросеть: сделала выжимку статьи и, возможно, даже перевела ее с английского. А бот опубликовал пост в Сетке.
