Нейросеть Flux.1 для генерации изображений. Как использовать модели LoRa в Flux

[Александра]

Расскажу, как пользоваться набирающей популярность нейросетью Flux.1. Как правильно писать промт, чтобы получать качественные изображения. Что такое модели LoRa, как их использовать и зачем они нужны. Покажу, где можно пользоваться нейросетью Флакс по запросам на русском языке, онлайн, без регистрации с оплатой российской картой.

Нейросеть Flux.1 представляет собой мощный инструмент для генерации изображений на основе текстовых описаний. Разработанная командой бывших создателей Stable Diffusion нейросеть Флакс предлагает высокое качество изображений с отличной детализацией и разнообразием выходных данных.  Она лучше всех генерирует слова, текст на картинках и выдает самые реалистичные изображения. Это делает ее достойным конкурентом Midjourney, Stable Diffusion и Dalle.

Для тех, кто уже знаком с принципами работы нейросети Stable Diffusion, разобраться с Flux не составит труда. Они очень похожи, в ней точно также применяются весовые коэффициенты и поддерживаются модели LoRA. 

Как написать промт для нейросети Flux

Чтобы нейросеть Флакс создала именно то изображение, которое вы задумали важно правильно написать промпт (запрос). Покажу вам порядок составления запроса, который поможет получить максимально предсказуемый результат.

В идеале промт следует писать на английском языке, но многие сервисы с нейросетями отлично понимают запросы и на русском языке. Именно таким сервисом пользуюсь я, в нем уже собраны все нужные мне нейросети с оплатой российской картой, об этом расскажу в конце.

Структура промта для нейросети Flux:

• Объект: Опишите основной объект максимально подробно. Кто это, какой он, какого цвета, в каком настроении. Пример: «Белый дружелюбный лабрадор с красивой блестящей шерстью».
•  Действие/Поза: Подробно опишите что делает объект, в какой позе находится. Пример: «сидит с высунутым языком»
• Фон: Опишите, где находится объект. Пример: «на зеленой поляне из цветов ранним утром на рассвете»
• Настроение/Атмосфера: Опишите общее впечатление, которое должно передать изображение. Пример: «изображение передает ощущение безопасности и дружелюбности»
• Стиль: Укажите в каком стиле должно получиться изображение, может быть в стиле какого-то определенного художника, это профессиональное фото или рисунок карандашом, а может быть рисунок маслом или акварелью. Пример: «высокодетализированный рисунок выполнен масляными красками в стиле Шишкина»

По этой структуре вы сможете написать качественный промт для нейросети Флакс, а далее исходя из полученного результата доработать его.

Эта нейросеть пока еще очень молодая и может учитывать не все токены и стили указанные в промте. Однако за счет открытого кода и постоянного обучения она развивается очень быстрыми темпами и вскоре, я думаю, может оказаться наравне с Midjourney, а то и превзойти ее по качеству генераций. А пока все эти недостатки легко компенсируются моделями LoRa.

Что такое LoRA и как их использовать в Flux.1

LoRA (Low-Rank Adaptation) — это метод, используемый для более точной настройки больших моделей машинного обучения, таких как Flux и Stable Diffusion. LoRA позволяет пользователям настраивать поведение модели так, чтобы она лучше соответствовала конкретным задачам или стилям. Это авторские модели, которые обучены пользователями со всего мира. Их коллекцию, которая постоянно пополняется, можно найти на сайте civitai.com

Одной из основных причин использования LoRA является кастомизация. У каждого художника есть свой уникальный стиль, и иногда нейросеть по умолчанию может не идеально его передать. LoRA позволяет обучить нейросеть генерировать изображения в нужном вам стиле или с заданными характеристиками, которые более точно соответствуют вашему художественному видению. Это особенно полезно для нишевых тем или стилей, с которыми нейросеть Flux может не справиться из-за отсутствия достаточных знаний.

Стоит заметить, что Flux не поддерживает LoRA от Stable Diffusion, но на сайте уже есть достаточно большая коллекция LoRA именно для Flux.1.

Как найти LoRA для нейросети Flux.1

• Заходим на сайт civitai.com
• Выбираем в верхнем меню Models
• Там же в меню справа Filters -> LoRA -> Flux.1S -> Flux.1D
• Теперь нам видны все LoRA созданные для нейросети Flux

Как пользоваться нейросетью Flux и моделями LoRA через телеграм-бот

Flux можно установить на свой компьютер, но есть несколько причин почему я этого не делаю:

• эта нейронка требует много свободной оперативной памяти и мощную видеокарту;
• достаточно сложная установка для обычного пользователя;
• ноут не всегда находится под рукой и чаще работаю с телефона;
• мне выгоднее оплатить 1 сервис со всеми нужными нейросетями и пользоваться ими по мере необходимости, чем оплачивать каждую по отдельности ежемесячно и надеяться что меня не заблокируют.

Покажу вам, как я пользуюсь нейросетью Флакс и моделями Лора на русском языке через телеграм-бот без регистрации и зарубежных карт. Вы можете выбрать любой другой удобный вам сервис с подобными функциями, алгоритм будет примерно одинаковый.

• Заходим в телеграм-бот
• В нижнем меню нажимаем Нейросеть: ... [изменить] -> Flux
• В появившемся окне выбираем Flux (работа с изображениями)
• Нажимаем Настройки. Здесь мы можем выбрать нужную модель, каждая из них рассчитана на работу в определенном стиле, для примера выберем Flux.1. Далее выбираем семплер (определяет математический алгоритм обработки изображений) Euler a. Количество шагов выберем 20 steps, как правило этого достаточно и нужный нам размер изображения 768*1024   

• На этом этапе уже можно в строку ввода сообщения отправлять наш запрос, но я покажу как добавить к запросу LoRA. Выбираем Стиль, далее в самом низу выбираем Галерея LoRA.
• В открывшемся окне можно просмотреть установленные Лоры. Для примера выберу LoRA для создания многоцветных надписей. Копируем код и отправляем боту промт в формате "текст вашего промта <lora:****:1>" . Если к LoRA прилагаются триггерные слова, то их тоже необходимо добавить в промт, и нажимаем Самолетик.

Вот такое изображение у меня получилось с применением Лоры. Стоимость 1 генерации составит примерно 50 коп.-1 рубль в зависимости от выбранного в настройках размера картинки.

Если вы не нашли нужную модель LoRA в боте, то ее можно загрузить с сайта civitai.com

Для примера загрузим модель LoRA, обученную создавать картины в стиле вышивки гладью:

• Запускаем в телеграм-боте нейросеть Флакс, как было указано выше
• Находим на сайте civitai.com нужную нам модель LoRA и копируем из адресной строки полную ссылку на карточку

• Отправляем эту ссылку в бот и ждем уведомление об установке
• отправляем промт с уникальным ключом LoRA, в нашем случае "алый журавль стоит на поляне среди ярких разноцветных цветов, вышивка гладью <lora:700996:1>", если у лоры есть триггерные слова, то обязательно добавляем их в промпт.

Для сравнения покажу несколько примеров генерации изображений в нейросети Flux.1 по одному и тому же запросу с использованием моделей LoRA и без:

Промпт: алый журавль стоит на поляне среди ярких разноцветных цветов, вышивка гладью

Промпт: the images shows a cave painting in an old cave of  people dancing around a bonfire, наскальная живопись

Промпт: Обложка для журнала Человек паук, Book cover: "80s_book_titles"

Промпт: romanticism art style of Salvador Dali, singularity black rivers ripple their banks in the depth-spanning evocative form of this pullarist and whimsical creation: one with an intelligent figure who radiatest passion and intelligence. She wearstrupted into her impressionist physique to decipher what she wants out. She moves confidently across all shapes and sizes crafted from high fiber, carrying through a swirly energy network in which they are filled with complex parts. It is both terrifying for viewers and captivating melancholic. , luxurious sharp focus, intense, dynamic cinematic color, intricate detail, best, located artistic, Fashion and art,elegant and sophisticated, innovative use of light and shadow, capturing the glamour of mid-20th century fashion, Art Nouveau, decorative, allegorical, symbolic

Теперь вы знаете, что из себя представляет нейросеть Flux. Как правильно и по какой структуре писать промты, чтобы получать качественные изображения. Мы рассмотрели, что такое модели LoRa, где их искать, как и зачем их использовать. Как пользоваться нейросетями на русском языке, без регистрации, зарубежных карт и даже с телефона через телеграм-бот.

Нейросеть Flux  - это выдающийся инструмент для генерации изображений, который сочетает в себе мощные технологии и доступность для обычных пользователей. С ее помощью можно создавать высококачественные изображения, используя простые и понятные запросы. Несмотря на некоторые недостатки, Flux предлагает множество преимуществ по сравнению с другими моделями, такими как Midjourney и Stable Diffusion. К тому же все недостатки с легкостью компенсируются моделями LoRA, что делает Flux еще более привлекательным выбором для творческих людей.

[Yes_Ai]

Краткое содержание статьи: Текст рассказывает о нейросети Flux.1, предназначенной для генерации изображений по текстовым описаниям (промптам). Автор выделяет преимущества этой нейросети: высокое качество изображений, схожесть с Stable Diffusion, возможность использования моделей LoRA для кастомизации стилей и результатов.

В тексте подробно объясняется, как правильно составлять промты для Flux, какие элементы включать (объект, действие, фон, настроение, стиль) и на каком языке лучше писать запросы. Также автор рассказывает о LoRA (Low-Rank Adaptation) – методе настройки нейросетей для достижения более точных результатов, при этом акцентируя внимание на том, что модели LoRA для Flux доступны на сайте civitai.com

Далее даётся подробная инструкция, как пользоваться нейросетью Flux и моделями LoRA через телеграм-бот без регистрации и оплаты зарубежными картами. Автор сравнивает результаты генерации изображений с использованием моделей LoRA и без них, демонстрируя преимущества кастомизации.