Stable Diffusion

Этот метод основывается на использовании предварительно обученных моделей "скрытой диффузии", что позволяет не только удалять фон, но и генерировать многослойные изображения без отдельных объектов, учитывая передний план/фон.

По отзывам пользователей, в большинстве случаев (97%) они предпочли бы использовать эту новую технологию вместо предыдущих специальных решений. Также юзеры сообщают, что качество наших сгенерированных прозрачных изображений сопоставимо с реальными коммерческими прозрачными ресурсами, такими как Adobe Stock.

Исследование

Больше новостей из мира нейросетей в источнике - 🎯 Нейро-Пушка

• Portrait (портрет) - кадр, в котором показано лицо или лицо с частью верхней части тела

• Full length, full body shot или full height (полный рост) - кадр, в котором показан объект от головы до ног

• Close up (крупный план) - кадр, в котором показаны только части тела или объекта, обычно лицо или его часть

• Tight (близко) - кадр, сделанный близко к объекту, обычно на таком кадре показаны только части тела или объекта

• Medium shot (средний план) - кадр, в котором объект показан от головы до талии или до колен

• Long shot- дальний план

• Panoramic view (панорманый вид) - кадр, показывающий широкий угол обзора, часто используется для пейзажных съемок

• Wide angle (широкоугольный объектив)- позволяет захватывать больший участок сцены, что делает изображение более широким и пространственным

• Back view (вид сзади) - кадр, показывающий объект сзади

• Front view (вид спереди) - кадр, показывающий объект спереди

• Diagonal view (диагональный вид) - кадр, показывающий объект под углом, не параллельно горизонту

• Top view (вид сверху) - кадр, показывающий объект сверху, как будто смотрят сверху вниз

• Bottom view (вид снизу) - кадр, показывающий объект снизу, как будто смотрят снизу вверх

Высокое разрешение/детализация.

Для придания изображению высокого качества вы можете использовать в своем запросе термины из списка ниже. Каждое слово отражает свой аспект детализации:

• Highly detailed- высокая степень детализации

• High resolution- высокое разрешение, которое может позволить изображению иметь более высокую детализацию

• Fine detail- позволяет создавать изображения с мягким и естественным видом, с небольшим количеством деталей

• Ultra detail- может создавать более реалистичные и детализированные изображения

• Sharp focus- резкий фокус, четкость и ясность деталей

• Soft focus- мягкий фокус, когда объект на изображении выглядит более размытым и неострым

• Clarity- ясность, которая может означать отсутствие размытости или искажений

• Intricacy- сложность и изысканность деталей

• Elaborateness- высокая степень проработки и детализации

• Complexity- наличие множества деталей, элементов и текстур, которые могут быть связаны между собой, что позволяет получить более сложное и интересное изображение.

• HDR (High Dynamic Range)- указание на использование технологии, которая позволяет сохранить детали в ярких и темных областях изображения.

• UHD (Ultra High Definition)- указание на использование высокого разрешения изображения, которое имеет более высокую четкость и детализацию.

• 4K- указание на использование изображения с разрешением 3840x2160 пикселей, что также является форматом высокого разрешения.

• 8K- указание на использование изображения с разрешением 7680x4320 пикселей, что также является форматом высокого разрешения.

В целом, все эти слова указывают, что вы ищете изображение, которое содержит множество мелких элементов, деталей и текстур, а также имеет четкие края и контуры, что позволяет увидеть все детали даже на более высоком увеличении изображения.

Освещение.

Это очень важный аспект в создании качественных изображений. Оно может влиять на настроение, цветовые оттенки, объем и общее восприятие изображения.

• Studio lighting- студийное освещение, которое обычно используется в фотостудиях для создания равномерного и мягкого света.

• Soft lighting- мягкое освещение, которое может использоваться для смягчения теней на изображении и создания более естественного и приятного восприятия.

• Diffused lighting- рассеянное освещение, которое помогает смягчить тени и сделать изображение более равномерным.

• Directional lighting- направленное освещение, которое может использоваться для создания эффекта глубины и объемности на изображении.

• Dramatic lighting- драматическое освещение, которое используется для создания более эмоционального и динамичного эффекта на изображении.

• Backlighting- контровой свет, подсветка сзади, которая может использоваться для создания контраста и выделения объекта на изображении.

• Spotlight- яркий световой луч, который используется для привлечения внимания к определенному объекту на изображении.

• Ambient lighting- добавляет к изображению дополнительное источник света, который равномерно освещает все объекты на сцене. Это помогает сделать изображение более ярким и видимым в тех местах, где нет прямых источников света.

• Ambient occlusion - это техника освещения, которая учитывает тени, которые формируются в углах и за предметами, где свет не может проникнуть. Использование этой техники может помочь создать изображения с более глубокой и реалистичной теневой отдачей.

• Natural lighting- свет, который приходит от солнца или других естественных источников света. Оно может создать красивую атмосферу и мягкие тени.

Цветовые схемы и палитры.

Используются для создания определенного настроения или эффекта в дизайне.

• Warm colours (Теплые цвета) - это цвета, которые ассоциируются с теплом и энергией, такие как красный, оранжевый и желтый.

• Cold colours (Холодные цвета) - это цвета, которые ассоциируются с прохладой и спокойствием, такие как синий, зеленый и фиолетовый.

• Natural colours- цветопередача, которая позволяет сохранить естественные цвета объектов

• Colour contrast (Цветовой контраст) - это разница между цветами, используемыми в изображении, которая может быть использована для улучшения визуального интереса и ясности.

• Monochromatic palette (Монохромная палитра) - это набор оттенков одного цвета, используемых в изображении или дизайне.

Для ярких цветов:

• Bright colours

• Bold colour scheme

• Vibrant palette

• Neon colours

• Electric color scheme

• Vivid Colours

Для пастельных цветов:

• Pastel palette

• Soft colours

• Subtle hues

• Pale tones

• Muted color scheme

Для тёмных цветов:

• Dark color scheme

• Moody colors

• Gothic palette

• Noir color scheme

• Shadowy hues

• Black and white palette

Стили и направления в изобразительном искусстве.

• Abstraction (абстракция) - это способ создания изображений с помощью геометрических фигур и линий.

• Artistic style (художественный стиль)- включает использование различных техник рисования, таких как масляная краска или акварель

• Retro style (ретро стиль)- создает эффект старинного фото путем добавления зернистости, искажений и оттенков к изображению.

• Graffiti (граффити)- использует яркие цвета и уличный стиль для создания изображений, напоминающих граффити на стенах зданий.

• Minimalism (минимализм)- использует простые формы, линии и цвета для создания минималистичного дизайна.

• Pop Art (поп-арт)- использует яркие, насыщенные цвета и графические элементы, чтобы создать эффект художественного поп-арта.

• Futurism (футуризм)- стиль, который использует визуальные эффекты, , чтобы представить образ будущего. Он часто характеризуется использованием геометрических форм, ярких цветов и динамичных линий для создания эффекта движения и скорости.

• Fantasy (фэнтези)- использует мифологических или вымышленных персонажей и существ, чтобы создать магическую или волшебную атмосферу.

• Sci-fi (научная фантастика)-характеризуется наличием элементов науки и технологии, которые не существуют в реальном мире, но могут быть реализованы в будущем. В отличие от фэнтези, где используются магия и сказочные элементы, научная фантастика стремится к научной достоверности и реализму.

• Realism (реализм)-создание приближенных к реальности изображений

• Surrealism (сюрреализм)- использует неожиданные комбинации объектов и элементов для создания необычных и воображаемых изображений.

Камеры для фото:

• iPhone

• Polaroid

• GoPro

• Drone photography

• Canon EOS 6D Mark

• Nikon Z FX

• Hasselblad

Выразительное лицо

Для создания выразительного выражения лица и красивых глаз в запросе можно использовать различные модификаторы и комбинации слов:

• "Expressive eyes" (выразительные глаза)

• "Glistening eyes" (блестящие глаза)

• "Bright eyes" (яркие глаза)

• "Intense gaze" (интенсивный взгляд)

• "Soft gaze" (мягкий взгляд)

• "Captivating smile" (очаровательная улыбка)

• "Radiant smile" (сияющая улыбка)

• "Charming expression" (очаровательное выражение)

• "Alluring eyes and smile" (завораживающие глаза и улыбка)

• "Clear and detailed eyes" (четкие и детализированные глаза)

Еще несколько полезных терминов:

• Photorealistic - стиль визуализации, который стремится создать изображения, которые выглядят так, как будто они были сняты на фотоаппарат. Использование этого стиля может помочь создать изображения, которые выглядят очень реалистично и естественно.

• Trending on Artstation - Artstation - это онлайн-сообщество для профессиональных художников, которое сосредоточено на художественных работах, связанных с играми, фильмами и другими медиа. Тренды на Artstation могут включать новые техники, стили и тенденции, которые могут влиять на то, как создаются изображения.

• Cinematic - используется для создания кинематографических изображений.

• Bokeh- эффект, который производит размытие объектов на заднем плане, создавая таким образом эффект глубины и фокусировки на основном объекте.

• Centered- расположить объект в центре

• Symmetrical face - симметричное лицо

• Light background- светлый фон

• Translucent - в промте делает объект полупрозрачным

Художники в промтах:

Для фото: by Greg Rutkowski, by Alphonse Mucha, by Adam Martinakis, by Rebeca Saray, by David Dubnitsky, by Steve McCurry, by Diane Arbus

Для картинок: byKonstantin Razumov, by Volegov, by Agnes Cecile, by Nicoletta Ceccoli, by Alejandro Burdisio, by Atgerm, by Carne Griffiths and Wadim Kashin

Для фото животных: by George Shiras, by Steve Bloom, by Igor Shpilenok, by Andrian Kolotilin, by Nick Brandt, by Joel Sartore

Изучайте запросы, комбинируйте их, наслаждайтесь творческим процессом и помните, важно не перегружать запрос слишком многими терминами и не использовать их бездумно, это может негативно сказаться на качестве и скорости генерации изображений. Подписывайся на канал и ставь лайк, если тема тебе интересна!

👍🔥Заходи к нам в телеграмм-канал Нейрохудожник, там ты найдёшь интересные промпты и другую полезную информацию о нейроартах.

Так же вам может понравится статья "Выражение лица, какие бывают эмоции и что написать в промт для выразительного взгляда"

Внизу будет полный чейнджлог который я постарался аккуратно перевести, но сперва я расскажу вам о самых заметных и приятных нововведениях, их не много, но они действительно крутые!

Мягкий инпеинтинг и поддержка моделей инпеинтинга для SDXL

Soft инпеинтинг с дополнительным размытием краев позволяет добиться невероятного качества изменения. Переходы теперь идеальные между оригиналом и инпеинтингом. Особенно если использовать модель для инпеинтинга SDXL, поддержка которых теперь доступна из коробки, просто скачайте модель как обычно. Взгляните на результаты, почти как ControlNet Inpainting в Fooocus.

Чтобы все работало хорошо надо поставить на максимум Mask blur, Masked content ставьте Original если хотите изменить то что уже нарисовано, например глаза или волосы, или Fill, если хотите добавить то, чего нет, например одеть очки или шляпу. Может понадобится поиграться с ползунком Denoising strength, в зависимости о задачи хорошо себя показывают значения от 0.5 до 1.

Структура папок при выборе моделей и лор

Поменялся интерфейс в меню экстрасетей (модели, лоры, эмбединги), теперь навигация представлена деревом каталогов и это наконец-то стало удобно.

Поддержка апскейлеров архитектуры DAT

Добавлена нативная поддержка апскейлеров формата DAT, попробуйте скачать 4xLSDIRDAT в папку stable-diffusion-webui\models\DAT, не страшно если её нет, можете создать, она появится при попытке активировать DAT апскейлер на вкладке Extras.

Кнопка быстрого Hires. fix

В txt2img теперь есть кнопка, которая позволяет сделать Hires. fix на уже готовой картинке, при этом сразу начинается апскейл экономя время.

Полный список изменений Automatic1111 версии 1.8.0

Основные особенности

• Обновление PyTorch до версии 2.1.2: улучшает общую производительность и добавляет новые функции.

• Мягкая заливка (Soft Inpainting): позволяет более естественно заполнять области на изображении.

• Поддержка FP8: использует меньшие объемы памяти при тех же вычислительных возможностях.

• Поддержка модели SDXL-Inpaint: предназначена для инпеинтинга областей на изображениях, созданных с помощью Stable Diffusion SDXL.

• Использование Spandrel: предлагает улучшенное качество результатов масштабирования и восстановления лиц.

• Автоматическая совместимость с предыдущими версиями: гарантирует корректную работу при загрузке infotext из старых изображений.

• Zero terminal SNR noise schedule option: предоставляет пользователям больший контроль над процессом генерации.

• Кнопка [✨] для исправления высокого разрешения: упрощает процесс улучшения качества выбранного изображения в галерее c помощью Hi-Res. Fix. .

• Отдельный репозиторий ресурсов: снижает зависимость от внешних сервисов и повышает безопасность.

• Официальная поддержка сэмплера LCM: расширяет возможности выбора алгоритмов генерации.

• Поддержка моделей апскейлеров DAT: позволяет увеличить детализацию изображений.

• Деревовидное представление экстра сетей: упрощает навигацию и управление экстросетями.

• Поддержка NPU (нейронных процессоров): ускоряет генерацию изображений на соответствующем оборудовании.

• Поддержка комментариев к промптам: облегчает документирование и понимание процесса создания изображений.

Незначительные изменения

• Вставка строк WIDTHxHEIGHT: теперь можно вставить строки с указанием ширины и высоты изображения в соответствующие поля.

• Живой предпросмотр на весь экран: добавлена опция для просмотра результатов генерации во весь экран.

• Сочетания клавиш для управления: добавлены сочетания клавиш для запуска генерации, пропуска и прерывания.

• Поддержка TCMALLOC: улучшена поддержка TCMALLOC на разных платформах для более эффективного использования памяти.

• Предупреждение о не найденном Lora: теперь появляется предупреждение, если модель Lora не найдена.

• Добавление отрицательных подсказок к Lora: появилась возможность добавлять отрицательные подсказки к моделям Lora в дополнительных сетях для более тонкой настройки генерации.

• Разные сиды в сетке xyz_grid: теперь можно устанавливать разные значения случайного числа (seed) для каждой оси в сетке xyz_grid.

• Преобразование VAE в bfloat16: добавлена опция для преобразования VAE в формат bfloat16, что позволяет экономить память без существенного влияния на качество.

• Улучшенная поддержка IPEX: улучшена поддержка библиотеки IPEX для ускорения вычислений на графических процессорах Intel.

• Прерывание генерации: появилась возможность прервать генерацию после завершения текущей итерации, а не ждать ее полного окончания.

• Управление полноэкранным предпросмотром: добавлено плавное появление/исчезновение элементов управления полноэкранным предпросмотром для более удобного взаимодействия.

• Более точный контроль заморозки настроек: теперь можно более точно выбирать, какие настройки будут заморожены и не будут меняться при изменении других параметров.

• Увеличение лимитов для апскейлеров: увеличены лимиты для апскейлеров, что позволяет работать с большими разрешениями.

• Регулировка размера кисти горячими клавишами: появилась возможность регулировать размер кисти с помощью горячих клавиш.

• Информация о модели: добавлена информация о модели в файл журнала CSV при сохранении изображений.

• Изменение размера столбцов: теперь можно менять размер большего количества столбцов в интерфейсе.

• Отключение наложения исходного изображения при инпеинтинге: добавлена опция не накладывать исходное изображение при инпеинтинге областей, позволяя увидеть результат инпеинтинга без наложения оригинала.

• Поддержка DDIM: добавлена опция Pad conds v0 для поддержки совместимости с алгоритмом генерации DDIM, как это было до версии 1.6.0.

• Плейсхолдер "Прерывание...": добавлен плейсхолдер "Прерывание..." для информирования пользователя о процессе остановки генерации.

• Кнопка обновления списка расширений: добавлена кнопка для обновления списка установленных расширений.

• Отключение пост-нормализации: добавлена опция для отключения нормализации изображения после расчета усиления, (disable normalize embeddings after calculating emphasis).

• Подсчет токенов: теперь при подсчете токенов учитываются включенные стили.

• Конфигурация кнопки [📂]: добавлена возможность настройки кнопки [📂] для управления отображением изображений в галерее.

• Вывод изображений с LyCORIS BOFT: добавлена поддержка вывода изображений с использованием сетей LyCORIS BOFT.

• Поддержка изменения размера столбцов на сенсорных устройствах: добавлена поддержка изменения ширины столбцов для удобства работы на планшетах.

Расширения и API

• Удалены пакеты: больше не требуются пакеты basicsr, gfpgan, realesrgan, а также их зависимости: absl-py, addict, beautifulsoup4, future, gdown, grpcio, importlib-metadata, lmdb, lpips, Markdown, platformdirs, PySocks, soupsieve, tb-nightly, tensorboard-data-server, tomli, Werkzeug, yapf, zipp, soupsieve.

• Идентификаторы задач для API: добавлена поддержка идентификаторов задач для API, что позволяет разработчикам отслеживать выполнение задач.

• Поддержка override_settings для API infotext: добавлена возможность переопределять настройки API infotext.

• Переименование модуля: модуль generation_parameters_copypaste переименован в infotext_utils.

• Исправлен сбой: исправлен сбой, вызванный исключением Script init.

• Обновление numpy: библиотека numpy обновлена до версии 1.26.2.

• Утилита для проверки модели: добавлена утилита для проверки типа данных и устройства модели.

• Общий метод forward для lora: реализован общий метод forward для всех методов встроенного расширения lora.

• Выполнение model_loaded_callback: callback model_loaded_callback теперь выполняется после перемещения модели на целевое устройство.

• self в CFGDenoiserParams: добавлен параметр self для CFGDenoiserParams, что повышает стабильность работы denoiser.

• TLS в режиме API: разрешен TLS в режиме API only (--nowebui).

• Новый callback: добавлен новый callback postprocess_image_after_composite.

• Обновление API modules/api/api.py: добавлена эндпоинт API для обновления списка эмбедингов.

• Функция set_named_arg: добавлена функция set_named_arg, позволяющая разработчикам устанавливать значения аргументов по имени.

• Callback before_token_counter: добавлен callback before_token_counter, который используется для комментариев к подсказкам.

• ResizeHandleRow: добавлена возможность переопределять параметр масштаба столбца ResizeHandleRow.

Производительность

• Улучшение производительности: значительно улучшена производительность для каталогов экстрасетей с большим количеством файлов.

• Сокращение повторного индексирования: сокращено ненужное повторное индексирование каталога экстрасетей .

• Оптимизация вызовов isfile/exists: исключены ненужные вызовы isfile/exists.

Исправления ошибок

• Исправлены множественные ошибки, связанные с поддержкой нескольких файлов стилей.

• Исправлены ошибки, связанные с использованием Lora.

• Восстановлена утерянная настройка (связанная с коммитом e294e46).

• Исправлена ошибка капсинга BLIP в Extras.

• Теперь информация infotext включается в сохраняемое исходное изображение для img2img.

• Исправлена обработка ситуации, когда axis_type в сетке xyz_grid имеет значение None.

• Добавлена функциональность IPv6 (когда аргумент Webui не передается).

• Исправлены проблемы с потокобезопасностью API для txt2img и img2img.

• Исправлена обработка случаев, когда selectable script_index имеет значение None.

• Исправлена ошибка загрузки файла config.json.

• Исправлено преобразование infotext из строкового типа в float.

• Устранена проблема с настройкой GRADIO_ANALYTICS_ENABLED.

• Исправлена конфигурация ведения логов.

• Исправлена обработка исключения CondFunc при разрешении атрибутов.

• Исправлены сбои при больших батчах.

• Исправлено использование неправильной модели из-за алиаса.

• Добавлен символ # в список недопустимых символов в названиях файлов.

• Исправлена проверка зависимостей для рассширений.

• Исправлен сброс индексов вкладок после перезапуска интерфейса.

• Исправлено вложенное ручное преобразование типов.

• Сохраняется выбор апскйлера после перезапуска.

• Исправлена фильтрация пустых значений в сетке XYZ, когда axis имеет целочисленный или десятичный тип (например, seed оси int).

• Исправлено регулярное выражение CLIP Interrogator topN.

• Исправлена ошибка типа данных в слое MHA/изменен механизм проверки типа данных для ручного преобразования.

• Обработана ошибка загрузки файла style.csv.

• Исправлена ошибка при редактировании карточек экстрасетей.

• Исправлена работа метаданных экстрасетей при первом создании файла .json с метаданными.

• Функция util.walk_files теперь нечувствительна к регистру расширений.

• Запрещено применение настроек, если страница расширений не загружена.

• Вызвана правильная функция для подсчета токенов в img2img.

• Исправлены ошибки исчезновения поиска/перезагрузки при использовании других расширений ExtraNetworks.

• Изящная обработка исключения чтения mtime из кэша.

• Прерывание по клавише Escape срабатывает только при видимой кнопке прерывания.

• Опция отключения подсчета токенов подсказок действительно отключает подсчет, а не просто скрывает результаты.

• Исправлено двойное масштабирования при инпейнте.

• Исправлено использование переведенного контента для сопоставления категорий.

• Исправлена работа параметра split_threshold при разделении больших изображений.

• Исправлена обработка изменения размера для мобильных устройств.

Другие изменения

• Добавлен идентификатор для "extra_options". Заменено числовое поле на слайдер.

• Изменено сравнение state dict на ref compare.

• Обновлена библиотека torch-rocm до версий 5.6/5.7.

• Путь к выходным файлам теперь основан на пути к данным.

• Изменён порядок модулей препроцессинга в вкладке "Extras".

• Удалён код cleanup_models.

• Теперь файл конфигурации интерфейса перезаписывается только при наличии изменений.

• Исправлена проблема с линтером из коммита 501993e.

• Обновлен файл README.md.

• Исправлена работа кнопки высокого разрешения и теперь фиксирует сид.

• Улучшено ведение логов, включая резервный логгер.

• Информация о генерации теперь читается из infotexts, а не из json.

• Улучшен метод get_crop_region.

• Обновлена версия библиотеки safetensors до 0.4.2.

• Добавлены всплывающие подсказки для create_submit_box.

• Реализовано подсветка строк таблицы при наведении курсора в вкладке расширения.

• Всегда добавляется временная метка к отображаемому изображению.

• Добавлена настройка core.filemode=false, чтобы не отслеживать изменения прав доступа к файлам.

• Нормализованы пути в аргументах командной строки.

• В строке прогресса теперь используется оригинальное название приложения.

• Метод register_tmp_file теперь используется также для mtime.

Ознакомиться с оригиналом и прочитать список всех изменения можно на этой странице.

Как обновиться?

Добавьте аргумент запуска git pull в ваш webui-user.bat, для этого просто откройте файл в блокноте, если не хотите обновляться при каждом запуске (рекомендую оставить), можете после обновления убрать его из файла.

Если у вас портативная версия, то возможно в ней есть update.bat, тогда активируйте его для обновления.

В случае если обновление происходит с ошибками может помочь удаление папки venv, после перезапуска автоматик сам перекачает окружение.

Я рассказываю больше о нейросетях и делюсь иллюстрациями у себя на YouTube, в телеграм и на Бусти. Буду рад вашей подписке и поддержке.

Эта новая технология очень проста в использовании: загружаете портретное изображение и запись вашего голоса (пение или диалог) и получаете на выходе полноценное видео. Инструмент способен генерировать видео любой продолжительности.

Такой метод позволяет сохранить вашу идентификацию и одновременно раскрыть мимику по максимуму.

Очень перспективный и удобный инструмент, учитывая то, что подойдёт почти любой язык, будь то китайский или английский.

Страница проекта

Больше о технологиях и нейросетях в источнике - 🎯 Нейро-Пушка