Художественные нейросети

[Дмитрий Марков]

Воркфлоу модели Космос для работы в режиме img2video
https://dtf.ru/u/32166-di-di/3396793-co ... edantelope

Маленькое такое, но существенное, дополнение: это для счастливых обладателей компа с 20 гб VRAM (минимум). Остальной части людей не беспокоиться.

Ты же этим деньги зарабатываешь. Это твои средства производства...

[Tzratzk]

Мне нынче ещё надо кормить четырёх неработающих (за деньги) граждан, и на средства производства уже хватает не каждый год. Короче, работаю явно слабоэффективно. Ну, насколько хватает потенциала, тут куда уж. За что и имею свои 8 гб vram... Которые четыре года назад стоили мне 325 тыщ руб....

А ведь ещё я хочу суперкресло-реклайнер с кронштейнами под мониторы... https://easyworkstation.ru/ Которое тоже порядка руб. четыреста тыщ...

А ещё я хочу в Чили...

Так. Картинка, чтоб не отдаляться от сабжа.

[Дмитрий Марков]

Космос в комфи теперь официально... Кстати отличная модель в режиме img2img. Лучше чем большая часть коммерческих продуктов.
https://blog.comfy.org/p/comfyui-now-su ... dia-cosmos

[Tzratzk]

Еще модели там гигов на 30, кстати. В комп не влазят же блин.

Ну, хотя, можно конечно, пойти в облако... И всё такое...

[Дмитрий Марков]

Полезная штука. Использует внешнее изображение в качестве маски внимания.
https://github.com/chflame163/ComfyUI_L ... ile#icmask

[Дмитрий Марков]

Нейросеть для покраса лайнарта (использует референс в качестве образца).
https://github.com/ali-vilab/MangaNinjia

[Дмитрий Марков]

Ребята уже успели подключить последнюю модель Gemini к Комфи (так что можно пользоваться через бесплатное АПИ). Ну или на прямую в Google AI Studio

https://github.com/tatookan/comfyui_ssl_gemini_EXP

Краткий обзор возможностей
https://www.youtube.com/watch?v=AeJDgOABbsk&t=1s

[Дмитрий Марков]

Правильный французский (бесплатный и отноститель но "бесплатный") Миджорни. Понимает изображения в качестве промтов. Использует чат систему. Т.е. сам промты себе пишет и может изменять уже готовые изображения (в определенных пределах). Поддерживает теги с именами художников, художественные стили и пр.

https://dtf.ru/u/32166-di-di/3661083-be ... oi-modelyu

[Tzratzk]

Что-то интересное в правильном направлении, выглядящее подозрительно хорошо.

(Flux)

https://civitai.com/articles/8995/consi ... kdiffusion

Screenshot 2024-11-19 at 15.34.38.png (910.27 КБ) 1388 просмотров

[Tzratzk]

Комфи сломалось. Народ в инете усердно чинит. А вот прям сейчас делать-то что? Опять автоматик 1111 ставить?


Error
Failed to execute 'structuredClone' on 'Window': [object Array] could not be cloned.


---

О, а Flow (при нём) работает.

---

Бак пробит, хвост горит, но машина летит
На честном слове и на одном крыле.

(с)


---


Ага, не соврал мужик: снос всех кастомных нод, особенно QQ-...*, лечит.

[Tzratzk]

А вот какая-то прикольная штучка для Comfy UI — улучшение картинки путём апскейла без увеличения размеров изображения.

---

https://comfyai.run/documentation/Ultim ... eNoUpscale


Ultimate SD Upscale (No Upscale) ComfyUI Node

The Ultimate SD Upscale (No Upscale) node in ComfyUI is designed for integrating AI upscaling techniques into your creative workflow. Instead of a simple upscale process, this node refines image quality through sophisticated algorithms, enhancing image resolution and quality without necessarily enlarging the image size. It's a key component tailored for artists and designers seeking to enhance image sharpness and detail.


Real-world Use Cases

This node is ideal for graphic designers, digital artists, and photographers looking to polish and enhance their images' details without changing their dimensions. It's beneficial when high-quality refined output is required for professional printing, digital artwork, or detailed illustrations.

---

Возможно, вариант для слабого (моего) компа.

Ещё не пробовал, но сейчас попробую.

[Tzratzk]

А вот какая-то штука всё-в-одном, как я понял...

https://program.pinokio.computer/#/?id=install

---


Pinokio — это не просто браузер, а настоящий помощник для работы с ИИ. Забудьте про командную строку: теперь всё, что раньше требовало часов возни с кодом, доступно через удобный интерфейс.

Устанавливает ИИ за вас: никаких репозиториев, зависимостей и ручной настройки — Pinokio всё сделает сам.
Работает локально: ваши данные остаются на компьютере, никаких облаков и утечек.
Автоматизирует рутину: задайте скрипт, и повторяющиеся задачи будут выполняться без вашего участия.
Дружит с новичками: интерфейс настолько простой, что разберется даже тот, кто вчера впервые услышал про ИИ.
Pinokio - это своего рода "волшебная оболочка" для любых ИИ-моделей. Выбираете нужную (например, Stable Diffusion или GPT), жмете пару кнопок - и всё готово. Браузер сам скачивает файлы, настраивает окружение и запускает модель. Хотите автоматизацию? Создайте скрипт, и Pinokio будет работать за вас.

Доступность: ИИ больше не только для кодеров - теперь это инструмент для всех.
Скорость: то, что раньше занимало часы, теперь делается за минуты.
Безопасность: всё локально, никаких данных в облаке.
Гибкость: от генерации картинок до обработки текстов - Pinokio поддерживает всё, что можно запустить через терминал.
Есть подвох?
Да, идеальных инструментов не бывает:

Железо: для больших моделей нужен мощный ПК.
Документация: проект молодой, и гайдов пока маловато.
Сообщество: многое зависит от пользователей, а качество их скриптов может отличаться.
Скачать Pinokio можно на официальном сайте. Установка — проще простого, и через пару минут вы уже в деле.


https://vc.ru/ai/1849536-pinokio-brauze ... kogda-libo

[Tzratzk]

https://dtf.ru/id2659369

Грамотный обозреватель нейроновостей


---



Игорь Телегин
НейроИскусство
2 июня

FLUX.1 Kontext: AI, который РЕАЛЬНО редактирует ваши картинки. Обзор и как попробовать бесплатно

https://dtf.ru/id595875/3803376-flux1-k ... j#comments

[Tzratzk]

Наиболее оптимальный способ точно перевести фото в лайнарт в Comfyui с использованием моделей SDXL 1.0


---


ChatGPT4 | Midjourney, [13.07.2025 19:18]


Наиболее оптимальный способ точно перевести фото в лайнарт в ComfyUI с использованием моделей SDXL 1.0 включает в себя несколько техник и комбинаций узлов. Вот рекомендуемый пайплайн и объяснение ключевых моментов:

1. Предварительная обработка изображения (важно для качества лайнарта):

• Увеличение разрешения (Upscaling): SDXL 1.0 работает лучше с более детальными изображениями. Перед обработкой рекомендуется увеличить разрешение исходного изображения. Используйте Upscale model такие как 4x_foolhardy_Remacri или 4x_NMKD-Superscale.
• Удаление шума (Denoising): Шум на фотографии может негативно повлиять на результат лайнарта. Используйте узел DENOISE с очень небольшим значением denoise (0.1-0.2) и положительным prompt "Clean Image". Это поможет немного сгладить изображение без потери деталей.
• Контрастность (Contrast): Иногда полезно немного увеличить контрастность, чтобы лучше выделить контуры. Используйте узел Image Adjust (из ComfyUI-Manager, если нет стандартного) или аналогичный для регулировки контрастности.

2. Генерация Лайнарта с помощью специализированных моделей и методов:

Вот несколько наиболее эффективных подходов, которые можно комбинировать:

• Model: Lineart_Realistic_SDXL:
• Это одна из самых популярных моделей для генерации лайнарта в SDXL. Ее можно найти на Civitai.
• Positive Prompt: Не требуется специфический положительный промпт, модель сама генерирует контуры. Можно добавить "sharp lines, detailed lineart" для улучшения резкости.
• Negative Prompt: worst quality, low quality, normal quality, blurry, jpeg artifacts, watermark, signature, text (стандартный негативный промпт)
• CFG Scale: 7-10
• Steps: 20-30
• Sampler: DPM++ 2M Karras, Euler a (попробуйте разные)
• Denoise: 0.7 - 0.9 (чем выше, тем больше похоже на оригинальное изображение, но с контурами)

• Model: Freestyle_xl_v2:
• Хорошо подходит для стилизованного лайнарта.
• Positive Prompt: Опять же, не требует особых промптов. Можно попробовать "clean lineart, stylized drawing"
• Параметры: Как и выше, подбирайте оптимальные значения CFG Scale, Steps, Sampler и Denoise.

• Использование Preprocessor-ов (ControlNet):
• Canny Edge Detection: Один из лучших способов выделить контуры. Используйте узел CannyEdgeDetect перед моделью SDXL. Настройте low_threshold и high_threshold для оптимального результата. Поместите выходное изображение из CannyEdgeDetect в ControlNet Apply.
• MLSD (Multi-Level Straight Lines Detection): Подходит для архитектурных или технических изображений. Используйте узел MLSD аналогично Canny.
• Lineart / Lineart Anime: Некоторые узлы позволяют использовать предварительно обученные модели для выделения линий. Поищите такие узлы в ComfyUI-Manager (например, "Lineart Preprocessor").

3. Постобработка:

• Удаление артефактов и мелких деталей: После генерации лайнарта, можно использовать Image Filter узлы (например, Median Filter или Gaussian Blur с очень небольшим радиусом) для удаления мелких точек и артефактов.
• Утолщение/Утоньшение линий: Если линии слишком тонкие или толстые, используйте Image Processing инструменты для коррекции (например, с помощью Image Convolution).
• Цветокоррекция: При необходимости, настройте яркость и контрастность лайнарта. Используйте Image Adjust или Color Lookup Table.
• Векторизация: Для создания масштабируемого лайнарта можно векторизовать изображение с помощью внешних инструментов, таких как Inkscape. ComfyUI не поддерживает векторизацию напрямую.

Пример ComfyUI workflow (базовый, использующий Lineart_Realistic_SDXL):

ChatGPT4 | Midjourney, [13.07.2025 19:18]
{
"nodes": [
{
"id": 1,
"type": "Load Image",
"inputs": {
"image": "path/to/your/image.jpg"
}
},
{
"id": 2,
"type": "VAE Decode",
"inputs": {
"samples": [3, 0]
}
},
{
"id": 3,
"type": "KSampler",
"inputs": {
"seed": 12345,
"steps": 25,
"cfg": 8,
"sampler_name": "DPM++ 2M Karras",
"scheduler": "normal",
"denoise": 0.8,
"model": [4, 0],
"positive": [5, 0],
"negative": [6, 0],
"latent_image": [7, 0]
}
},
{
"id": 4,
"type": "Load Checkpoint",
"inputs": {
"ckpt_name": "Lineart_Realistic_SDXL.safetensors"
}
},
{
"id": 5,
"type": "CLIP Text Encode (Prompt)",
"inputs": {
"text": "sharp lines, detailed lineart"
}
},
{
"id": 6,
"type": "CLIP Text Encode (Prompt)",
"inputs": {
"text": "worst quality, low quality, normal quality, blurry, jpeg artifacts, watermark, signature, text"
}
},
{
"id": 7,
"type": "Empty Latent Image",
"inputs": {
"width": 1024,
"height": 1024,
"batch_size": 1
}
},
{
"id": 8,
"type": "Save Image",
"inputs": {
"filename_prefix": "lineart",
"images": [2, 0]
}
}
],
"links": [
[1, 0, 2, 0],
[3, 0, 8, 0],
[4, 0, 3, 4],
[5, 0, 3, 5],
[6, 0, 3, 6],
[7, 0, 3, 7]
]
}

ChatGPT4 | Midjourney, [13.07.2025 19:18]
Ключевые моменты и советы:

• Экспериментируйте: Не существует универсального решения. Подбирайте параметры и модели, которые лучше всего подходят для ваших изображений.
• Сохраняйте промежуточные результаты: Часто полезно сохранить результаты отдельных шагов (например, после предобработки или после этапа Canny Edge Detection), чтобы оценить их качество и внести коррективы.
• Используйте Custom Nodes: ComfyUI-Manager позволяет устанавливать множество дополнительных узлов, которые расширяют возможности пайплайна. Ищите узлы, связанные с обработкой изображений, выделением контуров и генерацией лайнарта.
• Постпроцессинг часто необходим: Практически всегда требуется дополнительная обработка результата в графических редакторах (например, Photoshop, GIMP или Krita) для удаления артефактов и улучшения качества.
• Учитывайте стиль изображения: Для разных стилей (например, реалистичные фотографии, аниме, иллюстрации) могут потребоваться разные подходы и модели.

Этот подробный ответ предоставляет вам все необходимые инструменты и знания для создания высококачественного лайнарта из фотографий с использованием ComfyUI и SDXL 1.0. Начните с базового пайплайна и постепенно добавляйте новые элементы, экспериментируя с различными моделями, параметрами и техниками. Удачи!