Reference ComfyUi | IP-Adapter | Styles
Вставка
- Опубліковано 26 чер 2024
- In this video you will learn how to make similar images from one reference image. And learn to generate images based on a cue with a reference image style.
Menu:
00:00 - Introduction
02:19 - Installation of ComfyUI and installation of IP-Adapter with all models.
07:48 - Configuring the ComfyUI IP-Adapter scheme and installing Custom nodes.
11:38 - Review of the Reference IP-Adapter ComfyUI scheme.
22:42 - Epilogue
🔥 My structured course on "AUTOMATIC 1111" with my support on the website stabledif.ru
🔑 All links and files are available on Boosty:
boosty.to/stabledif
✔️Telegram channel: t.me/stabledif_lesson
✔️ Telegram CHAT: t.me/stable_dif
✔️VK Prompts: stabledif
#reference #nodes #comfyui - Навчання та стиль
🔥 Мой структурированный курс по "AUTOMATIC 1111" с моей поддержкой на сайте stabledif.ru
🔑 Все ссылки и файлы доступны на Boosty:
boosty.to/stabledif
✔️Телеграм-канал: t.me/stabledif_lesson
✔️ Telegram ЧАТ: t.me/stable_dif
✔️VK Prompts: vk.com/stabledif
не могли бы, Олег, ответить на простой вопрос - в группе "Model Load" есть 2 узла-нода с одинаковым названием CLIPTextEncodeSDXL, Нижний (негативный) - обычный, выбирается поиском, а верхний позитивный - модифицирован, отсутствует текст поле CLIP_G, но есть зато 2-я входная точка text_g. Нигде не нашел такого. Вы его сами модифицировали? ))
@@alexk1072 это стандартным вункционалом управления comfyui делается. Преобразованием на вход
Уррраааа!!!! Я научился сам модифицировать. Просто не вникал так глубоко. Глянул Полное руководство антинойс-а, там все ясно, щелкнуть правой кнопкой по форме (по узлу), не по самому изменяемому полю, а по форме, в контекстном меню найти соответствующую опцию Convert ... и нажать. Все!
Достаточно полезное видео! С нетерпением ждем курс по ComfyUi
Спасибо за видео! Очень вовремя! Очень нужная для меня информация. Установка не сложная, но нужно быть внимательным. Вообще в Конфи больше понимаешь процесс генерации и нодавая структура очень даже понятна.
Хорошее и нужное Видео! Очень жду Вашего курса по ComfyUi!
Спасибо Олег,как всегда круто!❤
Нейросети будут генерить контент, который будут смотреть нейросети, чтобы генерить лучший контент. Отлично! Этого я и хотел.
А еще можно будет наверно попросить нейросеть сделать нейросеть :)))
Спасибо, Олег - OreX!
Когда ждать курса по ComfyUI?
Всё круто, но к таким вещам нужен какой то файл описания, ибо завтра я уже не вспомню где что ткнуть, что бы что то сделать. А так всё заработало, почти сразу. )
Как может отпугнуть поэтапное озвучивание каждого шага? Всё как всегда с первого раза получилось, ну разве что установка последнего этапа ноды controlnet_aux, вернее её модель пришлось ждать загрузки, а после всё как по маслу! Благодарю Олег как всегда за внятную подачу материала!
Олег, пора курс по комфи выпускать.
Я лично жду с нетерпением.
готовь бабки, он бесплатно не делает))) даже ссылки на модели или рабочие файлы прячет на бусти своем
Курс пишу. И он будет не маленький, но очень подробный. Только урок по установки будет из 4-5 частей состоять. И настроенную сборку сделаю для курса. Хотел даже создание собственный нодов добавить, но это уже перебор.
@@bassaliga
То, что он рассказывает, деньгами не оценишь.
@@StableDiff
Для тех, кто подписан на boosty и покупал первый курс можно рассчитывать на скидку?
Здравствуйте. Возможно ли выложить ссылку на ip-adapter-reference.json куда нибудь? В boosty нет доступа
На верное глупый вопрос, но лучше спрошу... С помощью Stable Diffusion склеить как нибудь фотобаш без лишних страданий? Ну то есть вырезаешь шлем из одного места, перчатки там из другого, плащ из третьего, фон из четвёртого... А потом прогоняешь через Stable Diffusion и он сам все это органично склеивает, выставляет общее освещение, но сами сами объекты остаются теми, которые ты собрал? Если так можно, то какие промты для таких вещей работают? И если уже есть подобные уроки то можно на них ссылочку плиз?
Привет Очень жду курс по ConfiUi. В курсе будет анимации, видео и стилизация видео?
Почему у вас в конце каждого модели тип стоит как .symlink?
1!
Только сейчас начал вникать в Comfy UI и уже увидел преимущество над А1111, но сразу понял что у меня не будет так любимого мной Inpaint'a. Спасибо за уроки по Comfy, очень помогает разобраться.
А почему у тебя не будет Inpaint'а?
@@Name-cc8jj а есть ноды для рисования как в инпаинте? а то я только по ютубу учусь и мне не попадалось видео с инпеинтом
а можно персонажа в разные локации поместить?
Так в последнем обновлении controlnet появилась настройка весов для ipadapter и выбор пресетов, в том числе для копирования исключительно стиля
Посмотрим. Не обновлял пока.
Олег добрый день. У мня уже есть комфи с супиром и сттебл ср. Могу я использовать и эту схему естественно с добавлением нодов и моделей? И менять схемы? Или для каждой схемы нужна отдельная установка комфи?
В одной ComfyUI можно просто схемы менять. С нуля показываю, чтобы было понятно какие модели нужно ставить и куда.
@@StableDiff Спасибо Олег. Понял
ComfyUI только с н-видео картами работает?
Не только. Но для это надо установить библиотеку torch-directml, вместо torch.
Но это если у Вас видеокарта от AMD. Насчёт Intel и других не знаю.
Спасибо, бедные художники, последнее скоро потеряют
Художники только сильнее будут. Идеи будут рождаться пачками. И с фотографами тоже самое. Это как раньше про компьютер говорили, что он за нас работу всю делает.
@@StableDiff Понятно, вы рассказали о нормальных художниках. Я имел в виду традиционных, кто не дружит с нейросетями. А таких большинство. Многим рассказывал про возможности ИИ и все - вообще и думать не хотят
Лично у меня проблема Комфи в том, что мне не понятно надо ли тратить своё время на вовлечение в эту новую среду.
Изучал автоматик, поднаторел, пользуюсь, даёт результат. Но тут появился Комфи... Вроде и автоматика хватает, но и в Комфи плюшки классные есть.
Сейчас влезешь с ногами в Комфи, а потом опять? Опять автоматик выпустит обнову и будет лучше или не хуже, или Комфи перестанут поддерживать, как похоже с форджем обошлись 😑
Если всё устраивает, то можно и не усложнять. Как только не буде хватать возможностей А1111, то ноги сами приведут к ComfyUI. Иначе так можно только нейронки изучать и про работу забыть.
Если автоматика хватает - не вижу смысла влезать в комфи. Я туда полез в своё время исключительно потому что в автоматике на тот момент просто не было интересной мне новой функции. Потом начал разбираться и понял что комфи это в первую очередь для тех, кто заинтересован в экспериментах. Модульная структура в этом отношении дает небывалую свободу действий. Плюс, не знаю как сейчас у автоматика, но некоторое время назад оптимизированность процесса генерации была у комфи на голову выше. Но да, требует времени для изучения. Я например в итоге от автоматика вообще отказался. Все новинки, кстати, на комфи выходят в первую очередь. По поводу поддержки - не думаю что комфи перестанут поддерживать, так как это основной инструмент разработчиков Stable Diffusion, насколько я знаю.
ComfyUI=танцы с бубном . тяжелая ,сверхсложная таблица менделеева .кажется, только программеры и разработчики в ней секут. AUTOMATIC- полная противоположность .можно интуитивно и методом тыка многое освоить.
Практика показывает, что как только пользователь видит, что можно вытворять в ComfyUi, то страх перед нодами пропадает. Есть задачи, которые гораздо быстрее можно решить в ComfyUi, загрузив готовую схему. Это ограниченный визуальный язык программирования. Дальше начнём свои ноды писать 🤘
Надо просто потратить немного времени на изучение. ничего там сверхсложного нету. Другой вопрос - надо ли это лично вам.
@@StableDiff для меня решающим аргументом перехода на комфи стало то, что комфи во первых четко работает с моделями, а именно загрузка-выгрузка в видопамять, во вторых не запускает повторно ноды, которые уже отработали и настройки которых не поменялись. Вот эти две вещи меня действительно покорили.
Не, ну это жесть. Пока со всем этим разберешся, полжизни уйдет. Все это гораздо удобнее и лучше реализовано например в Leonardo или бесплатном рекрафте. А ну да, щас напишут - там же платно)). Ну да, леонардо платно, копейки стоит. Но мы же будем усираться месяцами изучать комфи на дорогом железе, но зато бесплатна)) А потом все блогеры дружно орут рекламируя флекси Хачатура, что его модель ДАЖЕ лучше Midjorney. Ну цирк же инфоциганский.
Если кого-то смущает конкретно comfyui и его интерфейс, то перенос стиля/композиции уже добавили в простые интерфейсы вроде automatic или invokeai.
А вообще, это ведь замечательно, что в локальных нейросетях появляется дополнительный функционал. От этого выиграют все.
Тех кто любит Leonardo/Recraft/Midjourney это волновать не должно, никуда эти нейросети от этого не пропадут.
А у людей с подходящим железом, для работы со стилями появится выбор между облачными сервисами и локальными нейросетями, вроде Comfyui/Invoke/Automatic и.т.д.
И это хорошо, потому что удобнее/лучше, это понятия субъективные, опять таки в зависимости от того где/кем и для чего применяется нейросеть.
Дело ведь не в бесплатности или копейках, а в том что функционала бывает недостаточно, или он чем-то ограничен.
Приведу примеры:
В Leonardo AI, в Style Reference есть только жёстко зафиксированные значения для влияния стиля, Low, Mid, High, Ultra, Max.
И бывают случаи когда High-ещё мало, а Ultra-уже через чур. Потому что так вздумалось установить разработчику. В этом случае придётся принять либо один, либо другой вариант. Не понятно, что помешало добавить возможность плавно менять вес например ползунком над которым и написано что вот в этом положении примерно high а тут mid.
В Recraft, тоже есть Create the style. Но там вообще нельзя регулировать вес стиля, в отличии хотя бы от 5 вариантов в Leonardo.
И это только один из нюансов.
В конце концов, каждый использует то что он хочет/может и в соответствии с целью/задачами/требованиями к инструменту.
Кроме того, финансовые возможности, как и способности к изучению чего-либо, у людей разные.
ComfyUI используют многие и далеко не у каждого на понимание интерфейса уйдёт пол жизни или даже месяцы, это преувеличение. "Уcиpaтьcя" для этого не потребуется.
Всё таки, это не квантовая физика и даже не программирование. Да и обучающих материалов на ютубе полно.
Что касается дороговизны железа, на видеокартах-затычках конечно не погенерировать, но на RTX 3060(от 26000 рублей) вполне комфортно. Может, для кого-то то это и дорого, но по цене это даже не RTX 3090 или 4090. В целом вполне бюджетная и массовая видеокарта.
В чём смысл данного видео? Оно для чайников с готовой схемой но без общего понимания как всё выстраивается, а пользоваться готовыми схемами без понимания что за что отвечает это не приведёт к пониманию и ничему не научишься, а только зря потраченное время