Photo styling in Automatic1111 | InstantID and IP-Adapter

In this video you will learn how to stylize photographs in any style: from oil paints to comics or photorealistic styles. The faces from the portraits remain clearly recognizable. In this video we will analyze the technique in the Automatic 1111 interface, and Boosty has already posted a large and detailed video for implementing this process in ComfyUI.
Menu:
00:00 - Introduction
02:01 - What is InstantID and ip-adapter
04:55 - Setting InstantId to automatic1111
07:44 - Settings in automatic 1111 for styling
17:35 - Epilogue
Link to InstantID developer page: github.com/Mikubill/sd-webui-...
🔑 Scheme for ComfyUi and all links to Boosty:
🍀 boosty.to/stabledif
🔥 My structured course on "AUTOMATIC 1111" with my support on the website stabledif.ru
✔️Telegram channel: t.me/stabledif_lesson
✔️ Telegram CHAT: t.me/stable_dif
✔️VK Prompts: stabledif

Пікірлер: 101

  • @maxalbrant4441
    @maxalbrant44413 ай бұрын

    Большое спасибо. Как всегда информативно и всё по делу👍

  • @user-hu3cb4rb5n
    @user-hu3cb4rb5n3 ай бұрын

    Спасибо. Полезное видео. Уже знала про инстант айди и про адаптер, теперь знаю и как стили прикрутить.

  • @rcmusik1
    @rcmusik13 ай бұрын

    Спасибо) добавлю себе в избранные

  • @andreydugin1005
    @andreydugin10053 ай бұрын

    ❤ Ура ! Дождались ! Спасибо ! Ура ! ❤ ( для ComfyUI )

  • @RespectAi-ux3eo

    @RespectAi-ux3eo

    3 ай бұрын

    Расскажите чему вы так радуетесь?

  • @golovolomkino
    @golovolomkino3 ай бұрын

    Препроцессор ip-adapter_clip_sdxl_plus_vith что-то не находится. Подскажите, пожалуйста, кто-то знает, где его найти?

  • @yashkinig
    @yashkinig3 ай бұрын

    Блин,уже месяц хотел как купить курс,но что то откладывал, пойду оплачу👍

  • @user-rz1fg4fe1e
    @user-rz1fg4fe1e3 ай бұрын

    Огонь 🔥

  • @iojikiojik
    @iojikiojik3 ай бұрын

    Супер... спасибо

  • @user-tg3zp5bw9f
    @user-tg3zp5bw9f3 ай бұрын

    Спасибо ,всё круто .😂

  • @makimakins4349
    @makimakins4349Ай бұрын

    топчик

  • @wammaxy
    @wammaxy2 ай бұрын

    Спасибо за информацию. Можно делать только на моделях XL?

  • @jacobniles5005
    @jacobniles50053 ай бұрын

    Делаю все как на видео, все работает, почему то ни в одном результате нет схожести оригинального фота

  • @leoniddzhabiev
    @leoniddzhabiev3 ай бұрын

    спасибо

  • @VladGohn
    @VladGohn2 ай бұрын

    оно не работает с коробки, надо сначала установить insightface-0.7.3 в vevn, а так же отключить VAE и Clip skip чтоб заработало

  • @user-cw9ev9dq4v
    @user-cw9ev9dq4v3 ай бұрын

    10:30 ip-adapter CLIP не могу найти где скачать

  • @user-ss7cm5ym6h
    @user-ss7cm5ym6h2 ай бұрын

    а просто на 1.5 модели можно делать стилизацию?

  • @Lama-tu7fi
    @Lama-tu7fi3 ай бұрын

    А для моделей SD1.5 никак нельзя сделать? У меня SDXL не работают.

  • @dianaorion2
    @dianaorion23 ай бұрын

    Если у меня не SDХL, то как мне действовать? Просто препроцессоры не переименовывать? И спасибо за детальный разор! Это то, что я хотела!

  • @sverhchelovechek
    @sverhchelovechek3 ай бұрын

    чета в forge нужного препроцессора ip-adapter нет...

  • @YuryDa

    @YuryDa

    3 ай бұрын

    докачай

  • @sonjagrin4777
    @sonjagrin47772 ай бұрын

    Спасибо огромное. Первое видео получилось наAnimateDiff вчера благодаря вам. Со стилизацией не так радужно. Выдаёт ошибку RuntimeError: "addmm_impl_cpu_" not implemented for 'Half'

  • @rcmusik1
    @rcmusik13 ай бұрын

    Еще бы видео про Лору sdxl на своем компе без всяких сервисов и сайтов) не нашел на ютубе такого видео

  • @TintoMemes

    @TintoMemes

    3 ай бұрын

    Дааа) давно жду

  • @yangametv1222
    @yangametv12223 ай бұрын

    Хотелось бы конечно и Forge узнать какой препроцессор нужно использовать. Но в любом случае большое спасибо. Если кто-то уже разобрался с Forge - дайте знать в комментариях, пожалуйста

  • @intergalacticpassenger5911

    @intergalacticpassenger5911

    3 ай бұрын

    привет, в фордж в ControlUnit0 - preprocessor: InsightFace (InstantID); model: ip-adapter_instant_id_sdxl [eb2d3ec0]. ControlUnit1 - preprocessor: instant_id_face_keypoints; model: control_instant_id_sdxl [c5c25a50]

  • @yangametv1222

    @yangametv1222

    3 ай бұрын

    @@intergalacticpassenger5911 Это то понятно, а что на ControlUnit2 ставить? На видео ведь 3 контролнета задействовано

  • @svetlanaLisova666
    @svetlanaLisova6662 ай бұрын

    А что я делаю нитак, при выборе шагов (где то 30 беру) наверное много? Сильно ухудшает..

  • @gdanvolski2818
    @gdanvolski28183 ай бұрын

    🤝👍🙏

  • @user-zr9mp4mc4g
    @user-zr9mp4mc4g2 ай бұрын

    Здравствуйте! При стилизации фото, стал появляться водяной знак, что делать?

  • @_FirstName__LastName_
    @_FirstName__LastName_2 ай бұрын

    Кто-нибудь знает, почему на генерации в итоге получается менее детализированное изображение, чем на оригинале? Размеры исходных картинок совпадают попиксельно, более того - фото в фотошопе подобрано по крупности и позе, лицо по размеру совпадает с референсной генерацией. А на выходе - мыло, по крайней мере, по сравнению с генерацией с выключенным контролнет. Карта 3070Ti, 8GB.

  • @zashibal

    @zashibal

    2 ай бұрын

    такая же фигня, всё получается, но детализация оочень плохая одно мыло

  • @omxian408
    @omxian4083 ай бұрын

    Так, в целом, сколько оперативки и видеопамяти нужно на InstantID и IP-Adapter?

  • @maxvorobyev9596

    @maxvorobyev9596

    3 ай бұрын

    Для высоких разрешений не меньше 12Гб видеопамяти и 32Гб оперативки. У меня в данный момент загружены 22 гига (вся система) + 13 гигов видеопамяти в момент рендера.

  • @Pit_74
    @Pit_743 ай бұрын

    А что за интерфейс у Вас на автоматике? Это обычный автоматик или фордж?

  • @Pit_74

    @Pit_74

    3 ай бұрын

    В частности кнопки расширений удобные

  • @TheMaxvin

    @TheMaxvin

    2 ай бұрын

    @@Pit_74 tabs extension

  • @mitteos
    @mitteos3 ай бұрын

    Спасибо за видео. А можешь пожалуйста ещё рассказать как включить FP8? Недавно Automatic1111 обновился и теперь есть поддержка FP8: использует меньшие объемы памяти при тех же вычислительных возможностях. Пишут люди что скорость на SDXL моделях довольно существенно увеличилась. Но я лично пока не знаю как включить эту функцию так как нужно ещё дополнительно установить PyTorch и шаманить с xformers, так как если не ошибаюсь то уже есть совместимость с PyTorc.

  • @StableDiff

    @StableDiff

    3 ай бұрын

    Модели нужно конвертировать под FP8. Скоро появятся такие модели. Но качество будет немного ниже.

  • @mitteos

    @mitteos

    3 ай бұрын

    @@StableDiff понял, значит это не что я думал... спасибо за ответ

  • @date2077

    @date2077

    3 ай бұрын

    @@StableDiff Ничего под fp8 конвертировать не надо.

  • @mitteos

    @mitteos

    3 ай бұрын

    @@date2077 Я в итоге всё сделал и включит эту функцию, так заметной прибавки к скорости я не ощутил. Естественно запускал без xFormerts так как оказывается он не совместим с PyTorch.

  • @yklandares
    @yklandares3 ай бұрын

    у меня в фордже в препроцесоре вместо ip-adapter_clip_sdxl_plus_vith стоит InsightFace+CLIP-H (IPAdapter) это тожесамое или надо качать тот что у вас именно

  • @StableDiff

    @StableDiff

    3 ай бұрын

    На forge не проверял. В видео обычный портабельный автоматик.

  • @user-ty8eo3up3g

    @user-ty8eo3up3g

    3 ай бұрын

    Да. Это тоже самое

  • @YuryDa

    @YuryDa

    3 ай бұрын

    нужно докачивать эту модель

  • @TheTornado73
    @TheTornado733 ай бұрын

    привет,спасибо - не знаю у кого как , у меня одного так? -) но после нескольких генераций подряд в базовом автоматике -ip adapter начинает рандомно отваливатся ,и пока не перезапустишь автоматик и не настроишь заново не работает , еще если фон светлый и лицо светлое не определяет лицо и если лицо примерно меньше определенного размера то-же выпадает в ошибку,на форже все ровно

  • @UralMahiyanov
    @UralMahiyanov2 ай бұрын

    В сборке от Христ не работает. (

  • @gromada2048
    @gromada20483 ай бұрын

    11:58 настройки вкратце.

  • @55bess
    @55bess3 ай бұрын

    в forge твоей сборки нет instant_id_face_embedding как это решить ?

  • @YuryDa

    @YuryDa

    3 ай бұрын

    Для начала скачать эту модель со страницы разработчика instantID и положить ее в нужную папку

  • @55bess

    @55bess

    3 ай бұрын

    @@YuryDa был на странице разработчика, нет модели с этим названием. Установлено еще 2 версии 1111, там есть по умолчанию именно эта эмбединг. Само название файла говорит о том что он встроенный

  • @Ograf00
    @Ograf002 ай бұрын

    не могу найти препроцессор ip-adapter_clip_sdxl_plus_vith , дайте ссылку, добрые люди....

  • @Iwatchvideoclip

    @Iwatchvideoclip

    Ай бұрын

    в поиске ip-adapter_clip_sdxl_plus_vith, первая ссылка

  • @dsdfsfe
    @dsdfsfe3 ай бұрын

    Про модели, которые нужно скачивать и будут использоваться, лучше бы в начале говорить, до самого процесса. А в целом, спасибо за полезную инфу!

  • @CrDesigner
    @CrDesigner3 ай бұрын

    Первое, ты не оставил ссылку на ip-adapter sdxl vit-h, пришлось самостоятельно искать h94 и выкачивать модель. Второе, уже целый час пытаюсь добиться результата по твоему тутору. Бросаю в основной фейс своё фото (в первые 2 кантрола, в третий бросаю стиль) но на выходе либо супергерой в маске, либо деваха. Где Я в этом уравнении?)))) Не работает.

  • @StableDiff

    @StableDiff

    3 ай бұрын

    Проверь веса CN

  • @wiwwiw2890

    @wiwwiw2890

    3 ай бұрын

    А переписать ссылку с видео, не догадался? )

  • @CrDesigner

    @CrDesigner

    3 ай бұрын

    @@StableDiff Всё ровно как у тебя

  • @CrDesigner

    @CrDesigner

    3 ай бұрын

    @@wiwwiw2890 А что быстрей, переписать длинную ссылку или на хабе ввести h94 ? ))))) Не учи отца детей делать.

  • @YuryDa

    @YuryDa

    3 ай бұрын

    смотри ошибки в консоли - скорее всего control net не задействуется

  • @konrezombie
    @konrezombie3 ай бұрын

    Почему-то ооочень долгая генерация идёт (rtx 4070 12gb, 32gb ram), при том, что без третьей панели CN всё окей и генерации с лицами проходят менее чем за минуту. В чём может быть проблема?

  • @TalkerSP

    @TalkerSP

    3 ай бұрын

    Тоже очень долгая генерация, более 7 минут кофиг такой же только оперативки 48гб

  • @YuryDa

    @YuryDa

    3 ай бұрын

    instant только на SD Forge работает быстро без танцев с бубном

  • @TheTornado73

    @TheTornado73

    3 ай бұрын

    в автоматике надо поставить - Optimizations-Cross attention optimization-xformers, по умолчанию авто стоит ,контрол нет слетает на генерацию процом даже с установленным флагом xformers при старте

  • @gromada2048

    @gromada2048

    2 ай бұрын

    ​​​​@@TheTornado73у меня 4060 8гб, 32 оперативы. Может конечно не хватает, но такой вопрос: Настройки-control.net-model cash size какой нужно ставить? Настройку оптимизации сделал, не помогло😢 при 24 шагах генерация длится около 20 минут. И ещё нужно ли в ctrlnet ставить галочку low vram?

  • @TheTornado73

    @TheTornado73

    2 ай бұрын

    @@gromada2048 да нужно , 8 гб конечно для sdxl откровенно мало ,еще в форже есть внизу вкладка never oom integrated попробуйте галки там поставить , там оно как то память хитро перераспределяет model cash size вообще не трогал по умолчанию

  • @Stoicismiphilosophia
    @Stoicismiphilosophia3 ай бұрын

    У меня Automatic 1111 и не одна модель XL не работает, если кто-то знает как решить проблему буду благодарен

  • @para11ax

    @para11ax

    3 ай бұрын

    возможно у тебя мало видеопамяти, у меня rtx 3070 8GB и мне тоже не хватает для нормальной работы.

  • @Stoicismiphilosophia

    @Stoicismiphilosophia

    3 ай бұрын

    @@para11ax у меня RTX 4070 12gb все тянет кроме XL

  • @YuryDa

    @YuryDa

    3 ай бұрын

    попробуй в SD Forge

  • @para11ax

    @para11ax

    3 ай бұрын

    @@YuryDa действительно, в Forge все работает

  • @YuryDa
    @YuryDa3 ай бұрын

    Очередная сырая чухня, которая не покрывает даже базовых потребностей. Стиль на втором изображении очень далек от заданного стиля. Ждем дальнейших улучшений. Но за видео огромное спасибо

  • @vegaferse102

    @vegaferse102

    3 ай бұрын

    Сам SD в целом сырой и не идеальный.

  • @YuryDa

    @YuryDa

    3 ай бұрын

    Все равно он лучше, чем Миджорни и Дали@@vegaferse102

  • @YuryDa

    @YuryDa

    3 ай бұрын

    Всё равно он лучше, чем Миджорни или Далли, так что довольствуемся тем, что имеем

  • @TheTornado73

    @TheTornado73

    3 ай бұрын

    промт не меняли ,надо играть- там вариатов тысячи - все нормально работает на форже

  • @Lw24_AI
    @Lw24_AI3 ай бұрын

    На колабе это делать бесполезно, такую порнуху выдает - больно смотреть😂😂😂

  • @wavilov.alexey
    @wavilov.alexey2 ай бұрын

    Ну вот. Танцы с бубном начались((((

  • @date2077
    @date20773 ай бұрын

    Хотел бы раскритиковать контент, он не несёт ничего нового, уже 100500 раз про это было сказано. От всех русскоязычных скоро отпишусь, уровень дно. В РУНЕТЕ толковые это Неуроген и Христ, остальные заняты не своим делом.

  • @user-ty8eo3up3g

    @user-ty8eo3up3g

    3 ай бұрын

    Да у Христа тоже норм контент был только на рассвете SD прошлой весной. Потом всякая мелочевка пошла. Но даже за тот старый контент ему низкий поклон. А вот среди западных есть интересные челы, особенно автор IPAdapter-а. Сам планировал по комфи какие нибудь интересные туторы записать

  • @date2077

    @date2077

    3 ай бұрын

    @@user-ty8eo3up3g согласен. А есть еще кто интересный в Ру сегменте? Из интересных могу посоветовать computergraphics42, русскоговорящий американец.

  • @smartfox6553

    @smartfox6553

    3 ай бұрын

    @@user-ty8eo3up3g где найти на Ютубе автора IPAdapter-а? Какой ник у него или как его найти?

  • @dianaorion2

    @dianaorion2

    3 ай бұрын

    @@user-ty8eo3up3g у меня по Христу не всё получается. Плюс этот его стиль изъяснения... Не всегда въезжаю, что он говорит ))))

  • @TintoMemes

    @TintoMemes

    3 ай бұрын

    Не согласен!

  • @Mark_808
    @Mark_8082 ай бұрын

    Всё щас бизнесменов с картинами на холсте подвинут в конец очереди😂

Келесі