Stable Diffusionで同じ顔を生成！Cntrol Net IP-Adapter-FaceIDの使い方
Вставка
- Опубліковано 19 лип 2024
- この動画ではStable Diffusion WebUI(AUTOMATIC1111)でIP-Adapter-FaceIDを使って、同じ顔の人物を生成する方法を具体的に説明します。
IP-Adapter-FaceIDを使えば参照画像の顔と同じような顔の画像を、高精度で生成することが可能になります。
IP-Adapter-FaceIDは表情差分や、グラビア写真集、立ち絵の差分などで特に重宝する機能です。
00:00 オープニング
01:29 目次
01:58 IP-Adapter-FaceIDの導入
06:37 IP-Adapter-FaceIDの使い方
09:56 LoRAの重みの影響確認
10:54 まとめ
※本チャンネルの概要欄はプロモーションが含まれています
■動画内で紹介したリンク
IP-Adapter-FaceIDの使い方
itdtm.com/stablediffusion-ipa...
ControlNetのインストール方法
itdtm.com/sd-ctrlnet-openpose/
拡張機能の更新方法
itdtm.com/sd-update/
Dynamic Promptsの使い方
itdtm.com/sd-dynamicprompts/
■twitter フォローよろしくお願いします
/ nov_2010
■サブチャンネル
・のぶげーむ(Twtichのアーカイブを投稿中)
/ @user-dz3fq4uw2z
・NovMusic(自作曲を公開しています)
/ @novmusic7378
■使用機材
メインディスプレイ：LG UltraGear 27GN800-B
amzn.to/3ruJMBq
サブディスプレイ：IO-DATA GigaCrysta EX-LDGCQ241DB
amzn.to/3gXEqet
サブディスプレイ：IO-DATA GigaCrysta LCD-GCQ241XDB
amzn.to/2T4czQv
マウス：Razer Viper V2 Pro
amzn.to/3lT2NeF
キーボード：Razer Huntsman mini
amzn.to/3rFqeL3
マイク：TASCAM TM80
amzn.to/3d6fizt
オーディオインターフェイス：YAMAHA AG03
amzn.to/3uDn0sC
ヘッドセット：Razer BlackShark V2
amzn.to/3gP6IHI
#Stable Diffusion
#AI画像生成 - Навчання та стиль
Cntrol Net IP-Adapter-FaceIDの使い方については、概要欄に記事のリンクを貼っているのでご確認ください。
モデルとプリプロセッサーをダウンロードしたのですが、プリプロセッサーの格納場所が分からなくて困ってます
もしよければ教えて貰えると嬉しいです。
はじめまして、動画と記事を参考にさせていただいております。大変ありがとうございます。1点質問なのですが、DLしたcontrolモデルは.binでも大丈夫なのでしょうか？各3種DLしそれぞれフォルダにいれましたがstablediffusionのほうでプリプロセッサ、モデルに出てこないものもありまして。
データの拡張子は.binですね。
クライアントツールとcontrolnetの更新は実施しましたか？一度ご確認ください。
InsightFaceのインストールが必要らしいですが、動画はインストールなしの結果でしょうか？
insightFaceはインストール済ですね。
確かにcontrolnetのgitを確認するとインストールしてくださいと記載されていますが、更新時にインストール済だったので気にしていませんでした。
insightface自体が入っていないとエラーで出力できないと思われますが、お困りでしょうか？
Googleコラボで行うにはどこにモデルを入れたらいいのでしょうか？
2人の人物で、それぞれ別の顔を固定することはできますか？
一つの画像に複数の人物が描画されている画像を参照画像にして、複数人の画像を生成し、全ての人物の一貫性を保つことを想定します。
以上のことは実施できません。参照画像の人物は単一である必要があります。
複数人描かれている参照画像では、人物の認識エラーとなります(となる可能性が高い)。
画像生成しようとすると95%で一度止まって数分後に生成完了するんですけどなぜかわかりますでしょうか
vramが足りないせいかと考えられます。
足りないせいで、メモリスワップが発生し生成が遅くなっているのかと。
vramの使用状況をモニターして確認することをお勧めします。
InsightFaceインストは不要ですか？
insightface自体は必要なんですが、私の環境ではcontrolnetインストール時に自動でインストールされている状態です。
insightfaceがインストールされなく画像生成されない方がいるのであれば記事、動画を作成予定です。
a1111でinsightfaceがインストールされない方がいるのか情報が欲しいです。
@@nov-tube いつも動画ありがとうございます。insightfaceがインストールしておらず「AttributeError: module 'torch.nn.functional' has no attribute 'scaled_dot_product_attention'」と出ます。インストール方法をお手数ですが動画で教えて下さると助かります。よろしくお願いします！
controlnetは最新版に更新しました。モデルとloraもDLしてインスト。
controlnetを立ち上げIP-Adapterを選ぶと、ちゃんとDLしたモデルが表示されます。
なのでinsightfaceが入ってるんじゃないかな？？
でもでも生成すると・・・エラーなしで動いてるんですが、
うーむー・・これで似てるんでしょうかねぇ？？という結果に。
そのエラーはinshightfaceに関わるエラーではありません。
torchのバージョンを更新すれば解消されるかと思います。@@user-sino4-5
@@nov-tube さん
AI is in wonderlandさんのFaceID紹介動画で、
insightfaceを仮想環境にインストールするのは敷居が高い
と思われる方は、
従来の顔似せ機能「ReActor」をインスすると、
自動でinsightfaceも仮想環境にインストされるとのこと。
この際にReActor本体とともに、
MSの「VisualStudio」（ライブラリなど）もインストが必要とのことです。
素人考えですけど、VisualStudioというところが手掛かりになるのかしら？