Відео

コメントありがとうございます。成功したとの事、良かったです。modelfileのデフォルトでは、確か相対パスだったのですが、何故か上手くいかなくて、絶対パスで指定しました。相対パスでの記述もしておけば良かったかなと少し反省。

コメントありがとうございます。次回は応用編として、Ollama Gererateのアドバンスノードを使ってもう少し詳細な設定を解説と、LLavaモデル導入で、元画像から、その画像の特徴を記述してもらって、プロンプトを生成みたいな解説が出来たらと思っています。Comfy-WaveSpeed、なんか爆速生成出来るものくらいの認識しかないのですが、とても気になりますね。LoRA利用時のトリガーワード、自動で追加できる方法あれば便利ですね。何か良い方法を見つけたらご報告しますね。

そうなんですよね、髪の毛周辺のジャギ気になりますね。なので、うちも8stepでなく16stepにしたりしてます。 FLUX.1-Turbo-Alphaは、まだ試してみた事なかったのですが一度試してみますね。いつもアドバイスありがとうございます。

コメントありがとうございます。この動画を作るのにローカルLLMで色んな記事を見て回ったのですが、その時にollamaを利用したLLMの記事もあったので、気にはなっていました。これって、アシスタントという、ローカルLLMに指示を与える設定ファイルを.jsonファイルにして読み込めるみたいですね。配信時期は未定ですが、Llama-3-ELYZA-JP-8B-GGUFで、検証してみたいと思います。また、完成したら見てやってくださいませ。

コメントありがとうございます。ひょっとして、Stability Matrixのバージョンが古いかもしれません。 それらについての手順を含めた簡単な動画を作成しましたので、一度お試しください。 ua-cam.com/video/8wVW8MRPHao/v-deo.html 不明点等ございましたら、またコメントください。

LLMとても気になります。まだ、あんまり把握してないんですよね。これって、ダイナミックプロンプトとのように、ランダムでプロンプトを生成するのとは違って言語モデルからプロンプトを生成するって認識でいいんですよね。一度試してみて、また、動画内でご報告するかもしれません。 いつも、助言ありがとうございます。また、来年もよろしくお願いいたします。

@@UncleAI733 ＞ランダムでプロンプト生成ではなく、言語モデルからプロンプトを生成するので合ってると思います。 ↓LLMを試すなら、下記動画が参考になるかと。 FlowStateチャンネル Searge LLM in ComfyUI is the SECRET to Prompting LIKE A BOSS 2024/09/26 この動画の概要欄に記述されてるpatreonの投稿を辿れば、ワークフローの画像も拾えます。

コメントありがとうございます。Recraft AI ホントにたくさん機能ありますよね。ロゴデザインとかも作れたりするのですが、あんまり把握できていません。日本語のロゴとかが作れるようになったら無敵のような気がしますw

Thank you for your comment. It is still only available in ComfyUI. I am also waiting for it to be available in Webui forge.

コメントありがとうございます。そうですね、AIの進化で作る楽曲もかなりクオリティが上がってきてるのですが、やっぱり人の生の声や、生の演奏で受ける感動には、まだ叶わないかなと思ったりします。多分、歌が上手いとか演奏が上手だとか以外の何かが伝わってくるのだと思います。 @hiraqu5696さんの曲、聞かせていただきました。中々良いですね、これは、Dawとかで作ってミキシングしてるのですか？また、音楽の話を聞かせていただけたらと思います。では、また！

ご視聴ありがとうございます。そうなんですよね。サビとか間奏で、色々と構想はあったのですが、中々思い通りに生成出来なくてw 例えば、ギターの娘にズームして、なんかさせるみたいなプロンプトを書いたんですが、ズームはするけど、その後全く違う人に変わったりとか。ホント難しいですね。あと、アニメ調とかの生成は、顔の表情が崩れる割合がとても多いですね。使えそうなのに当たるまでひたすらガチャです。 今度はもう少し良いものを出来るように頑張りますので、良かったらまた見てやってくださいませ。

@@UncleAI733 アニメキャラの顔崩れや一貫性の維持は難しそうですが、曲の出だしの「チャララ～ン」の部分で、各楽器のアップカットを混ぜる手法は使えると思います。

助言ありがとうございます～。参考にさせていただきます。今度は、もっと各キャラに個性を持たせたいなと思ったりしてます。難しそうだけどw

コメントありがとうございます。 これって、ひょっとして上層のクリップのキーフレームが、効いていないような感じですね。 キーフレームは、上層のクリップのみに設定をします。 透明度の値を0にするのは、上層クリップの最後に設定するキーフレームのみです。 要は上層の画面が、段々と透明になって最終的に下層の画面が見えてくるような仕組みです。 一応念のため、ループ動画クリップの手順を下記しますね。 ・元の動画クリップを確認しながら、後半部分を切り取る ・切り取った部分を、上層の先頭に移動する ・下層のクリップを少し後ろに移動する　※上層と下層のクリップが重なる ・上層のクリップを選択して、バーを下層のクリップの先頭に移動する ・その状態で、キーフレームボタンを押す ・バーを上層クリップの最後に移動し、再度キーフレームボタンを押す ・その状態で、右メニューの不透明度の値を100から0にする これで、完了となります。 一度、ご確認いただいてよろしいでしょうか。また、不明な点がございましたらお気軽にお声がけくださいね。

あ、ホントだ！ありがとうございます。ComfyUIの便利設定色々ありますよね。他の方の記事もよく見るのですが、こんな事も出来るんだみたいな発見があります。

@@UncleAI733 ノードから繋ぎ変えたいラインの本数が１本ずつの場合なら、切断して繋ぎ直しても良いのですが、ラインが２ヶ所以上のノードに繋がってる場合は、Shiftキーを押しながらラインを繋げ変えた方が、見落としが無くて圧倒的に便利です。

確かに、切断したのはいいけど、あれ？何処に繋げたら良かったっけ？みたいなのがありますね。

貴重なコメントありがとうございます！！試しに、Hyper Fluxという、devを8ステップで動作するLoraを組み込んでfill devで、一応動作しました。生成時間は、Fill turboと同じくらいになりました。とりあえず、ご報告でした。

@@UncleAI733 ありがとうございます！GGUFとHyper Flux LoRAを組み合わせれば、もう少し速くなりそうですね？

@@UncleAI733 自分のPC環境、RTX3060、VRAM12GB(メインメモリは96GB)でインペイントだけ試しました。 t5-v1_1-xxl-encoder-Q4_K_S.ggufとFLUX1-Turbo-AlphaのLoRAを組み合わせ、STEP数は8に設定して、生成時間は70秒ほどでした。 まぁまぁ満足かな・・・？

検証ありがとうございます。こちらも、Hyper flux.1 dev 8step lora での生成結果は下記のようになりました。 題材は、今回の動画でも検証したニット帽の女性です Flux-fill-dev　 1回目 95.18s 2回目 35.98s FluxFill-FP8_V10　 1回目 70.09s 2回目 36.06s FluxfillV1FP8Turbo_10　1回目 70.24s 2回目 36.71s Flux-fill-dev-Q8_0　 1回目66.77s 2回目46.72s これを見ると、2回目がほとんど大差なくなってしまいました。うーん、Turboくんの存在価値がw

@@UncleAI733 やっぱりLoRAは有効ですねぇ～～☺

@GISIGISI-j4bさん、ありがとうございます～。とても嬉しいです。私自身、経験が浅い初級者なのですが、だからこそ上級者の方には当たり前でスルーするところも説明していけたらと思います。 これからもよろしくお願いします。

@arisa_tomiokaさん、こちらこそ　ご視聴ありがとうございます～

ご質問ありがとうございます。動画概要欄にある、下記のリンクからこちらでもダウンロードしてみてるのですが 今のところ、ダウンロードは進んでるようです。また、結果をお知らせいたします。 huggingface.co/stabilityai/stable-diffusion-3.5-large/tree/main

一応、こちらでは問題なくダウンロード出来ました。結構時間はかかったけど。 リンクには多分問題ないようですね。ネットワークに問題が無いようでしたら、一時的に向こうのサーバーに問題があったとかかもしれないですね。また、お時間を変えて試していただいてよろしいでしょうか。 以上、よろしくお願いいたします。

ComfyUIの画面が新しくなったみたいですね。今までのコントロールパネルが無くなってますw 私も久しぶりにComFyUI起動したら面喰ってしまいました。 こちらについても、簡単ですが動画クリップ作成しましたので一度確認していただいてよろしいでしょうか。 ua-cam.com/video/MKji7Ud_T6w/v-deo.html あと、ComfyUIのインタフェースが新しくなって、割と便利な機能とかが追加になってるので、その辺りまた動画アップしたいと思ってますのでよかったら、また覗きに来てくださいませ。

@@UncleAI733 　さっそく解説用動画まで作成いただきありがとうございました！おかげでワークフローのロードができました。チャンネル登録もさせていただきましたので、新作動画を楽しみにしています。また質問させていただく事があると思いますがよろしくお願いします☺

ワークフロー無事ロード出来て良かったです。ComfyUI、新インタフェースと絶賛格闘中wなので、まとまりましたら動画アップいたしますのでよろしくです。

ご質問ありがとうございます。一度、確認をお願いしたいのですが、clipファイル3点が、\Packages\ComfyUI\models\clipフォルダに存在しますでしょうか？ ひょっとして、以前、WebUI Forge等を導入したとかで、\Packages\stable-diffusion-webui-forge\models\VAEに間違って格納してないでしょうか？　以上、よろしくお願いいたします。

返信ありがとうございます。 PC〉Windows C〉ComfyUI〉models〉clipに3点入っている状態です。

ご確認ありがとうございます。Cドライブ直下に、Stability MatrixでComfyUIのパッケージ導入という認識でよいかと思うのですが、パスの説明で、/Packagesより上の階層を端折ってるので混乱を招いているのかも？と思ったので、Clipファイルの格納先について簡単な動画クリップを作りました。大変お手数ですが再度ご確認をお願いできますでしょうか。 ua-cam.com/video/L9Teyz9d8MA/v-deo.html

詳細の動画、ありがとうございました。 無事に変更することができました！

コメントありがとうございます。確かにそれはありますね。私も以前、3回程生成して結局そのままじゃ使えないので良いとこどりして使ったことがあります。クレジットの消費がばかにならないので最近は短めで生成してます。 「予期せぬ変化」確かにw

@@UncleAI733 リンキンパークのMVみたいな尺を作ろうとすると、とてつもないぐらいクレジット必要になりそうですよね笑

ロストですね、あれカッコいいですよね。あれ見てKaiber始めた人も沢山いるんだろうなと思います。 しかし、現実は厳しくw そう簡単にはいきませんね。

ご質問ありがとうございます。ごめんなさい、別々のクリップだった動画が一つに....がどの部分を指しているのかがわからなくて... 今回の動画の流れを下記いたしますね。 ①楽曲、背景動画、環境音等、素材の生成 ②楽曲を、Filmoraに配置 ③背景動画を、Filmoraに配置 ④キーフレーム機能を使用して、ループクリップを作成→曲の終わりまでコピー ⑤環境音を、Filmoraに配置→楽曲サイズに合わせてコピー ⑥全ての設定が完了したら、MP4にエクスポートして動画の完成となります 概ね、以上のような感じとなります。

補足ですが、プレビューは 全画面で再生して確認したいです。

ご質問ありがとうございます。プレビュー表示ですが、ブラウザ表示がしたいという認識だと思うのですが、 Vrewのプロジェクトファイルを直接ブラウザ表示はできないので、下記の方法をお試しいただいてよろしいでしょうか。 ①プレビューしたいプロジェクトファイルをVrewで開いた状態で、エクスポート　→　プレビュー共有　を選択 ②プレビュー共有の画面で、共有するをクリック ③リンクが作成されるので、ブラウザで表示することができます※表示まで少し時間がかかります ④全画面表示にする場合は、動画画面の下に再生ボタン等のメニューがあり、一番右に全体画面というボタンあるのでそれをクリックします。 一度お試しくださいませ。

@@UncleAI733 ご返信ありがとうございます。 字幕を付け、プレビュー共有から 確認したのですが、 やはりプレビューから表示させようとすると字幕が一瞬出て消えてしまいます。(右側にはちゃんと字幕は入ってますが) また出力するとNotoSansJPBoldがPCにインストールされていませんというエラー文言がでます。

それが悪さしているのかと思いフォントダウンロードし、 Vrew内のシステムフォントにも該当フォントを確認したのですが、それでも表示がでてしまいます。 フォントを変更し字幕を作成し直すことは可能でしょうか。 (メインのvrewフォント設定が該当のエラーフォントになっているのであれば全て変更は不可と思いましたので、、)

それか 字幕の上にある［??］が5つあり 1つ1秒になっているのですが、 最初の1秒にしか字幕設定されていないとか そんなパターンもありますでしょうか。。

ご質問ありがとうございます。WebUI Forgeの導入は、下記リンクからの動画をご参照ください ua-cam.com/video/vWpW-NEhVWk/v-deo.html

ua-cam.com/users/shortsdzxOIGtDG0E こんな感じでしょうか？であれば、問題なくできますよ。 それぞれのクリップに下記のように入力 1個目のクリップ：①一番目　2個目のクリップ：①一番目　②二番目　3個目のクリップ：①一番目　②二番目　③三番目　 ひょっとしてやりたい事が違ってたらごめんなさい。

ご質問ありがとうございます。Hedra AIですが、以前ベータ版の時は特に商用利用については明記されていなかったのですが、最近サブスクリプションが始まってからは、無料プランが、”No commercial use”となりましたので有料プランで課金しないと商用利用はダメのようです。ちなみに、私も課金するか思案中ですw

@@UncleAI733さま、回答ありがとうございます。ちと無料版で試してみてから考えます。

勉強になったとのことで、こちらも嬉しいです。ありがとうございました。

ご質問ありがとうございます。クリップを追加で、テキストを入力したけど音声が入らないということですね。 多分、そのクリップは空きクリップかと思われますので、下記の手順でAI音声を作成してください ①テキスト欄にテキストを入力 ②トップメニューのAI音声を選択 ③斜め下辺りに、AI音声、効果音というボタンがあるのでそれをクリック ④空きクリップに、AI音声の画面が表示されるので、音声設定で編集 or エンターキーを押します これで、AI音声が作成されるかと思います。もし上手くいかなければまたご質問ください。

@@UncleAI733 🙏御座います。　試みてみます。

@@UncleAI733 やはりクリック出来ません。 この状態です。🙇 ua-cam.com/video/IoNv4PIrM0w/v-deo.html

動画拝見しました。メニューのAI音声は選択されてますね。そのメニューの左斜め下くらいに サブメニューで、AI音声効果音というメニューが出てるのでそれをクリックしてください また、結果を教えてください。

@@UncleAI733 ありがとう御座います。 やっと「AI音声効果音」という場所が解りました。　然し進めると？ 「動画の最後にはAI音声の効果を追加できません。」との表示が出てきて進みませんでした。？　😭

ご質問ありがとうございます。Devの生成物の、生成物とはDevで生成された画像のことで、個人的、科学的、商業的な目的で使用することが可能です。ただし、出力以外の派生物（ファインチューニングしたモデル、Lora等）は商業的な利用が不可とのことです。多分、DevをもとにLoraモデル等を自分で開発？して、それを商売にしてはダメよということだと思います。 なので、生成された画像をSNS等にアップロードすることは問題ないような感じですね。 すいません、私もざっくりとした説明しかできなくて申し訳ない。

@@UncleAI733 個人的にはミッドジャーニーの代替にしたいので商用できたらすごくありがたいのですが🥲

下記に、FLUX.1 [dev] 非商用ライセンスの要約について記述されています。 huggingface.co/black-forest-labs/FLUX.1-dev/blob/main/LICENSE.md Chat GPTに読み込んで、要約して調べてみたんだけど、「生成されたコンテンツ（Outputs）について、商用利用を含む任意の目的で使用することが許可されています。」とかの記述もあるんだけど、一方で 「商用利用の禁止: 非商用目的での利用が条件です。生成された画像を直接的または間接的に収益化することは許可されていません。したがって、SNSでのアップロードが商業活動や収益に結びつく場合は、追加の商用ライセンスが必要です。」みたいな記述もあるんですよね。誰かよく知っている方いらっしゃいましたら、ご教授お願いします。

@@UncleAI733 出力＝生成画像という事なら問題無さそうですね。 動画を見ながら6分はきついなと思っていましたが当方20秒でいけました。何とかdevをmidjourneyの代わりにしたいところです。 2-4（ライセンスの付与ー出力） 当社は出力に対する所有権を主張しません。お客様は、お客様が生成した出力と、本ライセンスに従ったその後の使用について単独で責任を負います。お客様は、本ライセンスで明示的に禁止されている場合を除き、出力をあらゆる目的（商業目的を含む）で使用できます。

ご質問ありがとうございます。音声登録で、マイク入力が反応無いとのことですね。ちなみに、キャラクターを選択してプレイボタンを押してサンプル音声は聞こえますか？聞こえたら出力側はOKなので、Shiftの基本的な動作は大丈夫のようなので、入力側の確認で下記を試してみてください。 ①Shiftのセッティングで、Microphone(input)の項目が正しく選択されているか ②PCのコントロールパネル　→　サウンド　→　録音タブで、マイクが選択されていて動作しているか 　※複数の録音デバイスがある場合、対象のデバイスを規定値に設定してみる。 ③Shiftの再起動(終了して再度起動) ④PCを再起動してみる 一度お試しくださいませ。また何かございましたらお気軽にご連絡くださいませ。

ご質問ありがとうございます。Hedra AIに音声をアップロードしたら、あとは、画像に合わせてリップシンク動画を生成する流れになりますので、その間で文言の変更は出来ません。違う文章を喋らせるには、また別の音声データをアップして動画を作成する手順となります。私もシーンごとに音声データをアップロードして、動画を作成してます。結構手間なのですが、Hedraで作ったリップシンク動画は表情豊かで気に入ってるので頑張って作ってますw

@@UncleAI733 なるほど！ありがとうございます！音声の学習は難しいようですね、、

使っていただきありがとうございます。音楽スタイルっていつも悩みますよね。このGPTsを使うことで スタイルの引き出しが増えて、より自分のイメージに近い楽曲が作れればいいなと思っています。 良い曲が出来た時ってホント楽しいですしね。