Flux를 스테이블 디퓨전 웹유아이 에서 사용할 수 있습니다
Вставка
- Опубліковано 28 гру 2024
- Flux를 Stable Diffusion WebUI에서 사용할 수 있습니다.
이전 Flux영상이 올라간 후에 많은 분들이 Flux를 ComfyUI에서 사용하는걸 어려워 하신다고 하셨습니다. 이 영상에서는 Flux를 스테이블 디퓨전 웹유이에서 사용하는 방법을 설명합니다.
Flux checkpoint모델을 다른 SD checkpoint모델 사용하는것과 동일한 방법으로 SD WebUI에서 사용할 수 있습니다. 정말 간편하고 쉽게 사용 가능 합니다. SD WebUI 환경이기 때문에 Flux를 사용한 InPainting도 정말 쉽고 편하게 실행할 수 있습니다.
Chapters:
00:36 Flux를 지원하는 SD WebUI
02:44 Flux 모델
06:54 WebUI 시작
10:00 InPainting
커피 사주세요 www.buymeacoff...
Forge 사이트 ###
github.com/lll...
Forge Major Update 발표 ###
github.com/lll...
Comfy.org Flux 블로그 ###
blog.comfy.org/
blog.comfy.org...
Stable Diffusion 강화버전을 사용하자 WebUI Forge - • 2024년에는 Stable Diffusi...
최고의 AI 생성 모델 Flux의 모든것 - 필요한 모든걸 자세하게 설명합니다. • 최고의 AI 생성 모델 Flux의 모든것...
ComfyUI를 시작합니다 시리즈 • ComfyUI를 시작합니다.
스테이블 디퓨전 (ComfyUI) IC-Light - 빛을 사용하면 이런 것도 가능합니다!!! • 스테이블 디퓨전 (ComfyUI) IC-...
Live Portrait #1 • 살아 움직이는 초상화를 만들어 주는 Li...
Live Portrait #2 • 살아 움직이는 초상화로 영화 한편 찍자 ...
이미지 업스케일링 끝판왕 - SUPIR (스테이블 디퓨전) • 이미지 업스케일링 끝판왕 - SUPIR ...
#stablediffusion #스테이블디퓨전 #Forge #Flux #InPainting #NF4 #BNB-NF4 #FP8 #FluxInpainting #Flux.1 #FluxDev #Dev #FluxSchnell #Schnell
정말 큰 도움 됩니다. 항상 좋은 정보에 큰 힘이 됩니다. 이렇게 빨리 제작해 주셔서 감사드립니다.
이 채널을 만났지가 얼마되지않아 서툴지만 따라가겠습니다.
항상 감사합니다.
초보자도 쉽게 알 수 있는 설명 덕분에 첫 영상부터 여기까지 올 수 있었습니다. 감사합니다. ㅎ
정말 반가운 소식입니다
오늘도 빠르고 유익한 영상 잘 보고
또 배우고 갑니다
감사합니다~
기초부터 자세히 알려주시니 너무 좋습니다. 초보분들은 디지클로 영상을 차례로보시면 분명 도움이 될깁니다.🎉🎉
와 안 그래도 최근 영상보고 comfyui 안 쓰는데, webui에서 못쓰나 생각하고 있었는데
이렇게 올려주시다니 감사합니다
정말 빠르게 영상만들어주셔서 감사합니다🎉😢😊
대박기다렸던 영상인데 감사해요❤
가장 많이 기다린 영상
정보 정말 감사합니다 !!!
Flux 사용해볼려고 comfyUI 공부중이었는데 마침 웹유아이로 하는방법을 올려주시다니 감사합니다
ComfyUI 공부중이셨는데, 이 영상이 ComfyUI공부에 방해가 되지는 않았으면 합니다만.. ㅠㅠ 저는 항상 ComfyUI 사용을 적극 추천합니다. ComfyUI를 꼭 배우시기 바랍니다. 훨씬 더 많은걸 할 수 있습니다.
comfyUI 계속 공부중입니다
한가지 더 궁금한 것이 flux 로라학습 할 수있는 프로그램에 대해 국내 영상 없는데 혹시 올려주실 계획이 있으실까요?
항상 감사합니다 ❤
웹ui에서 xl이랑 플럭스를 다 쓸 수 있군요 ㄷㄷ
여지껏 클로님이라 불렀는데 인장님이라고 불러야 하는군요!ㅋㅋㅋㅋ 기억해둘게영
그나저나 인장님의 답장은 왜 유튜브 알람으로 안 뜰까요... 내가 뭘 잘못 만졌나....
아무렇게나 부르셔도 됩니다. 불을 이름이 있어여 할거 같아서 그냥 붙인거라.ㅋㅋ..
알람에 대해서는, 글쎄요, 저도 궁금하긴 합니다.
크 감사합니다
저 nf4도 CheckpointLoaderNF4 노드 받으면 Comfy에서 인식 되는거 같습니다
어제 알려주신 Comfy 인페인팅 + nf4모델로 써보려고요
네, 맞습니다. ComfyUI에서도 많이들 사용하고 있습니다.
Sd를 하루 6시간이상 쓰지만, 편의성은 포지가 최고,
아... 열심이시군요.
아~~ 포지군요~!! 저는 순정인줄 알았습니다.
Automatic1111 (아, 이게 순정이군요 ㅎㅎ) 은 업뎃 버전을 신중하게 발표하는 스탈이라, 조금 늦을 것으로 보입니다.
리렉터 얼굴스왑하는거 Installed에 있는데 왜 txt2ing에는 없을까요?
항상 영상 잘보고 있습니다. 감사합니다! 그런데 Forge에서 Flux 사용할때 컨트롤넷 작동잘 되나요? 컨트롤넷 켜지고 추출하는것 까지는 작동되지만, 실제 이미지 생성할때는 런타임 에러나면서 적용되지 않네요
매번 감사합니다!
VAE, Diffusion in Low Bits 는 따로 필요없을까요?
NF4는 checkpoint 모델 이라서 꼭 필요하지는 않습니다.
포지 업데이트 되면서 세그먼트 애니팅이랑 리저널 프롬프트가 작동이 안되거나 안보이네요 ㅠㅠ 설치는 되어 있다고 뜨긴하는데. 기존 버전으로 ui돌아갈 수 있는 방법이 있는 걸까요?
Civitai에 들어가보니까 모델 종류가 Flux .1 S, Flux .1 D이렇게 나오는데 혹시 둘이 어떤 차이가 있는지 아시나요?
Flux모델을 사용해본적이 없어서 어떤걸 골라야 할지 모르겠네요
이 영상 바로 전에 Flux 설명에 이 둘의 차이 설명 했습니다. 하나는 Dev 이고 다른 하나는 Schnell입니다.
좋은 정보 감사합니다. webui forge flux에서 컨트롤넷을 설치하려고 하는데 어떻게 해야되는지 여쭤봐도 될까요?
아마 지금쯤은 아실거라 믿습니다. WebUI 에서는 Flux controlnet을 아직 지원하지 않습니다.
덕분에 잘 설치했습니다. 그런데 궁금한 게 있는데요. xl이나 플럭스로 인페인팅을 하면 원래 이미지랑 잘 어우러지지가 않고 부자연스럽게 나오는데 인페인팅 전용 모델 없이 그냥 잘 나올때까지 돌리시는건가요?
현재, inpainting전용 Flux는 보지못했습니다. 가끔 이상하게 나오기도 하는데, 이 영상에서 보여드렸던 예들은, 실행할때 마다 대부분 잘 나오는듯 합니다. 가끔 글자가 다르게 나오기도 하고, mask부분에 연결이 이상할때도 있습니다.
안녕하세요, 항상 좋은 영상 감사합니다. 저는 Forge를 단독으로 설치해서 사용중인데요, 제가 설치한 Forge에는 Update 파일이 없어서 Forge를 최신으로 업데이트를 못하고 있어요. 다른 방법으로 업데이트해서 위 영상처럼 Flux를 인터페이스 상단에 나오게 하는 방법이 있는지요?
portable에는 기본으로 update 배치 파일이 있어서 그거 실행하면 바로 업데이트가 됩니다.
그게 아니라, git/python을 다로 설치 해서 git 명령으로 설치하신 거라면, git pull 명령으로 최신 업뎃 할 수 있습니다.
혹시 이것도 저것도 어렵거나 안된다면, 최신 forge zip 파일을 다운 받아서 압축 풀고 사용하시면 됩니다. 물론 기존의 모델 파일들을 새로 설치한 forge에 다시 옮기셔야 합니다.
스테빌리티 매트릭스 앱 통해서 포지 업그레이드 했는데 선생님처럼 플럭스 모델 선택 창이 안 나옵니다.
Matrix에서 Forge사용하는 경우 문제가 있다고 하시는 분들이 계시네요. Forge만 개별적으로 설치해서 사용해 보시겠어요?
선생님 이미지생성까지는 잘 되는데, 인페인팅 하려고하니까 왜 마스킹된 부분만 화질이 번져서 나온다그래야하나... 되게 이상하게 나오내요... 마치 작업이 덜 된것처럼 마무리가 됩니다..노이즈도 껴있고..
해상도도 맞추고 기본설정인데....ㅜㅜ
글쎄요... 제가 이 영상에서 설명한 동일한 환경이면 문제 없이 나올텐데요... 분명 다른 어딘가에 이유가 있을듯 합니다.
좋은 강의 감사합니다. 이 영상을 보고 나서 forge 영상을 보고 설치했는데 SVD 탭이 비활성화 되어 있습니다. 선생님 이번 영상에서도 최신 버전은 SVD 탭이 안보이던데 이제 사용이 불가능해 진건가요?
최근 업데이트 되면서 UI가 바뀌었고, 추가되거나 사라진 기능들도 있습니다. SVD는 그중 하나입니다.
@@DigiClauLab 답변 감사합니다. 아쉬운 업데이트네요 ㅠㅜ
Two 21-year-old girls are holding hands, one smiling and the other looking sad,
이런식으로 넣어봤는데 자꾸 애니풍이 나오네요 ㅜㅜ 실사풍으로 뽑는 조건이 잇을까요?
가끔 이미지 해상도에 따라 다른 풍이 나오기도 하구요. prompt에 실제 사진 관련 내용을 구체적으로 넣어 주는것도 방법입니다.
@@DigiClauLab 그렇군요 ㅜ 감사합니다!
코랩용으로 올려주신 포지에서도 되는거같은데요 다운받은 모델은 체크포인트 폴더에 넣구 하면 되나요? 그리고 플럭스용 로라도 나온거로 알고 있는데요, 로라는 로라 폴더에 넣고 쓰면 될까요?
네, 맞습니다.
AssertionError: You do not have CLIP state dict! 무슨 내용일까요?
저도 forge에서 쓰려고 하니깐 뜨던데
confi ui 에서 할수있는거인지.. ㅇㄷ
기존 쓰던 forge에서 최신버전으로 간단하게 바꿀수있는 방법 없나요?ㅠ
update.bat 파일이 최신으로 업뎃 해줍니다.
안녕하세요 저도 아래forge단독설치하신분과 비슷한 상황인데 forge압축파일을 다시받는다면 기존forge폴더는 그냥 통째로 삭제해도되나요??
그리고 이번업데이트후 아직 forge가 기존기능이 안되는오류가 있다고하는데(저도 1.5가 좀 이상하다고 느껴진) 현재 전혀 문제없이 구동되시는지 궁금합니다.
네, forge portable을 다운 받아 사용하는 거라면 다른 프로그램들은 상관 없습니다.
Forge 업데이트 후 어떤 확장 프로그램들은 안되는 것들디 있습니다. 그런데, SD 1.5자체 사용에는 문제는 없어 보입니다.
기존 sd-webui 에서 flux 모델 올려서 쓰고있는데요. 이렇게 해도 이미지가 생성되기는 하거든요. 근데 실제로는 flux 가 동작하지 않는걸까요?
꼭 forge 를 써야하는지 궁금합니다.
네, SD-WebUI (Automatic1111)은 새로나온 기술들에 빠르게 적응하지 않는 빌드라서, Flux를 사용하게 되기까지 시간이 조금 걸릴거로 보입니다. Forge 개발자는 이런거에 좀 더 진심이라 바로 Flux에 맞게 업뎃을 해 주었네요.
혹시 작업중에 [Low GPU VRAM Warning] 가 나오는데 무시하고 해도 되는걸까요?
무시하고 아래것을 CMD에 입력하면 더이상 안나오는거같은데 해도될지..
If you want to take the risk of NVIDIA GPU fallback and test the 10x slower speed, you can (but are highly not recommended to) add '--disable-gpu-warning' to CMD flags to remove this warning
감사합니다!
이대로 실행에는 문제 없으면 사용하면 될듯 합니다. 가끔 업뎃과정중에 잠시 이상한 메세지가 나오기도 합니다.
@@DigiClauLab 답변 감사합니다!
안나오게 해버려도 되겠군요
새 forge 설치하고, inpaint anything도 설치했는데, 정상 작동이 안됩니다. 영역 선택이 안되는데요... 저만 그런건지, 아니면 다른 분들도 안되는 건지 궁금합니다.
영역선택 저도 안되요~ 캔버스도 다운받아서 익스텐션 다 해봤는데 안되네요 그래서 그냥 지웠습니다..
혹시, img2img안에서 inpaint탭을 선택하셨나요?
선생님질문하나 드려도 될까요 포지사용하려구하는데 파이썬하고 깃 설치가되어있어서 cmd창으로 다운받고 실행하려니 어쩌구저쩌고 하면서 실행이안됩니다. 혹시 압축파일 다운받아서 실행하면 기존에 파이썬하고 깃 설치한거랑 충돌이 없을까요?
nf4써볼라고 포지 업데이트하는건 아니다 쓰던것 다망가집니다 그냥 테스트할려면 따른드라이브에 새로설치해보는게 났다 난 해보니 결과물이 별로라 지우고 comfyui nf4 씁니다
@@user-neokasu 아무래도 안건드리는게 좋겠죠? 머리쓰기 귀찮아서 컴퓨유아이 아예설치도안했는데 도전해봐야겠어요 클로이님도 컴퓨유아이가 대세라고하니.&
Forge portable 사용을 추천합니다. portable이니까 나중에 그냥 통째로 지우면 됩니다. 이미 설치되어 있는 Python/Git 상관없이 사용합니다.
그리고, 말씀하셨듯이, ComfyUI를 추천합니다. 더 많은 걸 하실 수 있습니다.
@@DigiClauLab 알려주셔서 감사합니다. 그리고 클로이때부터 번거롭게 질문만 드려 너무 죄송합니다. 최고~🎉🎉
안녕하세요! 덕분에 잘 사용하고있어요 혹시 VAE는 어떤거 사용해야할까요? 첵포는 flux1-dev-bnb-nf4-v2.safetensors이거 구요
vae는 flux1DevVAE_safetensors.safetensors 이거 사용합니다만 이미지 생성 잘되다가 마지막에 흑백 이미지가 나타나요! 혹시 방법있을까요
NG4는 checkpoint이기 때문에 추가적인 VAE가 꼭 필요하지는 않습니다. 님이 사용하시는 그 VAE 말고, Black Forest huggingface 에서 Flux Dev 다운 받는 곳에 ae.safetensors라고 있을 겁니다. 그걸 사용해 보시겠어요?
@@DigiClauLab 매번 친절하게 알려주셔서 감사합니다! 해볼게요!
플럭스 nf4 모델 사용해서 사진은 잘 나오는데, 속도가 SDXL 보다 느린게 원래 맞는건가요? SDXL 라이팅은 2~3초걸리는데 플럭스는20~30초 대 나오는데.. 맞나요?
Flux가 더 오래 걸립니다.
추가로, 플럭스는 컨트롤넷이 아예 먹지 않습니다~ 혹시 해결 방법있나요? 플럭스 모델 다운받아서 캐니 먹여도 안먹히는데 해결 방법이 있나요?
Flux + ControlNet 영상도 생각 주입니다. 기회가 되면 다음 영상으로 올릴까 합니다.
영상 따라보며 똑같이 해봣는데 저는 속도가 너무 안나오네요 ㅠㅠ
현재 RTX3060 12G사용중이고 CPU는 Ryzen 3600입니다
업데이트랑 모델적용까지 오류없이 잘되었는데 속도가 문제네요 (1분8초 나옵니다)
다른거라곤 pytorch version: 2.1.2+cu121 이게 제 버전인데 알려주신 깃허브의 파일(Forge with CUDA 12.1 + Pytorch 2.3.1)을 받고 어떻게 적용시키는지 잘 모르겠습니다
압축풀고 덮어씌우면 되는건가요?
님 댓글의 마지막 부분을 잘 이해하지 못했는데요. Forge를 처음 설치하는 거면, 다운 받은거 압축 풀고 실행 하면 되구요, 최신으로 업뎃 이라면 update.bat를 실행하면 됩니다.
저는 이미지 생성을 누르면 자꾸 none type이라고 나오는데 사양이 부족한걸까요? rtx3000번대 사용중입니다.
사양이 부족하면 다른 에러가 나올 겁니다. 제가 님 세팅을 전부 알 수 없어서 정확한 이유는 모르겠네요ㅠㅠ
flux 설치하고, 기존 체크포인트로 할 때는 이미지 생성이 잘 되는데, 체크포인트를 flux1-dev-bnb-nf4-v2.safetensors 로 하면,
RuntimeError: Error(s) in loading state_dict for IntegratedAutoencoderKL: size mismatch for encoder.conv_out.weight: copying a param with shape torch.Size([8, 512, 3, 3]) from checkpoint, the shape in current model is torch.Size([32, 512, 3, 3]). size mismatch for encoder.conv_out.bias: copying a param with shape torch.Size([8]) from checkpoint, the shape in current model is torch.Size([32]). size mismatch for decoder.conv_in.weight: copying a param with shape torch.Size([512, 4, 3, 3]) from checkpoint, the shape in current model is torch.Size([512, 16, 3, 3]).
이런 에러가 뜹니다. 체크 포인트를 다른 걸로 해도 flux모델이 적용이 되는건가요?
그리고 에러 메시지를 봐도 뭘 어떻게 해야 할지 모르겠네요 ㅠ 도와주세요!
저랑 똑같은 에러인데 해결 하셨을까요??
어떤 상황인지 제가 직접 보지 못하니 정확히는 모르겠네요.ㅠㅠ flux UI에서 Flux 모델을 사용하셨나요? 처음은 되는데 다시 하면 안된다는 건가요? 저도 모르는 상황인듯 합니다.
포쥐 디포럼만되면 좋은뎅..
forge에서 lora가 작동하지 않는 문제가 있는 것 같은데, 혹시 문제 없으신가요??
네, 저는 lora사용 문제 없습니다.
이미지가 생성되다가 마지막에 까맣게 변해버리는데 이유가 뭘까요?ㅜㅜ
중간 어느지점 까지는 어느정도 나오다가 마지막에 그렇게 된다는 건가요? 정확히는 모르겠지만, 대부분 그런 경우 한가지 이유는 VAE의 문제일 수 있습니다. 아니면 다른 이유일수도...
WebUI Forge flux의 controlnet이 작동하지 않고 있는 데요. 어떻게 하면 작동이 되게 할 수 있을까요?.. flux-canny-controlnet_v2.safetensors 버전을 1,2,3 다 해봐도 않되어서요...
Flux와 ControlNet 사용 내용도 올릴 예정인데, 지금 작업이 바빠서 언제일지는 모르겠네요. 기회되면 바로 올립니다.