🎬 ComplyUI Local Free Video Generation AI CogVideoX-5B
Вставка
- Опубліковано 19 вер 2024
- Local video creation AI CogVideoX-5B model has been updated.
I will explain how to install it and how to use it in low VRAM.
▶CogVideoX-5b Hugging Face
huggingface.co...
▶CogVideoXWrapper Github
github.com/kij...
▶ VEnhancer
github.com/Vch...
▶CogVideoX-5B Hugging face Space
huggingface.co...
▶ Please be a member of the channel 👏
/ @sanai_labs
--------------------------------------------------------------------------------------------
▶ If you didn't install Forge :
• 🤩 최강 WebUI Forge 원클릭 설...
▶ If you don't know Stability Matirx :
• 🖱 Stable Diffusion 설치하...
▶ Email : music.with2me@gmail.com
#video #stablediffusion #ai
출근길에 올라온 영상! 감사합니다! 퇴근하고 빨리 영상 생성해보고싶네요 ㅠㅠ 26기가 v램 보고 헉했다가 유튜버님의 해결책 덕분에 사이다 마신것처럼 속이 좋아졌습니다.
요즘 나오는 것들이 vram 사용량이 ㅎㄷㄷ 하네요ㅠㅠ 4090 아니면 시도 조차 못하는게 점점 늘어나서 5090나오면 바꿔야하나 고민중이에요ㅠㅠ
@@sanai_labs 같이 화이팅해요 ㅠㅠ돈모아서 5090나올때 살 수 있길.. ㅠ 파워도 사야되네요 ㅠㅠㅠ
혹시 3060 브이램8 정도도 영상출력이 될까요?ㅋㅋ
항상 알찬영상 올려주셔서 감사합니다!
흠... 한번 해보시겠어요? 모델 사이즈가 크다보니 안될수도 있겠어요 ㅠㅠ 노드에 cpu 옵션을 키면 가능할수도 있는데 돌려 보셔야 할것 같아요ㅠㅠ
오픈 소스로 비디오 만드는 모델이 최근 공개 되었다고 하는데, 이렇게 빨리 적용을 하시는 군요. 현재 24기가 짜리 VGA를 300만원 정도에 팔던데 어찌 26기가가 필요한지 모르겠네요. 암튼 게임 용도 말고 그래픽 카드 비싼거 사야하는 당위성이 생겼습니다. ㅎㅎ
만약 비싼 그래픽 카드 구매하시려면 조금만 참아주세요~ 내년초에 5090 나옵니다~ vram도 4090 보다 높다네요
comfyUI로는 제가 실행이 안되서 따라할수 없는데요. stable diffusion FORGE로도 할수 있나요?
있다면 영상으로 한번 만들어 주세요
forge 는 해당 확장 프로그램이 없어요~ comfyui 로 안되신다는게 forge 만 사용하신다는 말씀이실까요?
얼마전에 comfyui입문한 초보자인데요
영상보다가 궁금한 기능이 있어 질문드립니다 Queue prompt버튼 아래 하드웨어들 사용량들 수치 보여지는 기능은 어떻게 사용하는 것일까요?? 이것도 매니져 커스텀 노드쪽에서 다운받아서 사용하는 걸까요 알려주세요 유용할꺼 같아서 😮
안녕하세요~ 네 manager 에서 설치 가능합니다~
제가 지금 외부라서요. 아래 영상에 소개되어 있으니 참고해주세요~
ua-cam.com/video/By7aAos-sV8/v-deo.html
@@sanai_labs 빠른 답변 감사합니다 😀
빨리 달리고 싶어 보고싶은 것만 시청하지 말고 재생목록 만들어 놓으신거 쭉 천천 히 배운다는 생각으로 봐야 겠네용 감사합니다
감사합니다~^^🫰
감사합니다 잘보고 있습니다..가지고 있는 이미지를 불러와. 텍스트를 입력으로 .. 영상을 만드는것은 없나요?
text 입력으로 마음에 들정도로 잘 만들어지는건 아직 못찾았네요ㅠㅠ 대신 img 에 video 모션은 몇개 있어요~
이걸로 2D 그림체도 생성이 되나요?
네 프롬프트에 어떻게 넣어주냐에 따라 달라요~
감사합니다. 혹시 로라를 사용할 수 있을까요? 자유도가 엄청 늘어날 것 같은데요.
그럼 좋겠지만 cogVideox 모델로 생성되기에 프롬프트를 자세히 넣는 방법 뿐이네요. 워낙 빠르게 발전하고 있으니 조만간 그런 모델도 나오지 않을까 기대해봐도 될것 같아요~
CogVideoSampler
Unsupported TypeMeta in ATen: nullptr (uninitialized) (please report this error)
영상대로 다 따라한다음 Queue Proimpt 을 누르니 위 에러가 뜨네요 ㅠ
쌩초보라 해결방법을 잘 모르겠네요
흠... 저 에러에서는 찾을수가 없네요~ 생성 당시 로그를 matrix에 찍히는 로그로 알려주시겠어요?
저도 같은 에러가 나는데 혹시 해결 방법 찾으셨나요?
matrix 상에는 다음과 같은 에러가 나옵니다.
!!! Exception during processing !!! Unsupported TypeMeta in ATen: nullptr (uninitialized) (please report this error)
Traceback (most recent call last):
File "C:\Users\HP\AppData\Roaming\StabilityMatrix\Packages\ComfyUI\execution.py", line 323, in execute
output_data, output_ui, has_subgraph = get_output_data(obj, input_data_all, execution_block_cb=execution_block_cb, pre_execute_cb=pre_execute_cb)
File "C:\Users\HP\AppData\Roaming\StabilityMatrix\Packages\ComfyUI\execution.py", line 198, in get_output_data
return_values = _map_node_over_list(obj, input_data_all, obj.FUNCTION, allow_interrupt=True, execution_block_cb=execution_block_cb, pre_execute_cb=pre_execute_cb)
File "C:\Users\HP\AppData\Roaming\StabilityMatrix\Packages\ComfyUI\execution.py", line 169, in _map_node_over_list
process_inputs(input_dict, i)
File "C:\Users\HP\AppData\Roaming\StabilityMatrix\Packages\ComfyUI\execution.py", line 158, in process_inputs
results.append(getattr(obj, func)(**inputs))
File "C:\Users\HP\AppData\Roaming\StabilityMatrix\Packages\ComfyUI\custom_nodes\ComfyUI-CogVideoXWrapper
odes.py", line 321, in process
latents = pipeline["pipe"](
File "C:\Users\HP\AppData\Roaming\StabilityMatrix\Packages\ComfyUI\venv\lib\site-packages\torch\utils\_contextlib.py", line 115, in decorate_context
return func(*args, **kwargs)
File "C:\Users\HP\AppData\Roaming\StabilityMatrix\Packages\ComfyUI\custom_nodes\ComfyUI-CogVideoXWrapper\pipeline_cogvideox.py", line 582, in __call__
latent_model_input = torch.cat([latents] * 2) if do_classifier_free_guidance else latents
RuntimeError: Unsupported TypeMeta in ATen: nullptr (uninitialized) (please report this error)
다른 댓글에 있는 것 처럼 torch 버전 확인해보니 2.1.x로 다운그레이드 되어 있더군요. torch 3종 세트 모두 최신 버전으로 올리고 cuda toolkit 설치하고 했더니 잘 동작하는 것 같습니다. 다만 4070Ti 16GB 임에도 샘플링에 9분 이상 걸리네요 ㅠㅠ
헐 저보다 더 좋은 그래픽 카드 쓰시는데요; 혹시 구동중에 ram 이 꽉차시나요?
설치하려고 하면 이렇게 뜨는게 방법이 있을까요? 맥북에서 사용중입니다. 오류: pip의 종속성 리졸버는 현재 설치된 모든 패키지를 고려하지 않습니다. 이 동작은 다음 종속성 충돌의 원인입니다.
opensora 1.2.0은 fastest==0.29.2를 필요로 하지만, 호환되지 않는 fastest 0.33.0이 있습니다.
opensora 1.2.0은 spreadrs==0.27.2를 필요로 하지만, 호환되지 않는 spreadrs 0.30.2가 있습니다.
이전에 opensora 사용하셨을까요?
기존 사용해보셨던 opensora 에서 발생하는 에러에요~ 위 메시지처럼 fastest 와 spreadrs 버전 낮춰서 설치해보세요~
@@sanai_labs 답변감사합니다 시도해보겟숩니다!!
고그 비디오 모델 노드에 FP8 트렌스 설정에 저는 왜 트루가 없을까요...ENABAED 하고 FASTMORD 밖에 없네요 그래서 그런가 고그 비디오 샘플러즘 가면 에러가 나네요..ㅜㅠ
아 그부분 업데이트 되었습니다~ enabled 가 true 에요~ fastmode 가 새로 추가 되었어요
@@sanai_labs 답변 감사 합니다...아 그런가요 둘다 해봤는데 오루가 자꾸나네요
@@sanai_labs RuntimeError: Unsupported TypeMeta in ATen: nullptr (uninitialized) (please report this error) 이게 무슨말인지 모르겠네요
음.. 처음 보는 에러네요.. 우선 전 노드 업데이트 하시고요. 토치버전 알려주세요. 그리고 어떤 노드 동작시 에러나는지도요
@@sanai_labs 토치를 제가 분명 업글 했는데 확인해 보니 다운 그레이드 되어있네요...원인이 토치 였네요 감사합니다!! 아 그런데 저는 20분이 걸린다고 나옵니다 메모리는 제가 많아도..성능은..산님 글카가 더좋으네요 👍👍
NSFW 도 검열없이 가능한지 궁금합니다..
아무래도 큰 바람이 불지 않을까
아.... 그부분은 한번 테스트 해보세요~ cogvideox에 테스트 이미지에는 수영복까지 있는거보니...😝ㅎㅎ
제가 요즘 플럭스 관련된 영상을 찾아보고 있는데 궁금한 점이 있는데 댓글창에다가 몇줄로 설명하기엔 힘들것 같아서요
혹시 메일로 물어봐도 될까용?
네~ 보리님은 vvip이셔서 메일주세요~
@@sanai_labs 질문 이메일 남겼습니다 질문자체는 간단한데 글로 쓰면 길게 써야 될 것 같아서 메일요청 했습니다 ㅋ
답변드렸어요~~
@@sanai_labs 확인했습니다 ㅋ 제가 멤버쉽 공개때 안본다기 보다 요즘 업데이트가 너무 많아서 약간 번아웃이 왔습니다 ㅋ 뭐부터 배워야 할지 머리가 아픕니다 지금 ㅋ
한가지 주제를 정해서 완성 해보시는 것도 좋을것 같아요~
4080사용중인데 샘플링에 전 왜케 오래 걸릴까요? 분단위가 아니라 처음에는 2시간이 넘어가 버리네요 . 먼가, 충돌이 있는듯한데, 되긴되거든요. ㅎㅎ
메모리 모니터링 해보세요~ 모니터링 하시면 ram, vram, cpu, gpu 중에 하나가 100%이실 것같아요~ vram이면 flux controlnet 앞부분 먼저 보시면 vram 관리 설명 드렸으니 그거 한번 해보세여~
@@sanai_labs 저두 아래 글처럼 torch 버전을 최신으로 엡데이트 하고 실행하고 말씀해주신 부분 체킹하니 잘됩니다. 감사합니다. cpu 14700k , ram64G , 4080super. 사양입니다. COMFYUI 그래프에서는 CPU 4% , RAM 29% , GPU 100% , VRAM 71%를 찍는데, 시스템 리소스 사양에서는 = CPU 8% , 메모리 24/64GB 전용GPU메모리 : 11.1G/16G , GPU 메모리 11.2/47.9GB , 공유 GPU 메모리 0.1 / 31.9GB사용한다고 뜨는 상태에서 8분 41초가 걸리네요.
어후... 4080s 부럽네요 ㅠㅠ
전 메모리라도 늘리고 싶어 당근 알아보고 있지만... 주머니가 텅 비어있네요 ㅎㅎ
@@SSBB제가 완전 초보라 torch 버전을 최신으로 어디서 할수 있읆가요? 3080인데 1시간째 0퍼네요 점유율은 100퍼인데
matrix 사용하실까요?? 아니면 bat 파일 실행하실까요?