- Видео 191
- Просмотров 66 124
touch-of-ai
Добавлен 4 июл 2024
[ComfyUI 딸깍 시리즈] 원클릭으로 AI 댄스 영상 뽑기
댄스 영상 리터치를 위한 AnimateDiff + ControlNet(Tile+OpenPose) 워크플로우를 원클릭으로 돌릴 수 있게 정리했습니다.
그리고 이제 본격적으로 VRAM을 많이 요구하는 작업이기 때문에 코랩용 원클릭 코드도 정리했습니다.
- 코랩 Pro 유료 버전이나 그 이상이 필요합니다.
- 구글 드라이브는 무료 버전으로 충분합니다.
예제 돌리는 환경: ruclips.net/video/VcoMiuojwZk/видео.html
제가 올린 파일(레포): github.com/Donato-touch/touch-of-animatediff
예제에서 사용한 모델
checkpoint : civitai.com/models/7240?modelVersionId=119057
checkpoint : civitai.com/models/4384/dreamshaper
vae: civitai.com/models/276082/vae-ft-mse-840000-ema-pruned-or-840000-or-840k-sd15-vae
controlnet: huggingface.co/lllyasviel/ControlNet-v1-1/tree/main
Timestamps.
00:00 시작
00:15 example 받기
00:50 코랩에서 사용하기
04:06 체크포인트 바꾸기
05:44 로컬에서 사용하기 (+워크플로우 설명)
#comfyui #flux #stablediffusion #sd #...
그리고 이제 본격적으로 VRAM을 많이 요구하는 작업이기 때문에 코랩용 원클릭 코드도 정리했습니다.
- 코랩 Pro 유료 버전이나 그 이상이 필요합니다.
- 구글 드라이브는 무료 버전으로 충분합니다.
예제 돌리는 환경: ruclips.net/video/VcoMiuojwZk/видео.html
제가 올린 파일(레포): github.com/Donato-touch/touch-of-animatediff
예제에서 사용한 모델
checkpoint : civitai.com/models/7240?modelVersionId=119057
checkpoint : civitai.com/models/4384/dreamshaper
vae: civitai.com/models/276082/vae-ft-mse-840000-ema-pruned-or-840000-or-840k-sd15-vae
controlnet: huggingface.co/lllyasviel/ControlNet-v1-1/tree/main
Timestamps.
00:00 시작
00:15 example 받기
00:50 코랩에서 사용하기
04:06 체크포인트 바꾸기
05:44 로컬에서 사용하기 (+워크플로우 설명)
#comfyui #flux #stablediffusion #sd #...
Просмотров: 457
Видео
[ComfyUI 딸깍 시리즈] 플립북 애니메이션처럼 만들기 심화 버전!
Просмотров 47414 дней назад
[ComfyUI 딸깍 시리즈] 플립북 애니메이션처럼 만들기 심화 버전!
[ComfyUI 딸깍 시리즈] 원클릭으로 플립북 애니메이션처럼 만들기
Просмотров 1 тыс.Месяц назад
[ComfyUI 딸깍 시리즈] 원클릭으로 플립북 애니메이션처럼 만들기
[ComfyUI 딸깍 시리즈] 시간이 지나도 깨지지 않는 환경 구축 v2
Просмотров 111Месяц назад
[ComfyUI 딸깍 시리즈] 시간이 지나도 깨지지 않는 환경 구축 v2
12. AI로 최애를 춤추게 만들어보자 - hires-fix 적용 및 마무리
Просмотров 3704 месяца назад
12. AI로 최애를 춤추게 만들어보자 - hires-fix 적용 및 마무리
10. AI로 최애를 춤추게 만들어보자 - 긴 영상 분할해서 다루기 (batch)
Просмотров 834 месяца назад
10. AI로 최애를 춤추게 만들어보자 - 긴 영상 분할해서 다루기 (batch)
09. AI로 최애를 춤추게 만들어보자 - 긴 영상 분할해서 다루기 (prepare)
Просмотров 724 месяца назад
09. AI로 최애를 춤추게 만들어보자 - 긴 영상 분할해서 다루기 (prepare)
06. AI로 최애를 춤추게 만들어보자 (ComfyUI + AnimateDiff)
Просмотров 1605 месяцев назад
06. AI로 최애를 춤추게 만들어보자 (ComfyUI AnimateDiff)
05. AI로 최애를 춤추게 만들어보자 (ComfyUI + AnimateDiff)
Просмотров 1705 месяцев назад
05. AI로 최애를 춤추게 만들어보자 (ComfyUI AnimateDiff)
04. AI로 최애를 춤추게 만들어보자 (ComfyUI + AnimateDiff)
Просмотров 1885 месяцев назад
04. AI로 최애를 춤추게 만들어보자 (ComfyUI AnimateDiff)
03. AI로 최애를 춤추게 만들어보자 (ComfyUI + AnimateDiff)
Просмотров 2265 месяцев назад
03. AI로 최애를 춤추게 만들어보자 (ComfyUI AnimateDiff)
FLUX + ComfyUI 완전 심플하게 쓰려고 코랩에 세팅하는 방법
Просмотров 3805 месяцев назад
FLUX ComfyUI 완전 심플하게 쓰려고 코랩에 세팅하는 방법
02. AI로 최애를 춤추게 만들어보자 (ComfyUI + AnimateDiff)
Просмотров 1995 месяцев назад
02. AI로 최애를 춤추게 만들어보자 (ComfyUI AnimateDiff)
01. AI로 최애를 춤추게 만들어보자 (ComfyUI + AnimateDiff)
Просмотров 7405 месяцев назад
01. AI로 최애를 춤추게 만들어보자 (ComfyUI AnimateDiff)
좋은 정보 감사합니다... 따라하기가 힘든데... ㅠㅠ 컴피유 설치부터 막히고..... 조금더 쉽게 정리해주심 안될까요
죄송합니다. 플럭스 설치시 싸이트에서 없는 파일이라고 하는데요
어느 파일인가요? 지금 플럭스 사이트는 공식 페이지이고 링크도 다 살아있는 것으로 보입니다
Gojo 😅
최신 버전 (0.3.9 기준) 에서는 정식 옵션으로 글씨 크기를 변경할 수 있습니다. (영어)설정 -> Appearance -> Node Widget -> Textarea widget font size 숫자 변경 (한국어)설정 -> 모양 -> 노드 위젯 -> 텍스트 영역 위젯 글꼴 크기 숫자 변경
선생님 web폴더에 style.css 파일이 없는데 혹시 이유가 있을까요?ㅠ
안녕하세요. 확인해보니 최신 버전에서는 정식 옵션으로 넣어줬네요. (0.3.9 기준) ComfyUI를 띄우고 설정에서 Appearance -> Node Widget -> Textarea widget font size 옵션을 조정하면 실시간으로 크기가 변합니다.
@@touch-of-ai 답변 너무 감사합니다 선생님 안그래도 레딧에서 한영 번역으로 찾아봤는데 선생님 말씀처럼 최신버젼은 정식 옵션으로 되어 있더라구요 그래서 설정 들어가서 폰트 키웠습니다ㅎㅎ 선생님이 올려주신 영상들 정말 도움이 많이 됩니다 앞으로도 영상 많이 올려주세요 감사합니다
유익한 채널 발견!
안녕하세요!! 알려주신대로 진행하다가 안되는 부분이 있어서 질문드려요! animatediff envolved를 설치햇는데도, 'animatediff loader' 노드를 사용할 수 가 없더라구요. animatediff envolved를 수동 설치했는데도 사용할 수 가 없어서 어떻게 해결가능할까요? comfy ui를 공부하고 있는데 차근차근 알려주는 좋은 강의 영상 감사합니다!!
안녕하세요. 봐 주셔서 감사합니다. custom node를 설치했지만 ComfyUI실행시 import failed가 되면 노드를 사용할 수 없습니다. 아마 그런 상태인 것 같습니다. ruclips.net/video/vtd-nrb1P3k/видео.html 이 영상의 리스트를 참고해서 다시 하나씩 설치해보시거나, ruclips.net/video/WMqAnL3y__c/видео.html 이 영상에서 제공하는 자동 설정을 사용해 보세요. 그래도 안 되신다면 또 말씀해주세요.
무슨말인지 어렵네요..ㅜㅜ
으헝 ㅋㅋ 이건 어떠신가요 가장 처음에 만든 셋팅하는 방법입니다 ruclips.net/video/WMqAnL3y__c/видео.html
올린 파일 다운 받아서 넣으면 영상 화면 나오는 로드창들이 저절로 뜨나요?
ruclips.net/video/VcoMiuojwZk/видео.html <- 이 영상대로 환경 설정 후 ComfyUI 실행, 실행시킨 ComfyUI에다가 example/flipbook 안에 있는 워크플로우 파일을 로드하시면 영상과 똑같이 뜹니다.
@@touch-of-ai 워크플로우 파일을 드래그해서 했는데.. 누락된 로드라고 빨간색 로드가 많이 뜨네요...ㅜㅜ
@@touch-of-ai 그리 했는데.. 로드가 거의 빨간색이네요..ㅜㅜ 마나져에서 깔건 다깔았는데...
@@실제사건채널 ruclips.net/video/VcoMiuojwZk/видео.html 이 영상 보고 설정하시면 됩니다. 매니저에서 까는 거 하나도 없습니다. 그대로 따라하셔야 합니다.
@@touch-of-ai 아.... 하라는대로 해서 다 됐는데... 로드 오리지날 비디오에 force_rate , custom_width 요 2개 연결선에 빨간표시가 떠서 경로가 잘못 지정 됐다고 오류가 뜨네요..ㅜㅜ 다 왔는데... ㅜㅜ
영상에 빠진 설명이 하나 있어서 추가합니다. Load flipbook frames 노드 위의 Inset Image Bounds 노드(12번 노드)가 플립북 이미지의 어느 위치에 영상을 렌더링할지 영역을 정하는 노드입니다. 플립북 이미지를 바꾸게 되면 이 위치도 조정해주세요.
소리가 안나와요 ㅜㅜ
무료 colab으로 사용이 가능한가요?
안녕하세요. 무료 colab으로는 LLM 관련된 동작이 전부 차단 당합니다. (돌아가는 것 같다가 갑자기 끊어짐) 따라서 최소한의 유료 버전은 쓰셔야 돌릴 수 있습니다.
@touch-of-ai 감사합니다!!
안녕하세요! 질문들리 것이 있는데요, 현재 Pose cotrolnet이 bypass된 상태에서 비디오가 만들어지고 있는 것이죠? 그럼 Tile, Depth, Pose는 무시하고 참조 이미지만 참고 하는 걸까요? 추가로 최근 모델이 너무 업데이트가 많이 되어서 ㅜㅜ Animate Diffusion 스러운 영상을 만들때 공유주신 영상이 고성능 결과물을 낼 수 있는 모델인지도 질문드립니다! (ComfyUI로 검색해서 우연히 방문했다가 구독 하고 갑니다^^! 좋은 영상 감사합니다!)
안녕하세요. 이 시리즈는 최종적으로 ControlNet을 사용하게 되겠지만, 지금 이 영상에서 뽑은 결과는 ControlNet 없이 프롬프트만으로 AnimateDiff를 써서 만들었습니다. 따라서 지금 이 영상만 따라하는 경우에는 ControlNet 노드는 싹 무시하셔도 됩니다. 현재는 ControlNet과 AnimateDiff가 함께 잘 작동하는 SD1.5 모델들로 작업하고 있습니다. 이 영상도 SD1.5 기준의 모델들을 사용합니다. ControlNet 없이 AnimateDiff와 프롬프트만 사용해서 영상을 뽑으신다면 SDXL용 모델을 사용하시는 것도 나쁘지 않습니다. 어쨌든 저는 ControlNet을 써서 춤추는 캐릭터를 만드는 게 주력이기 때문에 최근에도 SD1.5를 계속 사용하고 있습니다. 이 시리즈에서 사용한 워크플로우 파일도 공유하고 있습니다. github.com/Donato-touch/touch-of-animatediff/tree/main/example/first-animatediff/workflows 참고가 되시면 좋겠습니다. 감사합니다
저 유튜버님처럼 하이어픽스 노드가 없는데 아무리 찾아도 않나오네요 ㅠ 구글에선 다들 직접 만드는것밖에 없더라구요.. 노드검색창에 안뜨는거면 다시 다운받아야하나요 ?
안녕하세요! hires-fix는 tinyterraNodes 에 있습니다. 커스텀 노드 설치하는 곳에서 tiny terra nodes 를 검색해서 설치해보세요. 제가 이 시리즈에서 사용한 커스텀 노드들은 모두 02번 영상에 설명되어 있습니다. ruclips.net/video/vtd-nrb1P3k/видео.html 감사합니다.
캐릭터는 이쁜데 이게 노래임? 참 ㅎㅎㅎ
ai뭐쓰시나요?
ComfyUI에서 AnimateDiff로 제작합니다
프리렌이 이렇게까지 육감적이진 않았는데
어둠일때는 아무리 봐도 페른인데…
안녕하세요 영상 잘 보았습니다. 사운드는 어떻게 입히나요? 영상에는 안나온거같습니다
안녕하세요 ruclips.net/video/n0FWuQQH70M/видео.htmlsi=Ebd06bsLpIx0I2O0&t=331 여기에서 확인하실 수 있습니다. 사운드를 뽑을 영상의 audio를 빼서 VideoCombine 노드의 audio로 넣어주면 들어갑니다. (저장 파일 이름 뒤에 -audio.mp4 와 같이 저장됩니다)
작업 잘 되었네요 ^
안녕하세요 혹시 AMD Radeon RX 6700 XT 그래픽 카드와 Ryzen 9 5950X CPU를 사용중입니다. 위 모델들을 gpu기준으로 하려니.... 윈도우로는 cuda같은게 없어서요. cpu를 사용해서도 가능할까요?
안녕하세요. 현재 ComfyUI에서 AMD GPU는 리눅스에서만 지원해주고 있습니다. CUDA는 NVIDIA GPU 스펙이기 때문에 윈도우즈에서는 NVIDIA 계열을 쓰셔야 합니다. CPU는 사용 가능하지만 아주아주아주 느립니다. 유료지만 구글 Colab에서 T4 GPU를 사용하면 좀 답답함은 있지만 연습이나 간단한 워크플로우는 돌릴 수 있습니다.
😊😊😊😊😊❤❤❤🎉🎉
😎😎😎😎😎😎👍🏻🥺
너무너무 춤잘춰요
かわいい❤❤😊
❤❤😂
아냐가 성장했어
❤❤❤❤❤❤❤❤❤❤❤
소리가 안나오는데 원래 무음으로 영상 제작하신건가요?
네 맞습니다. 그냥 보고 따라하기 영상입니다.
Класс
Умничка
이거 노래 제목이 뭐에요?😢
ruclips.net/video/yOb9Xaug35M/видео.html I WANNA BE YOUR SLAVE 입니다
🔥🔥🔥🔥🔥🔥
😮😮😮😊😊😊❤❤👍😊😊
This dance step i see it to my idol...Wang Ybo😊💚
That's very good