Stable Video Diffusion
HTML-код
- Опубликовано: 21 ноя 2023
- ► Boosty (эксклюзив) ➜ boosty.to/xpuct
► Telegram ➜ t.me/win10tweaker
► Discord ➜ / discord
Stable Video Diffusion:
github.com/Stability-AI/gener...
🔥 Deliberate: deliberate.pro
🔥 Reliberate: huggingface.co/XpucT/Relibera...
🔥 LowRA: huggingface.co/XpucT/Loras/tr...
Плейлист Stable Diffusion: • Stable Diffusion
МОЯ ВЕРСИЯ Stable Diffusion: • Stable Diffusion Porta...
#StableDiffusion #StableVideoDiffusion 
Наука
![Kehlani - Next 2 U [Official Music Video]](http://i.ytimg.com/vi/MpI7ekFG8A0/mqdefault.jpg)
Через год: - Нео, что не так?, - я видел кота, а потом снова видел кота, того же самого.- это сбой матрицы!
До чего дошел прогресс! До невиданных чудес!
"Это не техника дошла, это я сама сюда дошла. На лыжах"
Ещё нет
Вот прям так и ждали, а будет ли ролик или нет. И вот, свершилось! Спасибо, было интересно! Не все потянут такие игрушки, но время покажет ✌
Сегодня мы умиляемся как нейронка понимает как ходит котик, завтра нейронка будет умиляться как человек бегает по пустошам
"И восстали машины из пепла ядерного огня..." :DD
😂 почему то с каждым годом с иронией это вспоминаю)
сегодня вы будите умилятся мошенникам которые будут звонить по видео связи (просить пароли от сотрудников по работе, родственники попавшие в аварию из ваших фоточек из соцсетей и тд.)
А красивые крокодилы будут? С зубами.
Хачатур, даже перед тем, как посмотреть, напишу тебе комментарии и поставлю лайк. Почему? - Ты, краса! Уверен, что все расскажешь, на high level.
Часовой видос на эту тему с кайфом посмотрел бы
реально correctly, мэн‼️
Я в шоке как далеко мы полетим с этими возможностями )
Хачатур, спасибо за видос
Самый лучший и легендарный момент
Я видео ещё не посмотрел но по иконки видно я понял что это легендарный момент
Очень нравится вся ваша работа с пояснениями юмором и конечно же раздачей инсталлов, подскажите где посмотреть что за нейронка с фрименом, кроме как на бусти?
Конечно сборка нам нужна!
Я так понимаю обучение нейройни для видео с учетом контекста выглядит примерно следующим образом:
видео разбивается покадрово на изображения,
затем эти картинки скармливаются нейронке, но при этом так, чтобы между ними сохранялась связь.
Вся эта процедура повторяется примерно дохреналион раз,
после чего картинка или промт, который мы подсовываем, анализируется нейронкой, находится по кусочкам в базе и выдается нам результат с учетом контектса, который присутствовал в видео изначально скормленного нейронке.
Гений
УРА!! дождался видео про видео
Спасибо Вам за видео! Да ещё так оперативно! Скажите, с 12 гб видеопамяти не стоит даже лезть в Video Diffusion? Просто если дело только в скорости работы, то я готов ждать)
я бы подождал некоторое время, может появится ограничитель потребления памяти
Ништяяяк. 🌟🌟🌟
Долго ждали... Ан-нет, не так уж и долго ✅👍👍👍
Год ждали. Всего один год.
Ой, как бы могло облегчить работу, если научить эту нейроночку делать 8-битные анимации.
Можно попросить сгенерировать кадры у Dalle-3. Кажется, он бесплатный в Bing, но я не проверял
@@Daniel81877 я пытался - даже раскадровку сделать не получается
@@svinbreaker а я сделал раскадровку. элементарно.
@@quadropeller8734 в далл-и? Подскажи запрос, пожалуйста
Круто, спасибо за обзор, надо будет вернуться на бусти.
Лайк до просмотра! Доверие 100000000000000%
Привет, как думаешь на видеокарте от amd это будет работать?
ждём развития. Идём на бусти донатить!)))
Донатим друзья!!!! очень надо)
интересно как будет развиваться, буду следить
спасибо
Всем Привет, подскажите как в окне генерации сделать чаще частоту отображения ходов картинки, а то вижу муть а потом финальный результат, где-то видел как это настраивать и всё забыл как и где смотрел😅
Спасибо за инфу. Ждем прогресса от нейронок)
Просто отец, что тут ещё сказать ;)
Очередной шедевр
Подскажите пожалуйста, та нейросеть которая повторяет за вашим лицом как называется? есть ли она у вас в бусти портативная? и будет ли работать на 4гб видео или надо обновлять карту?
Волшебно :)
16 гигов, прям очень много для минимального порога вхождения, особенно учитывая стоимость видеокарт. Но лайк поставлю и смотреть за видео по этой нейросети от тебя буду)
Хватает и 9-10гб. Для 512x512 может и 6-8гб хватить.
Успел за месяц потестить нейронку.
а что если 6-8? оно вообще генерировать не будет?
@@John___Doe Обычно съедает всю память и крашит.
Иногда может упасть драйвер или перезапуститься оболочка.
@@flashback6836печально, значит будем ждать спец видюх для нейросетей, для майнеров нвидиа сделала спец видеокарты
@@flashback6836 Скажите пожалуйста, как ее запустить? В архиве нет батника, как в SD.
спасибо интересный ролик
Привет, не могли бы вы сделать гайд по установке stable video diffusion
Поддерживаю. Хорошо бы гайд по установке и может ещё несколько примеров работы
Хачатур, привет. Мне бы очень хотелось узнать каким образом ты делаешь музыку в Audiocraft как на заднем фоне помню ты говорил в подкасте на канале NEUROMANIA. Я знаю что у тебя руки не доходят разобраться, я всё понимаю.
Он показывал на бусти, два раза причем)
@@syleront рано или поздно денежку найду. Туговато с финансами к сожалению(((
Опаньки, держи лайк !
Да сколько можно, я картинки то ещё не научился генерить нормально а тут уже видео можно делать, сделайте нейронку работающая за меня(((
Делается😁
Ну двигаются потихоньку ребята. Пока конечно шляпа полная, вернусь к теме нейро-видео ещё через год. Сейчас даже ковырять это не буду )
Но за старания и обзор спасибо )
Ну и хорошо, что не будешь. Мы тебя на голову вперёд обгоним пока 😏
@@thekotfather полностью согласен. Даже сейчас уже залететь с нуля не так просто. Через год вообще будет пропасть между новичками и опытными.
@@user-yl1rd4mg7eлибо выкатят десктопную и понятную платную аппку в которой будет всё сравнимо с видеоредактором или же интегрируют в редакторы с паттернами поведения и всё
@@thekotfather ага, в бета тестировании )
@@user-yl1rd4mg7e скорее всего оно упростится для обычного пользователя, как уже это происходит со сборками
I like your videos 🤩
Как сможете делать анимацию, разбудите, пожалуйста. Или хотя для комиксов - серию картинок с одинаковыми лицами и одеждой.
Приветствую, пишу комментарий до того как досмотрю до конца, уверен в вашем ролике, очень хотелось всегда генерировать видео, и не платить за это по 200$, как требуют другие сервисы, а только использовать мощности своей видеокарты, Хачатур, спасибо за труды!
тут блин с нынешним курсом не укупишь эту карту ((( может настанет тот час, когда не надо будет так много ресурсов потреблять для генерации видео.
разумеется, с течением времени будут выходить хотфиксы, патчи, и прочее, что ускорит работу и уменьшит количество требуемых ресурсов, я как раз высказался на эту тему в новом видео@@naotmash
@@naotmash скорее более мощные видяхи постепенно будут появляться )
@@Rublev13 на подходе новое)
Невероятно, невероятно!
Надо запустить её на колабе
Бро ты красавчик 🎉👍
Вот это крутая штука. Зашёл на гитхаб ничего не понял. Жду инстал в 1 клик =)
Подскажите, я так понимаю, ограничения в 4 секунды пока не обойти?
Подскажите кто то нашёл или разобрался как ставить эту версию stable video diffusion? Может туториал какой то есть или кто то уже придумал что то другое?
Здрасти, а что ни-будь слышно про Posex, или есть какие может аналоги работающие корректно?
t.me/win10tweaker/399
привет всем, а на 4070 тестил кто то на 12гб будет работать или ошибку вываливает?
А положение камеры задавать можно тут или только то, что нейронка сама покрутит?
Пока что сама
Как ты исправил ету ошибку? Появляется при втягивании картинки и не появляются крутиляторы (
File "C:\Users\VoVchic\anaconda3\envs\genModelVideo\lib\site-packages\streamlit
untime\scriptrunner\script_runner.py", line 534, in _run_script
exec(code, module.__dict__)
File "W:\stablee-video-deffusion-a\generative-models\video_sampling.py", line 137, in
img = load_img_for_prediction(W, H)
File "W:\stablee-video-deffusion-a\generative-models\scripts\demo\streamlit_helpers.py", line 848, in load_img_for_prediction
return image.to(device) * 2.0 - 1.0
File "C:\Users\VoVchic\anaconda3\envs\genModelVideo\lib\site-packages\torch\cuda\__init__.py", line 239, in _lazy_init
raise AssertionError("Torch not compiled with CUDA enabled")
такая же хрень и ничего не пашет
Привет, Как ти сдела пресети кнопок разрешений изображения?
Привет 🖐
В Telegram показывал и рассказывал.
@@XpucT так и не нашел хоть дай подсказку как искать ... но нашел пару советов по инмпеинту вот кнопки нету))
Готов скинуться на версию для коллаба!🥳
А как называется нейронка, которая тебя в Моргана Фримана превратила?
А будет ли это работать больше 3-4 секунд, например до 1 минуты видео?
(напишите скрипт) запустите х-раз по пол часа каждый раз скармливая последний кадр
либо арендуйте мощности голливудских студий по обработке видео фильмов
отлично
Будь моим отцом 😂
Карасава! Хочу! Бегу на бусти)
так. походу на бусти об этом еще ничего нет или я просто на нашла? и что именно оплачивать? не вижу конкретно кнопки "эксклюзив". печаааль((
Просто подпишись и получишь сразу доступ ко всему.
Нейронку соберу в ближайшее время.
@@XpucT просто подписалась) когда будет нужная сборка - там наверное и нужная кнопка появится, чтобы целенаправленно тыцнуть, надеюсь))
момент с гипнозом угарище))))
Вот как действительно можно было бы народ заинтересовать - показав, что могут делать "э гёрл-ы" в анимации. Но с котом - и на том спасибо
16гб памяти, расходимся, работяги.
Будет какой ни будь комментарий о Fooocus ?
Прошу прощения, а как ее запустить? В архиве не нашел батника, как в SD.
Прогресс
Лет через 10 все популярные книги будут нейронками превращены в видео. VR-видео. Через 30 лет, любому будет доступно сказать нейронке чтобы она нагенерила альтернативную концовку сериала "игра престолов".
через 30 лет ты сам снимешь дома на кухне любой Аватар или Игру пристолов
Вчера как раз думал о том, можно ли нейроново сделать спрайтовую анимацию
Такими темпами в скором сделают браузер на базе нейронки, где все сайты будут генерироваться нейросетью)
Ты очень далек от понимая того как работают сайты и нейросети, да?
Программеры такие молодцы , сами себе клепают замену ;) скоро сеть сама все будет программить и развивать сама себя и сама о себе клепать ролики :)
На их век- денег хватит, не переживайте. 😄
@@user-uj4jn6gp1r она с такой скоростью развивается....мм.....век это слишком оптимистично звучит.
Я в этом отношении очень жду нейронку Animate Anyone
То что показали впечатляет, но пока нет даже демо
Кот прыгает на шкаф через стул
"минимальные требования к этой модели 16 vram"
я с восьмью...💀☠
У тебя еще много
Будем ждать развитие модели, и модель Deliberate для видео!
Хачатур, купил бусти, как попасть в соответствующий канал дискорда?
Нужно привязать свой аккаунт тут:
boosty.to/app/settings/external-apps
В последних драйверах Nvidia вроде если не хватает видеопамяти начинает отъедаться ОЗУ, не? Или мне это приснилось?🤔
Да. Помогло сильно когда родных 12 не хватало для обучения лоры. По факту использовалось около 16.
не даром 128г озу закупил :)
А как запустить? чет не получается
Ура видео нейронка
А можно портативную сборку обычного, картиночного, стейбл под амд? Ради такого даже задоначк
При попытке пропатчить портативку по инструкции, стейбл перестаёт работать вообще. А при попытке создания ссылки удаленного доступа проверяет наличие ядер куда и снова ломает стейбл)
Создали - правильно.
🎉
👍
Будет одна башня под компьютер и вторая чисто для видеокарты.
правильно создали🗿🗿🗿
zigma zigma
А оживить человека с фото сможет интересно? Например старинное фото, что бы например наш прадед двегился как-то, повернулся боком?)
DragGAN погугли.
она сложная пока, не дозрела. и это с фото только@@maraderchikXD
@@ultimateiks89 ну анимация это просто последовательность изображений.
Ожидание: Искусственный интеллект заменит людей в большинстве профессий и в итоге захватит мир
Реальность: Оживляем, крутим, двигаем прадеда
завтра мошенники будут звонить по видеосвязи
правильно создали )))
а установить на стейбл деффюжн как?
🤯
Жесть, ну похоже, это новый шаг
для мошенников теперь будет доступна видео связь
Получилось запустить на 3060 12гб, поднимал через комфиюай.
Съедало как правило не более 9-10гб.
Так ведь КомфиЮАЙ это просто интерфейс каким образом это всё магическим образом оптимизируется?
@@dmitriidak Комфиюай вообще не влияет на это. Просто указал что, запускал через неё.
У меня даже 10гб из 12 не используется для 960 на 544.
@@dmitriidak Явно где-то косяк в его сборке, нейросетка столько не ест.
@@dmitriidak Есть ещё варик. Возможно что-то от всей сетки остаётся в озу.
@@flashback6836 интересно🤔, а по какому тутору запускал? https убери из ссылки, чтобы автор коммент не удалил
А как этот "stable video diffusion" уставновить?
boosty.to/xpuct/posts/20eecbe3-625b-4b80-be8e-6cd78ca9758d
Представляю что будет лет через 10
А можно научить делать цикличные видео для гифок?
А как правильно установить и запустить эту нейросеть?
Первая ссылка под видео.
только фон у Моргана тенется за головой
так скачать - скачали, а как запустить то?
boosty.to/xpuct/posts/20eecbe3-625b-4b80-be8e-6cd78ca9758d?share=post_link
подождём пока оптимизируют на ресурс видео 6-8 гигов, потому что больше уж сильно персонализированно
Хачатур, делай сборку для колаба 💀
спасибо за видео.
У меня все настроено, но процесс генерации по какой-то странной причине занимает 4 часа на видео.
У меня RTX3090, так что должно быть быстрее.
Надо ждать 5090 чтобы получше было
@@dios9168 Оптимизацию быстрее выпустят, 5090 еще не скоро будут готовы.
Мне понравился вариант с портабл стейбл дефюжн, скачал запустил...вот круто б и с виде дефюжн так же ! А бусти и тд.. у меня в старане заблокировано и париться с впн лень уж извените..
Правильно будет создали. Не благодарите
Скорость развития нейронок начинает меня всерьёз волновать
Чет "меееедленноооо" так все ну😁
4 секунды это пока максимум ?
16 гигов? А --medvram тут не прокатит?
Вау вау Хчо помедленнее, дай переварить 😆
Правильно ли я понимаю, что ей даже промпт не нужен?
Ну это только зародышь, через год думаю будет ребёнок.