1. Hailuo Minimax
https://hailuoai.video/
2. Kling
https://klingai.com/
3. Sora от OpenAI
https://openai.com/sora/
4. Luma Dream Machine
https://lumalabs.ai/
5. Vidu
https://www.vidu.com/create
6. Pixverse
https://app.pixverse.ai/
7. Pika
https://pika.art/try
8. Runway Gen. 4
https://runwayml.com/
9. Wan от Alibaba
https://wan.video/
10. Veo3 от Google
https://deepmind.google/models/veo/
Сайты, где можно попробовать генерации на разных моделях
https://nim.video/
https://pollo.ai/
https://www.florafauna.ai/
Коллекция ИИ-видео:
https://www.reddit.com/r/aivideo/
Локальные модели
1. Hunyuan от Tencent
https://hunyuanvideoai.com/
https://github.com/Tencent/HunyuanVideo
2. Wan от Alibaba
https://github.com/Wan-Video/Wan2.1
https://github.com/Wan-Video/Wan2.2
3. MAGI-1 от Sand AI
https://sand.ai/magi
https://github.com/SandAI-org/MAGI-1
Локальный UI
https://github.com/comfyanonymous/ComfyUI
Установка локальных моделей
Hunyuan Video: https://comfyanonymous.github.io/ComfyUI_examples/hunyuan_video/
Wan 2.1: https://comfyanonymous.github.io/ComfyUI_examples/wan/
Wan 2.2: https://comfyanonymous.github.io/ComfyUI_examples/wan22/
Гайд для использования Wan 2.2:
https://alidocs.dingtalk.com/i/nodes/EpGBa2Lm8aZxe5myC99MelA2WgN7R35y
Альтернативные ноды ComfyUI
Hunyuan Video: https://github.com/kijai/ComfyUI-HunyuanVideoWrapper
Wan 2.1: https://github.com/kijai/ComfyUI-WanVideoWrapper
Квантованные чекпоинты
Hunyuan Video (GGUF): https://huggingface.co/Kijai/SkyReels-V1-Hunyuan_comfy/tree/main
Wan 2.1 (GGUF): https://huggingface.co/city96/Wan2.1-I2V-14B-480P-gguf/tree/main
Wan 2.1 (NF4): https://civitai.com/models/1299436?modelVersionId=1466629
Где брать готовые LoRA
https://civitai.com/models
Hunyuan Video: https://civitai.com/search/models?baseModel=Hunyuan%20Video&sortBy=models_v9
Wan 2.1: https://civitai.com/search/models?baseModel=Wan%20Video&sortBy=models_v9
Обучение LoRA
https://github.com/tdrussell/diffusion-pipe
Предыдущий тред
>>1287986 (OP)
KSamplerAdvanced
RuntimeError: CUDA driver error: file not found
куда поставлены, портабле комфуай, саге тоже есть
>Коллекция ИИ-видео:
>https://www.reddit.com/r/aivideo/
Ещё вот такой сайтец есть.
https://www.huge.com
посоветуйте норм воркфлов чтоб не 15 минут аутировать а хотя бы 5
я сам пробовал поискать но пока поел говна мб свап блок поможет там написано модель вся не лезет
Вкатывайся в 2.2 сразу.
Качай видосы из предыдущего треда и перетаскивай в комфи.
Должен быть установлен VideoHelperSuite.
Ну или просто зайти в custom_node/WanVideoWrapper/example_workflows от Киджая.
Я уже на 8 перешел лол. И цфг хоть полторашку. Ждать дольше, но в 2 раза больше времени тратится иначе на бестолковые генерации годные лишь на удаление, в итоге вообще просто просранное время.
Не знаю чем. Но как будто это проблемы перетрененных лор, просто лайт сильней преувеличивает их.
И, кстати, почему фреймпака до сих пор нет в шапке, если это лучший на сегодня вариант генерации видео? Зато комфи зачем-то есть, в котором хуй разберешься
>И, кстати, почему фреймпака до сих пор нет в шапке, если это лучший на сегодня вариант генерации видео
Никому не нужный кал с 3.5 лорами на цивите
> Зато комфи зачем-то есть, в котором хуй разберешься
То что ты не смог разобраться в комфи отлично показывает что ты не разбираешься в том что сейчас лучший вариант генерации видео (а это ван 2.2)
>Зато комфи зачем-то есть
Потому что на комфи можно вот такое вот делать.
Хуя себе, реально годно. На 2.1 и в сценах попроще ломалось всё.
是的，我做到了。是什么暴露了我？
>>1306866
> Никому не нужный кал с 3.5 лорами на цивите
Толку от этих лор, если базовая модель нифига не работает?
> То что ты не смог разобраться в комфи отлично показывает что ты не разбираешься в том что сейчас лучший вариант генерации видео (а это ван 2.2)
Вот только фреймпак мне выдаёт нормальные видосы любой длины, а с ваном мало того, что ограничений куча, так еще и качество где-то на уровне плинтуса.
>>1306893
Да нафиг мне твоя порнуха? Вот тебе картинка анимешная, санимируй мне её ваном так, чтобы девочка встала, подошла к камере и улыбнулась в неё. Сможет он в такое без тонны артефактов? Да нихуя подобного.
>Вот тебе картинка анимешная, санимируй мне её ваном так, чтобы девочка встала, подошла к камере и улыбнулась в неё. Сможет он в такое без тонны артефактов? Да нихуя подобного.
Ну давай, найди к чему доебаться. И заодно покажи пример с фреймпака
На некоторых генерациях картинок в старом форже тоже помню подобное попадалось и это сильно бесило. Отчего это зависит вообще? Из не SD моделей где такого почти не встречалось - Хрома, она при повторной генерации может часто вообще совершенно иную картинку делать, прекрасно понимая любые изменения промпта.
Это от модели зависит или нет? Пробовал разные энкодеры и пока что выяснил что от энкодера точно не зависит.
Попадается и в обычном ван2.1 релизном и в ускоренных лайт вариантах для low cfg
Не, я точно не любитель навороченой наркомании, совершенно стандартный воркфлоу почти как в шаблонах комфи на их вики, в нем только нужные лоадеры, powerлора для лор, ван2видео, ksampler, videocombine, вот прям вообще ничего лишнего. Пробовал разные воркфлоу с цивитая и везде эта штука попадалась. Мыслей как это победить без полного перезапуска комфи и перезагрузки модели пока нет, может пакостит какая то хитрожопая буферизация или оптимизация со стороны то ли питонового бэкенда то ли самого комфи.
Правильно ли я понимаю что при каждом нажатии Run лиса может меняться, быть больше меньше бежать в разных направлениях с разной интенсивностью и будет меняться угол обзора?
Вот у меня, к примеру хоть 10 раз ничего не меняя Run нажмешь и все 10 видео будут крайне незначительно отличаться, лиса будет бежать примерно одинаково в ту же сторону, возможно слегка фон будет иным, но не сильно, т.е. всё выглядит так что sid нифига не рандом, а работает как вариационный с незначительным отклонением.
Красава анон, хорошо приложил фреймпакодауна, уверен что фреймпак обосрется с такого реквеста, ну оно и сразу было понятно, нормальные люди бы пример с фреймпака приложили к картинке дабы продемонстрировать "величие" фреймпака.
+1, тоже не могу разобраться с этой хуетой. Если разберешься, маякни. Я пробовал даже cfg поднимать с 1 до 3.5, один хуй, мало толку. Подозреваю что этой ржавой хуйне надо писать неебически подробный промпт с описанием движения каждой молекулы в кадре.
> Wan2_2-I2V-A14B
Отлично, а теперь давай так, чтобы это на обычной карте с 24 Гб VRAM можно было сделать.
> > Wan2_2-I2V-A14B
> Отлично, а теперь давай так, чтобы это на обычной карте с 24 Гб VRAM можно было сделать.
Так это на 4090 сделано.
В любом случае там будет лапша, вот мой ВФ для генерации 4 последовательных видео для ван 2.1, если 2.2 будет - считай все на 2 умножать надо как минимум.
Но это если для каждого видео отдельные лоры подставлять, если просто последовательно на одних лорах генерировать то только правая часть понадобится.
3090 репортинг
>склейки
А видео-редакторы уже отменили?
Или ты хочешь без единой склейки полтора часа сделать?)
Справедливости ради, хуйня же.
Фреймпак хорош в idle-анимациях и быстро генерит до 2 минут.
Всякие танцы и еблю, если хочется долгое, лучше генерить там, 100% проверено.
Но это ситуативно очень, в большинстве случаев лучше генерить короткие ролики, а ван2.2 с промптом работает отлично, фреймпак куда слабее в этом плане, ибо модель старая и файнтьюн сам по себе экспериментальный, главное там работа атеншена. =) Это же пруф оф концепт, по сути.
Правда, нахуя юзать фреймпак не в комфи — тоже не очевидно.
>>1307759
Видеокарта влияет только на разрешение и количество кадров.
Хоть на 6 гигах генерь, хули.
И, да, я специально проверял — генерил и фреймпаком, и ваном на 6 гигах. =)
У фреймпака тоже выгрузка модели в оперативу, и тоже объем врама влияет только на разрешение (а количество кадров уже без разницы за счет механики контекста).
———
Но вообще, ИМХО, он троллит, а всерьез фреймпак даже не запускал.
Отлично, а теперь покажи что там у тебя на фреймпаке получилось.
Есть хоть один пример айдл анимации с этого фреймпака, ну хотя бы 30 секунд. Только и разговоров о том что он хорошо в ней, а по факту 2 ролика всего было когда он вышел и все, качество роликов при этом было отвратительное на уровне хуньюаня.
используешь teacache? может быт из-за него.
>>1307759
>Отлично, а теперь давай так, чтобы это на обычной карте с 24 Гб VRAM можно было сделать.
лоооооол, у меня первое видео из этого поста >>1306893 сделано за 6 минут на 3070 с его 8 ГБ (если разгоняться, можно и за 3 минуты).
Монстрик из 6, телка из вторых откровений.
>>1307646
Ну дк, качаешь и накладываешь в редакторе (не онлайн разумеется а в нормальном)
Я кидал в прошлых тредах.
И кучу не кидал.
Люди просто не хотят видеть, потому что это рушит их маня-мирок.
Но сейчас, де-факто, она не нужна, канеш.
Следование промпту > 2-минутной идл анимации.
Плюс, лайтв2х слишком геймченджер.
Пусть хуньюан вдвое быстрее вана, но 16 степов против 4… ну ты понял.
Типа,это для очень сильно любителей, для узких задач.
При всей моей любви к фреймпаку, я его не запускал уже месяца два, с момента первой лоры-ускорялки.
Если бы к вану еще приделали атеншн фреймпака и дообучили на 2 минутах — цены бы ему не было. Но это мечты.
Имеем шо имеем. 7-9 секунд максимум, ага.
Компактный и красивый, в котором даже ллм подтянули если надо (можно выключить). И интересная штука используется для того, чтоб вф понимал сколько тебе надо видео сделать, какой длины в секундах и какой промпт в каждом видео.
В промпте пишется например 5| твой промпт. На следующей строке 3| и твой промпт и так далее.
В каких в 4 и 5 или еще раньше? Скинь сейчас, посмотреть интересно - стоит ли качать фреймпак.
Ставьте вес 0.5 у хай лоры и мувмент вернется
>Ставьте вес 0.5 у хай лоры и мувмент вернется
Все так. А если еще старый лайт добавить с весом 1 то вообще хорошо пойдет...
замечал такую хуйню везде от ван2.2 в конфи до sd1.5 на каломатике
сначала думал у меня паранойя
И это всё?
Мне теперь блядь всю жизнь на это смотреть?
Уже 4 треда подряд вот эта однообразная кривая хуета.
>Мне теперь блядь всю жизнь на это смотреть?
Нет конечно, закрой вкладку с тредом, выключи монитор, выйди на улицу, потрогай траву
>потрогай траву
это тебе надо траву потрогать, у тебя сверхценная идея - долбить эту бабу в рот, ты ещё о чём-то можешь думать?
Ну кстати прикольный ВФ
Додик мы тут не на баб дрочим, а на воркфлоу, а та баба как лакмусовая бумажка, показатель прогресса.
На баб дрочат в /nf
ночью сидел пытался с этой хренью разобраться, да просто генерил туеву хучу мелких видосов 208x208 с разными параматреми, всё очень на похоже на ваше предположение. т.е. часто наблюдалась определенная зависимость количества описания деталей и последующего изменения в последующих результах (при одинаковом cfg), т.е. условно если не описать что 'негритянка лежит на черном диване с фиолетовой подушкой' то модель всегда будет рисовать какую то одинаковую морду на базовом белом диване одинаковой формы и размера. Странно что некоторые модели почти нечувствительны к такому и очень хорошо 'фантазируют' без каких-либо деталей, а вот у других моделей подобная хуета не редкость. Тут должен появится эксперт по бэкэнду моделей чтобы объяснить почему так работает :)
Конечно можно сидеть спокойно на i2v уже со своими готовыми исходниками, но иногда требуется что-то с нуля сделать в t2v и вот там эта хуета сильно мешает креативу.
> 'фантазируют' без каких-либо деталей
я еще с самого выхода в опенсорс вана заметил, что например на спейсе в хагге у них выходили куда более детальные видосики, и как я предполагаю, там у них просто под капотом стояла ллм-ка, которая ревайзит промп и добавляет деталей и описаний. У них даже в заметках на gitхабе где-то была ссылка на нейкую хрень, для помощи в генерации промптов, но так и не уделил внимания.
Во нашел заметку
https://github.com/Wan-Video/Wan2.1?tab=readme-ov-file#2-using-prompt-extension
>Конечно можно сидеть спокойно на i2v
да в том то и прикол, что у меня и на i2v бывает вариативности ноль, со сменой сида, например, в каждом следующем видео одни и те же движения в тех же направлениях..
30 секунд, даже сжимать пришлось
>показатель прогресса
какой блядь прогресс, сука, уже 2 месяца одно и то-же настоебавшее говно! У вас там с фантазией хуёво совсем? Или своего нихуя нет, подрезал вф у китаёз и давай клепать... Нету меры - нет мозгов.
в одинаковую сторону подумали, я как раз на основании вчерашних экспериментов запланировал в воркфлоу кастомные ллм добавить, для того чтобы 'побогаче' промпты стали
>>1307756
>>1308314
Ван тут причем?
Это обычнейшее поведение любой лоры, сильно ограничивать базовый стиль модели, пока руками не начнешь лезть всё править.
Хотите креатива юзайте ван без ускорялки
>Хотите креатива юзайте ван без ускорялки
это уже пройдено ещё на этапе старта вана, когда никаких лор не было