Comfyui基础教程10.怎么让图片生成动态视频

AI作画软件中文版 2025-06-04 15:06:19
欢迎各位同学们继续回到小江老师新一期的康复UI工作流的一个教程啊,还记得我们上一期的一个课程的话呢,教大家如何利用这个提示词去控制,然后的话呢,通过文本去生成可控的一个视频,也教了大家如何使用这个ctrl net哈,然后的话呢,去进行到这个视频的一个放大的一个处理,那么今天的话呢,我们来教大家如何去使用这个图像去生成这个视频的一个效果哈,来这里呢,我们放在一起给大家去做一下对比,这只水母的话呢,就是我们上传的原图了,然后右边的话呢,是我们通过。
土生视频去生成之后的一个结果,今天要学的这个工作流整体来说会比较简单一些,但是的话呢哈,在教大家工作旅游搭建之前呢,我们需要先下载一个模型,那么这个模型的话呢,就在这个hi根face上面哈,那么网站的话呢,是这个大家也可以在哈根face的主页哈,直接搜索stable video division啊,我们就可以去找到他。来到这个界面之后的话呢,哈,我们就直接点击中间的这一个啊,那么点击完成之后的话呢,来下面的最下方SVD叉T11S sources啊我们去点击下载4.78个GB,下载完成之后呢,我们的一个文件夹啊,安装在哪儿呢?
呃,还是一样的哈,在康复UI的一个根目录里面啊,我们找到models,然后的话呢,找到check POS大模型的一个存放位置,将它粘贴进来即可,好那么在下载完成这些之后的话呢,我们返回到康复UI哈,我们来看一下,呃,首先的话呢,我们是需要用到一个K的一个采样器,来我们这里的话呢,重新给大家去做到这个搭建哈,K采样器。好感生气,我们给它放上边儿吧。好,然后的话呢,接着哈,我们这里需要用到一个这个SVD的一个图像到视频,就是stable video, 呃,那么这个位置的话呢,是在一个新建节点,然后在条件里面啊,那么大家的话呢,就可以去看到一个叫做视频模型的一个选项,对,就在这儿SVD图像到视频的一个条件,那么加载完成之后的话呢,我们就需要正面条件负面条件相连,雷NT的相连,那么在左边的话呢哈,我们就需要去搭建一个哈,咱们刚才下好的这个大模型的加载器,不过这个模型加载器不一样哈,我们来看一下它的位置,新建节点,然后的话呢,在加载器里边啊,第一个就是视频模型啊,就checkpoint的加载器景图像啊。
来到这儿的话呢,哈,我们将模型和模型相连,然后的话呢,哈,我们的一个呃,CA clip和clip进行到相连,然后va ae和va ae进行相连。好在连接完成之后的话呢哈,我们这里还需要去用到一个这个图像的一个加载器,去加载我们想要的一个图像啊连连过来之后的话呢,我们点击这个加载图像即可。另外的话呢哈,我们还需要在这个呃模型中间哈,我们去动一下这个手脚,那么呃,我们这里哈,需要去用到一个这个高级里面的。
模型,然后的话呢,哈,一个缩放CFG。这个缩放CF距我们给它左边和右边连起来,好,这里的系数的话呢哈,大家记得去调成1,然后的话呢,呃,值得注意的点啊,就是在参数方面哈,就是呃,我们和之前哈都不同的是这个CF句值的话呢哈,就是我们大模型这个视频模型的一个作者推荐是在3以下,所以说这里我给到了一个2.5,然后呢,在采样器方面来讲呢,我选择的是OLAA,然后调度器是cos啊,那么将我们的这个系数哈设置成1之后呢,就相当于让它再结合我们图片生成模型的时候,一开始更多的去参考我们的图片,然后后面的话呢,慢慢的依次的去减少,然后的话呢,给到就是说从图片到视频一个更多的动态的一个发挥空间哈,其实这个就很简单哈,这个就是一个很简单的一个搭建的。
的一个流程啊,另外的话呢,就是我们需要将这儿哈,啊,这个checkpoint加载器景图像,我们得要把它换成刚才我们下载好的这个啊,这个stable video的一个动态模型,然后呃,这里有一个值得注意的点,就是呃,模型的一个作者哈,推荐的一个宽度和高度是1024×576,或者576×1024,比如说刚才我生成的这一张水母啊,它就是这样的一个像素,好,那么大家大家也可以自己去试一试哈,然后这里的话呢哈,我们还是用刚才的这个水母的一个图片给大家去做这个演示吧哈。
比方这样哈,然后在帧率方面来讲哈,比如说你想要多少帧呢?哈,这里就呃,作者建议是在25帧以内,那么我们可以给到一个24帧,然后呢,帧率还是给到一个8。啊就像是这个样子,接着呢哈,我们就和呃之前的是一样的了哈,啊我们雷的啊然后的话呢,去进行到VAE解码,然后的话呢,哈,我们的一个VAE啊去进行到相连,连接完成之后的话呢,最后哈,我们就是要这个呃去创建一个是预览图像哈,就是预览它生成出来的这24张图像,然后另外的话呢,还要干嘛呢?
哈,我们还需要呃这个新建节点视频助手里面啊这里面的话呢,就是我们之前给大家说过的合并为视频。大概就是这个样子,这个就是一个非常简单的哈,我们的一个图生视频的一个,呃,工作流的一个流程,好,我们这里CTRL+M,先把下面的给它关掉,然后这里的话呢哈,去直接去生成看一看效果怎么样,需要注意的就是这几个参数吧,就CF居值不要超过3,然后的话呢,采样机调度器大家可以和我一样,你也可以自己去测试其他的,然后就是我们的一个帧数,以及这个帧率哈,帧数的话呢,不能够超过25,然后呢,我们的一个帧率的话呢,只要能够除的进的就可以了,等待最终生成看结果吧,今天的这节课的话呢,就比较简单一些好的,那么在等待生成出来之后的话呢,哈,就是这个样子了。
当然的话呢,之后哈,我们也可以去通过这个康复UI一些工作流的搭建哈,去进行到我们的一个图身视频后续的一个高清修复嘛,这个也是可以去做的,然后的话呢,就是这个模型的一个做贼也说了哈,这个模型的话呢,针对于这个人像啊,然后的话呢,可能会嗯显得不太OK,然后的话呢,风景呀,实物呀之类的啊,它的一个生成的一个动态效果也是比较可以的。好的,那么以上的话呢,就是我们今天本期的一个内容。