这节课我们来学习AI绘画,你肯定会好奇AI视频的课程为什么要讲AI绘画呢?如果直接通过文字描述就能生成我们想要的视频,那么的确不需要用到AI绘画。正因为目前的AI视频还无法完全实现我们想想要的视频效果,这其中最主要的就是前后一致性的效果。所以我们需要AI绘画来锁定或者说引导AI视频的画面生成。
在这之前我们需要先了解AI绘画提示词的基本结构,一般包括以下六个部分,主体景、光线、构图、色调和风格。结合这六个方面的要素,我们几乎可以生成所有形式的图片。比如这张图的提示词侧面视角。黄昏时分,一个身穿红色长裙的女孩站在海边的岩石上望着夕阳。暖色调、写实风格这段提示词就包含了所有的六个要素,侧面视角是构图,黄昏是光线,红色长裙的女孩是主体,海边岩石是场景,最后是暖色调和写实的风格。这六个要素不一定要同时具备,只有其中的一两个也是可以生成图像的。但是要生成精准可控的图像,就需要多个要素的结合。如果是生成视频画面的图片,一般我们可以直接使用AI脚本里给到的提示词,将提示词复制粘贴到AI绘画工具当中,就可以直接生成相应的画面了。
了解了AI绘画的生图逻辑后,我们再来看它的一致性设计。一致性主要包含三个方面,风格的一致性、场景的一致性和主体的一致性。首先风格的一致性还包含了色调的一致性。保持风格一致性的方法有很多,最简单的方法就是把风格相关的提示词,至于提示词的最前面AI绘画是这样,纹身视频也同样适用。
场景一致性目前主要有两种方法,参考重绘法和细节描述法。参考重绘法就是提供一张参考图,然后用参考图生成相似的场景,然后再在该场景中生成主体。这种方法提供的场景参考图需要有360度的可参考角度,这样才可以满足同一场景不同角度下的镜头。想要实现可360度取景通常有3种方式,第一种是实拍,需要找到合适的场景,这种是比较麻烦的。第二种是通过谷歌地图的卫星地图功能,也是可以360度取景的,相当于是用它的已有拍摄数据,世界各地的景点都是可以取景的。第三种是通过天空盒子直接生成360度的3D场景,风格和布局都可以按照自己想想要的来生成。细节描述法就是直接通过详细的提示词描述生成相似的场景,多次生成选取场景中最一致的图来用。对场景一致性要求不是很高的情况下,我们采用最多的就是细节描述法,这种方法最简单。
最后是主体的一致性。主体不只是人物像,动物、植物以及各种物体都属于主体,其中最主要的涉及最多的是人物的一致性。不同的AI工具控制人物一致性的方法有所不同,最简单的方法还是通过提示词描述,从相似结果中选取最接近的结果来用。既然风格、场景、主体都可以通过提示词来控制一致性,那我们也可以把这套逻辑告诉AI然后让他帮我们生成合适的提示词,这样我们就不用自己再去想这些提示词该怎么写了。我们来看这个例子,风设计冷色调赛博朋克风格给整个视频的画面定了基础色调,然后是场景和主体设计。影片中出现两次以上的场景设计都需要进行美术设计,保持前后的一致性。
这个短片有两个重复出现的场景,在这里对城市和控制中心进行了细节的描述。然后主体部分也有两个重复出现的主体,一个是叛乱者,一个是AI系统。我们看这里叛乱者是30岁左右,穿着深色皮质外套半机械化的手臂。我们做出来的结果会发现都是满足提示词要求的。但是前后角色依然存在一定的差异,主要出现在发型和长相上。所以我们可以进一步描述人物的发型、脸型、人种等等。你的细节描述的越详细,生成的结果就会越接近。
那么我们拿到这些提示词后要怎么用呢?首先是风格设计,这部分适用于整部影片的所有画面,所以我们把它放到提示词的最前面。然后是场景和主体设计部分,我们以主体为例,首先需要对人物进行定妆,也就是按照AI设计好提示词,生成人物的原始参考图。然后以这个人物的参考图生成该角色在各种场景各种角度下的图片,然后再用这些图片生成对应的分镜头视频。
用作分镜头视频生成的图片,我们称之为参考图或者关键帧。关键帧一共有4种,第一种也是最常见的,就是画面首帧,整个视频以这个画面为基础,向后生成视频。第二种是尾帧,作为关键帧,比如视频从某个场景移动到某个主体的情况,一般主体都是需要保持一致性的,所以需要将有主体的尾帧作为关键帧。第三种是频中间的某个画面作为关键帧,比如视频从某个场景移动到有主体的画面,然后再由这个主体生成后续的视频。第四种是前后都有关键帧的镜头,这种情况一般出现在由一种状态变化到另一种状态的情况。这种情况的关键帧我们可以通过不同的AI视频工具实现视频的生成。下一节AI视频课中我们会详细的讲到。