以下是将活动主题拆解为大量结构化提示词用于文生视频的相关内容:
技巧 1:提示词的结构 当提示词有清晰的结构时,提示效果最有效。可使用简单公式:[摄像机移动]+[建立场景]+[更多细节];复杂公式:[镜头语言]+[光影]+[主体(主体描述)]+[主体运动]+[场景(场景描述)]+[情绪/氛围/风格]。 例如:无结构提示词“小男孩喝咖啡”,有结构的提示词“摄影机平移(镜头移动),一个小男孩坐在公园的长椅上(主体描述),手里拿着一杯热气腾腾的咖啡(主体动作)。他穿着一件蓝色的衬衫,看起来很愉快(主体细节描述),背景是绿树成荫的公园,阳光透过树叶洒在男孩身上(所处环境描述)”。
技巧 2:提示词的优化 有三个原则:
PixelDance V1.4 提示词指南 图生视频的基础提示词结构为:主体+运动。当主体有突出特征时可加上,需基于输入图片内容写,明确写出主体及想做的动作或运镜,提示词不要与图片内容/基础参数存在事实矛盾。
当提示词有清晰的结构时,提示效果是最有效的。使用以下结构有助于生成期望的结果:简单公式:[摄像机移动]+[建立场景]+[更多细节]复杂公式:[镜头语言]+[光影]+[主体(主体描述)]+[主体运动]+[场景(场景描述)]+[情绪/氛围/风格]无结构提示词:小男孩喝咖啡有结构的提示词:摄影机平移(镜头移动),一个小男孩坐在公园的长椅上(主体描述),手里拿着一杯热气腾腾的咖啡(主体动作)。他穿着一件蓝色的衬衫,看起来很愉快(主体细节描述),背景是绿树成荫的公园,阳光透过树叶洒在男孩身上(所处环境描述)。|类型|无结构提示词|有结构的提示词||-|-|-||prompt|小男孩喝咖啡|The camera pans to a young boy sitting on a park bench with a steaming cup of coffee in his hand.He looked pleasant in a blue shirt with a tree-lined park in the background,and the sun shining through the leaves on the boy.||视频效果|[a9c8b0e7-8384-5877-820f-02ad3dc3965d_0.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/GzLqbBlfwo2S7BxaXSOc2Q0znFd?allow_redirect=1)|[eea46e02-9b82-5aac-a23e-846227ca8da4_0.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/Ei2qbEYPbocpy7xOXnEcqiCgnBg?allow_redirect=1)|
还有三个原则:强调关键信息:在提示的不同部分重复或强化关键词有助于提高输出的一致性。例如,摄像机以超高速镜头快速飞过场景。(其中的“超高速”、“快速”就是重复词)聚焦出现内容:尽量让你的提示集中在场景中应该出现的内容上。例如,你应该提示晴朗的天空,而不是没有云的天空。规避负面效果:为了进一步保障视频生成质量,可以在提示词中写明不需要的效果。例如:“不出现扭曲、变形、模糊的场景。”✍️怎么写一个提示词?首先,要明确场景中的人物和冲突是什么,这是推动整个场景发展的关键因素。例如,在一个追逐场景中,冲突可能是间谍试图逃脱追赶者的追捕。其次,是对场景进行详细的描述,包括地点、人物形象、任务动作等细节。使用生动的动词来营造动态和戏剧化的氛围,如“匆匆前行”、“缓缓旋转”等。例如:“在昏暗的街道上,雨滴如注,一个孤独的行人匆匆前行。”第三,加强镜头语言,镜头语言是通过摄影机的移动或焦距变化来表现画面内容的一种方式。常用的镜头运动包括推、拉、摇、移、升、降等。每种镜头运动都有其特定的作用和效果:推镜头:逐渐聚焦在某一角色的面部表情上,突出表现该角色的情感变化。拉镜头:逐渐远离主体,展示环境或背景,形成一种运动的主体不变、静止的背景变化的造型效果。摇镜头:跟随主体运动的表现方式,可以突出主体的同时,又可以交待主体运动方向、速度、体态及其与环境的关系。提示词要具体明确且符合物理规律,使用简单且清晰的语言。
图生视频的基础提示词结构为:主体+运动。不要对静止部分过多描述,只描述想动的部分。当主体具有一些突出特征时,可以加上突出特征来更好定位主体,比如老人,戴墨镜的女人等。需要基于输入的图片内容来写,需要明确写出主体以及想做的动作或者运镜,需注意提示词不要与图片内容/基础参数存在事实矛盾。比如图片中是一个男人,提示词写“一个女人在跳舞”;比如背景是草原,提示词写“男人在咖啡厅里唱歌”;比如选择了固定相机的基础参数,却在提示词里写了镜头环绕。|输入参数|生成视频||-|-||prompt:老人戴上眼镜<br>基础参数:相机固定,16:9,10s|[pd41.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/JrLbb5rRfooaesxslvxc4FS9nsb?allow_redirect=1)<br>单主体+单动作|