虽然视频模型已经趋于成熟。但很多人做视频时仍旧会遇到一个问题,脑子里有画面,但很难从零开始搭出完整的世界。Runway 分享了一个实用的工作流,教你从一张图出发,一步步扩展成一段完整的影片。
流程的第一步是生成起始图像。如果你手上还没有参考图,可以用一句简单的提示词生成。只需要描述画面里有什么,比如场景、人物、镜头类型,再加上电影感之类的风格词就可以。不用写得很复杂,系统会自动把基础提示词优化成更完整的版本。生成后如果不满意,可以修改提示词,或者加入一张参考图,让系统提取其中的风格。
有了第一张图之后,就可以用故事面板(Story Panels)功能继续往外延展。它的作用是根据已有图像,生成一组风格一致的新画面。比如从一张雪地里的猛犸象画面,扩展出山脉的全景镜头。生成的各种画面在光线、环境、镜头语言上会保持统一,看起来像是在同一时间同一地点拍摄的。这种一致性对后期剪辑很重要,否则画面之间容易跳。
接下来是面板放大。故事面板默认是 21:9 的比例,如果需要其他比例或者更高分辨率,可以单独对某一张图进行放大和重渲染,最高可以到 4K。这个步骤相当于把草图变成正式镜头,用于最终输出。
最后一步是把图像转成视频。把选好的画面接入视频生成节点,再写一段简单的提示词,比如希望镜头如何移动,角色做什么动作。视频模型对提示词的理解比较直接,所以可以把运镜和动作写清楚。生成后如果效果不理想,就换个提示词或者重新生成图像,这和传统拍摄反复试镜头是类似的过程。
整个流程的核心,其实是用一张图建立视觉基准,然后围绕这个基准不断扩展。无论是广告短片还是更长的故事,都可以用同样的方法拆分成一组一组镜头。角色和场景可以反复作为输入,保证跨场景的一致性。
这种方式降低了前期美术设定的门槛,也让个人创作者更容易搭建完整的视觉世界。过去需要团队协作完成的设定图、分镜和预览,现在可以在同一个工作流里完成。它并不是一键成片,而是把创作拆成清晰的步骤,让人可以在每一步做选择和调整。当所有镜头准备好之后,就可以像常规电影制作一样进行剪辑了。
# http://t.cn/AXtyFMJp