Google DeepMind与Primordial Soup合作推出短片《ANCESTRA》，该片在Tribeca电影节首映，结合了实拍与Google的Veo视频生成模型。此次合作汇聚了超过200名专业人士，旨在将生成式AI应用于电影制作，推动叙事与技术的边界。
在制作过程中，团队使用了Gemini、Imagen和Veo等多种工具，根据情绪、色彩和氛围生成镜头，并开发了新的Veo功能，以实现个性化视频、精准运动匹配和实拍与生成画面的融合。
影片讲述了一位母亲的故事，灵感来源于导演Eliza McNitt自己出生时的戏剧性事件。通过Veo生成的镜头与实拍场景相结合，McNitt形容Veo是她观察宇宙的另一种视角。
为了制作《ANCESTRA》，团队上传了McNitt父亲拍摄的照片，使用Gemini生成详细的美学描述，这些描述成为创建新图像和视频的提示。关键概念艺术则由Imagen生成，定义了影片的整体风格与氛围。
在生成视频的过程中，团队面临着需要匹配实拍质量和色彩的挑战。通过微调Imagen模型，团队确保生成的画面在艺术方向上保持一致。此外，使用Veo的运动匹配功能，团队能够精确控制镜头运动，生成高质量的场景。
例如，在一个场景中，McNitt希望观众能体验到人类身体的旅程，最终展示通过剖腹产出生的婴儿。团队创建了一个人类身体的虚拟3D模型，记录了草图镜头的运动，并使用Veo生成新的镜头。通过传统VFX和颜色分级，最终将生成的婴儿画面与实拍画面无缝结合。
《ANCESTRA》是与Primordial Soup合作制作的三部短片中的第一部，旨在通过生成式AI补充现有的创作和制作工作流程，帮助电影制作人克服实际限制。通过与McNitt和Aronofsky等艺术家的合作，DeepMind探索了当今技术的创意潜力。
博主点评：《ANCESTRA》展示了生成式AI在电影制作中的巨大潜力，通过与顶尖艺术家的合作，DeepMind不仅推动了叙事的创新，还为传统电影技术开辟了新的可能性。这一结合值得业界深思与借鉴。