Adobe推出Firefly文本转视频AI模型将于今年晚些时候推出

Adobe 宣布推出由人工智能驱动的 Firefly 视频模型，这是一种旨在增强 Adob​​e Premiere Pro 和其他视频工具中的视频编辑工作流程的工具。

Adobe 强调了视频作为“参与货币”的重要性，并介绍了即将推出的 Firefly 视频模型及其旨在支持的创新专业工作流程。

背景

Adobe 于 2023 年 3 月首次推出Firefly AI，并在成像、设计和矢量方面迅速推进新模型。

这些模型已集成到 Adob​​e Creative Cloud 和 Express 工具的主要功能中，例如 Photoshop 中的生成填充、Lightroom 中的生成删除、Illustrator 中的生成形状填充以及 Express 中的文本到模板。

自推出以来，Firefly AI 已被广泛采用，用户生成了超过 120 亿张图片和矢量图。根据创意社区和企业客户的反馈，Adobe 开发了 Firefly 视频模型，以提升视频编辑能力。

新模式的设计充分考虑了创作者的权利，提供工具帮助编辑探索创意、填补时间线空白以及为素材添加新元素，同时确保内容“具有商业安全”并且仅使用 Adob​​e 有权使用的材料进行训练。

Adobe Firefly 视频模型功能

对短视频内容的需求不断增长，使得编辑、电影制作人和内容创作者需要在更短的时间内完成更多工作。

为了满足这些需求，Adobe 的 Firefly 视频模型融入了 AI 来增强视频制作的各个方面，从色彩校正和视觉效果到动画和音频混合。

现在，诸如删除不需要的物体、平滑跳切、找到完美的 B 卷等关键任务都可以更高效地完成，从而使编辑人员能够专注于创作引人入胜的故事。

Adobe 的 AI 工具还简化了协作，并与 Frame.io 等工具集成，以实现顺畅的审核和批准流程。

Firefly 文本转视频

Firefly 视频模型包含“文本转视频”功能，允许用户使用文本提示、摄像机控制和参考图像生成 B-roll 和其他素材。此模型的主要功能包括：

在两分钟内生成自然世界的视频，例如风景、植物或动物。

使用参考帧和丰富的相机控制(例如角度、运动、缩放)创建互补镜头。

支持各种用例，如可覆盖现有内容的大气元素(例如火、烟、水)。

构思 2D 和 3D 动画，包括黏土动画。

集思广益自定义文本效果。

通过“图像转视频”功能将现有的静态照片或插图转换为实景剪辑。

此外，Premiere Pro(测试版)将于今年晚些时候推出一项名为“Generative Extend”的功能。该功能将允许用户延长剪辑、平滑过渡或将镜头保留更长时间以进行精确编辑。