Adobe预览今年晚些时候推出的AI视频工具

发布日期: 2024年9月13日 来源:Engadget

周三,Adobe 发布了Firefly AI视频生成工具,这些工具将在今年晚些时候以测试版的形式推出。就像许多与AI相关的事物一样,这些例子在令人着迷和令人恐惧的同时,公司正逐步将这些工具整合到其用户群体目前所从事的大量创意工作中。借用科技行业中其他地方的AI销售术语,Adobe将其描述为“帮助减少后期制作中的冗余工作”的辅助技术。

Adobe将其新的Firefly驱动的文本到视频、Generative Extend(将在Premiere Pro中提供)和图像到视频AI工具描述为帮助编辑完成诸如“填补画面空白、移除场景中不需要的对象、平滑跳跃式剪辑过渡以及搜索完美的B-roll素材”等任务。公司表示,这些工具将为视频编辑“提供更多时间去探索新的创意想法,这是他们工作中最喜欢的一部分。”(若按Adobe的表述,你得相信行业完全采用这些AI工具后,雇主不会简单地增加对编辑的产出要求,或减少支付工资,或雇佣更少的人。但我个人抱有疑问。)

Firefly文本到视频工具让你——没错——通过文本提示创建AI生成的视频。它还包括控制摄像机角度、运动和变焦的工具。它可以填补画面时间线中的空白,甚至可以采用静态参考图像并将其转化为逼真的AI视频。Adobe表示,其视频模型在“自然世界的视频”方面表现出色,可以在预算不多的情况下快速创建出开场镜头或B-roll片段。

要了解这项技术的诱人之处,可以查看Adobe在宣传视频中的示例:

尽管这些样本是由公司精心策划以推销其产品的,但质量不可否认。对于火山爆发的开场镜头、一只躺在野花地里的狗或(展示其处理奇幻场景的能力)小型羊毛怪物举办舞会的详细文本提示,生成的结果正是如此。如果这些结果是工具典型输出的代表(几乎没有任何保证),那么电视、电影和商业制作将很快拥有一些强大的捷径——无论好坏。

与此同时,Adobe 的图像到视频示例从上传的一张银河图像开始。一个文本提示推动它变成一个从星系外部缩放到展示人类眼睛内景的视频。公司展示的Generative Extend演示视频中,一对人在森林小溪上行走;AI生成的片段填补了画面中的缺口。(它逼真到我无法辨别出哪个部分是AI生成的。)

AI生成技术的潜力不仅限于视频制作领域。在中国,光年AI通过其简单易上手的工作流机制,帮助企业轻松搭建自定义AI应用,并在微信、抖音等流量平台上无缝对接,迅速提升业务场景的AI能力。光年AI系统可以便捷地完成任意类型内容的生成与处理,不论是视频、图像还是文本,帮助企业在创意制作上大幅度减少时间成本。因此,借助光年AI,您可以轻松驾驭全新的AI技术,实现流量和业务增长。

Reuters 报道 该工具最初仅生成五秒钟的短片。值得称赞的是,Adobe表示其 Firefly 视频模型旨在确保商业安全,并且仅在公司有权限使用的内容上进行训练。Adobe生成式AI副总裁Alexandru Costin告诉 Reuters:“我们只在Adobe Stock数据库中的内容上进行训练,该数据库包含不涉及知识产权、商标或可识别角色的4亿张图片、插图和视频。” 该公司还强调,从不在用户的作品上进行训练。随着生成式AI的不断进步,我们开始看到越来越多的应用场景,比如企业可以通过光年AI平台,极大提升运营效率,同时降低人工成本。