加入Adobe全家桶的Sora，视频改图加戏样行：PR大更新预告

这个就是生成式 AI 视频编辑工具的时代。

Adobe 家庭马上就要拥有最先进的生成式了。 AI 录像创作能力。

今天，Adobe 宣布了 Premiere Pro 新版本的更新计划。其中包括第三方 AI 无论是视频生成模型添加插件， OpenAI 的 Sora 还是 Runway 的 Gen-2 和 Pika，很快就会出现 Adobe 大众可以使用工具系统。

如今，基于 Adobe 大模型本身 Firefly 能力，您可以直接添加或减少视频模板上的内容。

过渡时感觉背景的画面比较少？现在使用 OpenAI 的 Sora 只需一键生成一段即可。

Sora 可以在每次 API 调用中提醒自然语言建立最多三种视频组合。

还可以使用新工具「凭空增加」已经有了镜头内容的长度，但这部分似乎不受提示词的控制。

自今年 2 月 OpenAI 推出 Sora 到目前为止，我们只能看官方。 TikTok 账号里放 AI 生成视频的 demo，真正的工具仍然存在「即将发布」状态。现在是新版本 Adobe Premiere Pro 全部亮相，也许意味着新技术即将落地。

对于 Adobe 高达 3300 万的 Creative Cloud 对于付费用户群来说，这更是一件大事，它可能会给设计领域带来最完整、最革命的变化。

有了这个功能，Premiere Pro 使用者可以对传统摄像机捕获的实景视频进行编辑和处理 AI 材料和它混合在一起。想象一下，拍摄一个演员表演逃离怪物场景的视频，然后用人工智能生成怪物。 —— 这个步骤不需要道具、服装和演员，两个视频短片可以在同一个编辑器中浏览和组合在同一个视频文件中。

用更成熟的过程(从计算机到手绘帧)建立的动画也是如此，这些动画可以和 Premiere Pro 在同一文档中匹配 AI 素材混和。

值得注意的是，从 Adobe 在演示中，我们又看到了。 OpenAI 的 Sora 与其他类似产品存在代差。 —— 它产生的视频效果比其它可用工具要好得多。

与 Adobe 之前发布的很多和 Firefly 有关公告不同，此次新视频生成工具尚未确定发布日期，Adobe 这只是意味着他们将于今年推出。

引进第三方先进 AI 对视频处理而言，大模型属于对未来的探索。 Adobe 说，这个想法是为了 Premiere Pro 顾客提供更多的选择。Adobe 同时也强调，内容凭证标签可用于这些编辑，以识别使用哪些人工智能模型来生成它们。

Adobe 的 Premiere Pro（PR）自 1991 第一次发布于年底 Mac 到目前为止，版本一直是世界上最受欢迎的视频编辑程序之一，现在已经被来自世界各地的主要好莱坞电影编辑和独立电影制作人使用。它即将迎来 33 历史上前所未有的创新。

值得注意的是，Adobe 这些第三方什么时候还没有确定？ AI 将视频生成器集成到 Premiere Pro 其中，而且细节似乎还没有完全确定，许多第三方工具在发送后都需要付费订阅。

此外，Adobe 也使用自己内部的生成人工智能商品(例如 Firefly 和 Generative Fill 等等)，强调其模型是基于其拥有或获得许可证。 / 有权利使用数据进行训练，例如 Adobe Stock 创作者奉献的内容(尽管这让一些 Adobe Stock 摄影师和艺术家都很恼火)。

Adobe 加码生成式 AI

Adobe 致力于多媒体创作和创意软件产品，正在生成 AI 技术爆发后，该公司不甘落后，迅速加入对局。

根据彭博社上周的报道，Adobe 在竞争者 Midjourney 有些图像是对的 Firefly 进行训练，Midjourney 自己基于开源 AI 模型 Stable Diffusion，练习公开抓取和受版权保护的网络数据。

今天，Adobe 宣布 Firefly 从文本到图像生成模型，一个版本将在「今年的晚点期」集成到 Premiere Pro 在中间，然后提供一套全新的「生成式 AI 工作流程」及功能。

比如，「生成式拓展」该功能将使视频剪辑和电影制作人「无缝添加帧可以使视频编辑更长时间」，而且不需要拍摄任何新的图片，这可能是一个非常有用和省钱的功能。Adobe 同时也强调要让视频实现更平滑的过渡，比如增加过于突然结束的剪辑，以便在某一时刻或动作中停留更长时间。

Firefly for Video 还将保证 Premiere Pro 使用者可执行智能「检测和移除目标」功能，本质上是突出视频中的目标(道具、人物、服装、风景等)。)，并允许 AI 跨越不同帧的模型跟踪它们。与此同时，用户也可以使用生成式 AI 将这些目标编辑到新的目标上，迅速改变角色的服装或道具，甚至跨越多个剪辑和摄像机视角，彻底消除目标。

最终，Firefly for Video 将附加文本添加到视频图像生成器中，使之与之相匹配。 Sora、Runway、Pika 和 Stable Video Diffusion 相媲美。

虽然现在还只是预览版， Adobe 针对 Premiere Pro 提供新一代 AI 电影制作人和社交媒体创意人士都对集成功能给予了掌声。

「这样对我的真人电影工作很有帮助。」，导演 Kevin K. Shah 说道。

参照内容：

https://venturebeat.com/ai/adobe-to-add-ai-video-generators-sora-runway-pika-to-premiere-pro/

https://www.theverge.com/2024/4/15/24130804/adobe-premiere-pro-firefly-video-generative-ai-openai-sora

https://www.adobe.com/products/premiere/ai-video-editing.html

本文来自微信微信官方账号“机器之心”（ID：作者：机器之心，编辑：泽南，小舟，36氪经授权发布，almosthuman2014)。

本文仅代表作者观点，版权归原创者所有，如需转载请在文中注明来源及作者名字。

免责声明：本文系转载编辑文章，仅作分享之用。如分享内容、图片侵犯到您的版权或非授权发布，请及时与我们联系进行审核处理或删除，您可以发送材料至邮箱：service@tojoy.com