METAL for iPhone

AI 新闻, 现在用 App 阅读。

下载 METAL, 每天发现最新 AI 报道。

在 App Store 下载

iPhone 应用 · 免费下载

也可在 iPhone 的 App Store 中搜索 METAL AI Magazine。

METAL

OpenAI 公开 invideo 的 GPT-6 Astra 案例

视频剪辑初创公司 invideo 接入 GPT-6 Astra 后,调色校正的成功率提高到约 3 倍。几名剪辑师在一天之内做出了约 50 个定制特效。

OpenAI 公开 invideo 的 GPT-6 Astra 案例

摘要

  • OpenAI 于 9 月 23 日连同视频一起公开了 invideo 的 GPT-6 Astra 客户案例。
  • 调色和色彩校正任务的成功率提高了约 3 倍,几名剪辑师一天内制作了约 50 个定制特效。
  • CEO Sanket Shah 表示,Astra 能以帧级精度规划剪辑,并用更少的推理步骤完成工作。
How invideo improves color grading 3x with GPT-6 Astra

OpenAI 于 9 月 23 日公开了一则客户案例,介绍视频剪辑初创公司 invideo 如何借助 GPT-6 Astra 提升剪辑代理。据 invideo 介绍,接入 Astra 后,调色和色彩校正任务的成功率提高到约 3 倍,几名剪辑师在一天之内做出了约 50 个定制特效。OpenAI 把这则案例和初创公司介绍视频一起发布。

invideo 是一款代理式视频剪辑工具,让人类剪辑师在保持主导权的同时把剪辑工作交给代理。视频剪辑是一连串决定:梳理故事、放置音效、制作转场、调整色彩。代理需要把剪辑师的指示拆成步骤,选对工具执行,再核验结果。OpenAI 的案例页面把 invideo 归类为亚太地区的媒体领域初创公司,使用的产品是 API

invideo CEO Sanket Shah 首先提到的是规划能力。他说:"Astra 以帧级精度规划某个具体剪辑的方式相当惊人。"据 Shah 介绍,与此前测试过的模型相比,Astra 用更少的推理步骤排出剪辑顺序,输出 token 也相应减少。invideo 表示,即使任务变得更长、更复杂,Astra 也能连续执行多条指令,而不偏离剪辑师最初的目标。

数字变化最大的地方是色彩。色彩工作需要在校正、调色、重新生成、LUT、单独抠出特定对象等相互重叠的方法中做出选择,因此是代理经常出错的领域。要在更换背景颜色的同时保住人物肤色,必须先把人物分离出来并逐帧追踪,再给其余部分上色。Shah 表示:"以前调色和色彩校正任务的失败率非常高,用了 Astra 之后,成功率提高了大约三倍。"

第二项成果是定制特效。剪辑师用语言描述或提供参考图后,代理会针对这段素材用代码写出特效,放上时间线,并附上剪辑师之后可以再调整的控件。几名 invideo 剪辑师用这种方式一天做出了约 50 个特效。invideo 反复强调,产出不是一段固化的视频,而是一条始终可以修改的时间线。

METAL 查看的 56 秒介绍视频展示了实际工作画面。剪辑师在代理输入框里写下要加入细致音效和混音之后,画面切到叠着多条轨道的时间线;写下想让颜色再鲜亮一点之后,又出现了色轮和波形监视器画面。Shah 在视频中说:"用户,尤其是认真的创作者想要的视频,就是他们脑海中的那个视频。"他解释说,Astra 能理解哪种转场该配哪种音效,并逐帧放置。他还补充说,这种方式能为剪辑师节省数百个小时,拿走他们最枯燥的杂活。

GPT-6 Astra 是 OpenAI 在 9 月初推出的顶级模型。METAL 曾报道 OpenAI 发布 GPT-6 Astra 并同时公布对齐改进和风险等级,也报道过一家编程代理公司 测试 Astra 的视频。OpenAI 同一天还发布了法律 AI 公司 Harvey 的 Astra 案例。模型发布后接连推出客户案例,是想用一线成果而不是功能清单来说服市场。

从内容营销人的角度看,这则案例瞄准的读者与其说是开发者,不如说是创作者。成功率 3 倍和一天 50 个这两个数字都来自 invideo 的内部测量,测量方式和对比模型的名称都没有公开。但信息很清楚:像调色这样费工的重复劳动交给代理,故事、品味和最终剪辑版由人掌握。视频工具的竞争,正在从谁能生成更华丽的画面,转向谁能更可靠地替剪辑师处理时间线。

评论