在日前举行的2024世界人工智能大会(WAIC 2024)上,阿里巴巴达摩院宣布推出一站式AI视频创作平台寻光。据了解,该平台集成了剧本创作、分镜设计、视频素材编辑等关键步骤,旨在通过AI技术提供全新的视频创作模式,使视频创作更简单、高效。目前,寻光已开启内测申请。
对此达摩院方面表示,Sora等AI视频生成模型给足了人们对视频生产方式彻底变革的想象力。但一方面AI视频内容的可控编辑,包括对复杂剧情的理解、生成对象的一致性等,仍然是当前算法所面临的一大挑战,另一方面业界尚没有统一的AI视频编辑平台,能让创作者一站式体验到AI加持的视频创作全流程。而寻光关注到的,正是“Sora之后,视频工作流的变革”。
据悉,寻光具有故事板生成、定制故事角色、视觉素材自由创作、视频内容可控编辑等功能,可以辅助用户创作剧本、分镜图等,并支持对生成及上传素材进行丰富的AI编辑,包括人物控制、场景控制、运镜控制、目标新增/消除/修改等。
在此次活动中,达摩院视觉技术实验室高级算法专家陈威华着重提到了寻光基于视频图层的编辑能力。以前景图层功能为例,用户通过文本输入,即可生成符合描述的、具有透明背景的视频,并且一键就能将其融合到其他背景视频当中。同时寻光还支持图层拆解功能,用户在视频第一帧选择想要提取的物体,算法就会自动跟踪,把整段视频中对应的目标拆解出来,形成独立的带透明背景的视频图层。
对此陈威华表示,“今天我们正处在AI视频生成这场巨大变革之中,‘工欲善其事,必先利其器’,我们希望寻光视频创作平台就是每一个人手中的利器,是每一个人的专属视频工作室,在这个平台上,AI与创作者之间能够更紧密高效地协作”。
【本文图片来自网络】