AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

鱼羊 发自 凹非寺

量子位 | 公众号 QbitAI

AIGC时代,视频创作这事儿真的不一样了。

就像这样,轻轻一圈,选定目标立刻变身单独图层,再丝滑嵌入不同的背景视频,场景变换so easy~

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题 视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

想要调整一下镜头角度,交给AI,同样能一键完成:

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

还能一键消除、修改目标:

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

后期再也不用加班加到手抽筋(doge)。

划!重!点!这还不是实验室里的单一技术demo,而是马上就要开放内测,让创作者们直接可以用起来的一站式AI视频创作平台——“寻光 ”。

就是说,传统上分散在不同制作流程中的剧本创作、分镜图设计、视频素材编辑等步骤,现在都可以在AI加持下,在同一个平台上流畅完成。

这就是阿里达摩院在上海世界人工智能大会上带来的最新惊喜。

演示一出,现场的观众都坐不住了。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

而达摩院官方,也透露出了AI视频领域新成果背后更大的“野心”:

不对标Sora,而是走自己的路,希望更快让AI生产力匹配人类想象力

“寻梦光影间”

所谓寻光,意指“寻梦光影间”:

即通过人工智能技术,提供全新的视频创作模式。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

与Sora等今年备受关注的AI视频生成模型不同,寻光关注到的,是“Sora之后,视频工作流的变革”。

达摩院认为,Sora等AI视频生成模型给足了人们对视频生产方式彻底变革的想象力,但一方面,AI视频内容的可控编辑,包括对复杂剧情的理解、生成对象的一致性等,仍然是当前算法所面临的一大挑战。

另一方面,业界尚没有统一的AI视频编辑平台,能让创作者们一站式体验到AI加持的视频创作全流程。

举个例子,OpenAI创始成员Andrej Karpathy最近也玩上了AI视频,整出了个AI版《傲慢与偏见》。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

在这个短片的制作过程中,他用到的工具包括Claude、Ideogram、Luma、ElevenLabs、VEED……而他本人也抱怨说:

老实说这个工作流非常混乱,工具与工具之间存在大量的复制粘贴,3个片段的简单小视频就花了我大约1个小时的时间。这里面存在一个巨大的机会。谁正在打造100%的AI原生视频制作平台?

达摩院打造寻光,定位为PUGC一站式AI视频创作平台,目标正是针对以上问题,用AI能力重塑传统视频制作的全流程

具体来说,寻光可以辅助用户创作剧本、分镜图等,支持对生成及上传素材进行丰富的AI编辑,包括人物控制、场景控制、运镜控制、目标新增/消除/修改等10多种功能。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

并且在交互方面,主打“让视频编辑像操作PPT一样简单”

以分镜设计环节为例,上传到寻光的原始视频素材,会由算法切分成多个分镜头。

在创作空间里,用户可以方便地查看到每一个分镜头,并用简单的拖拽操作对其进行调整。

在新建的空白分镜中,除了添加已有素材,寻光平台还支持用户调用多种多模态生成模型,生产新的内容。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

而在编辑功能方面,寻光强调的是精细化的编辑和控制 :在AI加持下,依据用户意图,在语义层面而不是像素层面实现编辑;同时,视频里的人体、人脸、前景、背景等任意局部目标,都可以进行精细化的编辑和修改。

在现场,达摩院视觉技术实验室高级算法专家陈威华着重提到了基于视频图层的编辑能力

以前景图层功能为例,用户通过文本输入,即可生成符合描述的、具有透明背景的视频,并且一键就能将其融合到其他背景视频当中。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

寻光也支持图层拆解功能,用户在视频第一帧选择想要提取的物体,算法就会自动跟踪,把整段视频中对应的目标拆解出来,形成独立的带透明背景的视频图层。

飘动的头发也扣得很精细的那种:

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

另外,在对视频全局元素的编辑方面,风格迁移上,寻光平台提供了20+不同风格。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

运镜控制上,左右平移、上下平移、推进拉远、左右环绕等都能支持。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

在对视频局部元素的编辑方面,除了目标消除,寻光平台还能实现人脸的精准控制:

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

△视频取自国风武侠动漫《少年白马醉春风》第三集

轻轻一拉实现运动控制:

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

如此看来,寻光可以说集成了市面上最完备的AI编辑功能,把一整个视频制作工作流都给AI化了。相比于在各种工具间跳来跳去,在传统工作流中零散地插入AI能力,属实更加方便、高效了。

重塑视频创作工作流

探索更理解物理世界规律、生成时长更长、生成效果更惊艳的多模态的模型,是当今工业界和学术界都密切关注的方向。

但当更强大的AI面世后,人们能否更快掌握这种新型生产力,同样是值得关注的话题。

在Karpathy挑起话题之后,就有不少网友表示确实戳中痛点:

从一个工具转移到另一个工具会破坏工作状态,说实话,这限制了这些工具对效率的提升。AI视频创作需要统一的UI。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

陈威华也在WAIC现场谈到:

今天我们正处在AI视频生成这场巨大变革之中,“工欲善其事,必先利其器”,我们希望寻光视频创作平台就是每一个人手中的利器,是每一个人的专属视频工作室,在这个平台上,AI与创作者之间能够更紧密高效地协作。

为此,寻光平台背后的达摩院视觉技术实验室已做了大量技术储备。

该实验室致力于多模态视觉信号的理解与生成技术研究,当前的重点研究方向包括更加精准的图像/视频/3D内容生成,更加可控的图像/视频/3D内容编辑,更加高效的生成框架,多模态的理解-生成框架等。

AIGC在全世界范围内引爆热潮,核心在于带来了生产力彻底变革的想象空间。

现在,解放生产力的第一步,已经开始落地实践,你期待吗?

官网地址:https://xunguang.damo-vision.com/

— 完 —

量子位 QbitAI · 头条号

关注我们,第一时间获知前沿科技动态签约

中视频,快速入门的4个步骤,小白避免踩坑走弯路

在当今数字化时代,视频内容已成为信息传播的重要工具。无论是个人品牌建设、教育培训还是商业推广,视频都扮演着至关重要的角色。然而,对于视频制作新手来说,如何快速入门并制作出高质量的视频内容,往往是一大挑战。本文将为你提供四个简单有效的步骤,帮助你快速掌握视频制作的基本技能,避免常见的初学者错误。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

第一步:明确你的目标和受众在开始制作视频之前,首先需要明确你的视频目标和目标受众。是想提高品牌知名度、是教育培训还是仅仅为了娱乐?你的目标受众是谁?他们的年龄、兴趣和观看习惯是什么?这些问题的答案将直接影响你视频的内容、风格和推广策略。明确这些基本点可以帮助你更有效地与观众沟通,确保视频内容能够触及他们的需求和兴趣。

第二步:精心策划内容内容是视频成功的关键。一旦确定了视频的目标和受众,下一步就是策划吸引人的内容。开始之前,做好充分的研究和准备工作是必不可少的。你可以通过查看竞争对手的视频了解市场趋势,或是参考热门视频了解观众喜欢什么类型的内容。

策划时,要注意视频的结构和流畅性。一个好的视频通常包括引人入胜的开头、内容丰富的主体和强有力的结尾。此外,创造性的元素如故事叙述、幽默或惊喜也可以大大提高视频的吸引力。

第三步:掌握基本的拍摄和编辑技巧视频制作的技术层面同样重要。你不需要成为专业的摄影师或编辑,但掌握一些基本的拍摄和编辑技巧是必要的。例如,了解如何使用自然光或简单的灯光设备来改善视频质量,学会如何使用三脚架保持摄像机稳定,以及如何进行基本的剪辑和过渡。

目前市场上有许多适合初学者的视频编辑软件,如Adobe Premiere Rush、Final Cut Pro X等,这些软件通常都有丰富的教程,可以帮助你快速上手。

视频编辑设计培训 AI视频创作一条龙!达摩院寻光平台炸场WAIC,突破可控编辑难题

第四步:有效地发布和推广你的视频制作完成后,正确的发布和推广策略也是不可忽视的一环。选择合适的平台发布视频非常关键。例如,如果你的视频主要是面向年轻人,那么TikTok和Instagram可能是更好的选择;如果是教育类内容,那么YouTube可能更合适。

除了选择合适的平台,了解如何优化视频以获得更好的搜索排名也很重要。使用恰当的关键词、引人注目的标题和描述,以及吸引点击的缩略图都是提高视频可见度的有效方法。

最后,不要忘了利用社交媒体和其他网络资源来推广你的视频。分享到社交媒体、嵌入到博客文章中或是通过电子邮件营销等方式,都可以帮助你的视频触达更多的潜在观众。

通过遵循这四个步骤,即使是视频制作的初学者也可以避免常见的陷阱,更快地掌握视频制作的艺术。记住,持续学习和实践是提高视频制作技能的关键。随着经验的积累,你将能够制作出更加专业和吸引人的视频内容。

相关问答

如何自己制作动画视频?

题主你好,我来回答你的问题想自己做一段动画,首先第一步就要确定剧本了,如果你平时就是一个脑洞大开的人,完全可以自己写剧本啊,个人建议如果是你自己做的...用...

短视频制作组建团队需要哪些核心人员?

1.人员数量对于想要进入短视频领域的个人或是团队来说,如果我们要完成一个短视频的制作到底需要什么样的人才能够完成呢?需要会策划、会拍、会演、会剪、会...

视频剪辑好学吗?去哪里学?

随着今年来手机短视频的火爆,越来越多的人想要学习制作短视频了。但是视频的制作与剪辑并不是那么容易的,只有少数人懂得怎么剪辑制作视频,多数人还是属于小白...

请大神们教教我怎么编辑长点的视频呢?

网络视频的诞生和普及彻底颠覆了视频内容的生产模式,在垂直内容这一赛道上,短视频自定规则,一路抢跑,长视频还在紧紧跟随。在我们常规意义上的垂直综艺层面,...

照片编辑成视频,哪个软件好用,小白求大神指教?

是否很像艺术大片?操作非常简单,下载app,打开,拍摄视频,现在滤镜即可。这款由战斗民族开发的修图App,一键就能将平凡无奇的照片,变成富有视觉冲击感的艺术...

短视频培训都教哪些课程啊?

01从零开始制作小视频竟如此简单02开拍前要准备拍摄脚本03原来手机也能拍出专业效果04用苹果还是用安卓(上)05用苹果还是用安卓(下)06光的应用-...8...

文字短视频是怎么制作的?

现在是短视频的元年,在这个生活节奏快速的社会中,人们已经适应这种高速运转的社会,我们的生活乐趣也在繁忙的工作中逐渐减少,很多人都只能在手机上给自己丰富...

做视频编辑对电脑配置有什么要求?

1、视频编辑会用到flash、会声会影之类的软件。2、其中对电脑配置要求最高的视频编辑软件是会声会影。3、会声会影对配置的要求如下:4、系统:安装有最新...

想从事自媒体行业,请大家给推荐些好用专业的视频编辑器?有哪些?

我推荐一下吧,当然了只是针对我的情况,未必适合大家啊。1、喀秋莎,在视频编辑的时候,我通常采用这一款软件,其实edius我也会用,不过感觉我用不到其中一些...适...

什么视频编辑软件简单而又功能强大?

但如果将视频剪辑软件功能都做全,对产品开发人员而言,引入“非编”、“时间线”等专业知识就显得更为省事,易于开发,但对广大普通用户而言,则需要较多的上...所...