阿里大文娱CTO郑勇:生成式AI将引发内容行业巨变 【演讲及听义通悟分析】

商业新知网   2023-06-13 09:26:11

来源: 网络 ,如有侵权请联系删除。如果您觉得对你有帮助的话,记得关注我们,我们会出更好的内容。

在2023全球人工智能技术大会智能传媒论坛上,阿里大文娱CTO郑勇表示,数字化技术正逐渐颠覆影视行业。随着帧享数字化制作和数字人“厘里”的问世,中国影视行业将迎来超级大变革。

由于未取得版本,请识别二维码观看


(资料图片)

(阿里大文娱CTO郑勇发表主题演讲)

(帧享数字化制作3D虚拟拍摄方案)

帧享数字化制作已经实现了3D虚拟拍摄的全自动校准,让虚拟背景和真实场景实时追踪,并提升画面空间和颜色校准效率。这些新技术也使得数字资产制作效率提高三倍,让3D虚拟拍摄成为真正的可能。

(阿里大文娱首个超写实数字人“厘里”)

数字人“厘里”已经成为了虚拟偶像,并与多个品牌合作,还在动画电影《铃芽之旅》中展示了跨次元联动的能力。而在接下来的一部剧集中,“厘里”将首次参演影视剧。这些数字化技术的出现,不仅将大大提升影视拍摄效率,还将为影视行业带来更多全新的体验。

阿里大文娱将继续探索行业前沿技术的应用,以让艺术更好地呈现在人们眼前,从驱动内容生产到提供更丰富的AR、VR、MR等新奇体验,都将借助数字技术的力量而实现。所以,随着数字化技术的不断普及,中国影视行业将迎来超级大变革。

以下由听义通悟分析整理,没有进行任何的删减

剧本 效率 匡衡 虚拟拍摄 AIGC 确定性 小伙伴 美术基础 关键词 制作行业

技术 生成 坦白 场景

讲者分享了人工智能在电影历史发展和影视剧本创作中的应用。讲者认为人工智能可以提高资料收集效率、节省时间和成本,在剧本创作中可以帮助自动化中远景、场景的拆分,并实现自动化的故事版,引领新一代的革新。讲述了两个案例,都是通过AI技术实现的,展示了AIDC在影视制作和文娱行业中的应用,包括快速生成高质量的虚拟场景和人物、实时调整和现场直接剪辑等。最后,还分享了一个AIDC应用于影视制作的案例。在讨论中,讲者也提到了人工智能在制作样品时缺乏透明度和沟通的问题。

他感谢教授的邀请,分享了关于电影史发展和人工智能技术在影视创作中的应用。他介绍了剧本创作、故事版制作和分镜的效率优化,以及AI技术在图片使用中的不确定性问题。他还介绍了确定性的技术手法,如自训练lora模型和control net插件。此外,他分享了一个学生在半天内完成的视频案例,展示了使用AIDC进行影视制作的一些应用,如动漫风格化的作品和无美术基础的视频。他强调了虚拟拍摄的重要性,并介绍了使用AIAI技术进行校准的方法。他还谈到了校准的重要性,因为它可以大大提高效率。在拍摄过程中,场景切换时间过长会导致整个剧组等待,因此效率要求非常高。使用AI可以将制作时间缩短三倍以上,成本节省五倍以上。这些新的变化带来了更多的可能性。

他提到了西汉时期的匡衡勤奋好学,但因为家境贫困没有钱上学,只能偷偷躲在学堂外听课。他的亲戚教他识字后,他决定去富人家借书看。匡衡晚上没有光,不能看书,但他灵机一动,找来一把小刀,把墙壁裂缝挖大了一些,凑着透过来的烛光读书。最终,他成为西汉时期有名的大学者,他凿壁抛光的故事成为后世读书人的榜样。

以下为原文:

发言人1 00:00:00

这个可以的。感谢教授的邀请,今天很荣幸能在这里做分给各位同学做分享。因为刚才其实看到了很多一些技术的一些发展。然后今天我这边的演讲主要还是以实际应用为主,所以是跟一些技术上的点可能会讲的会比较少。今天先回回过头来,我们先看一下整个电影,就是整个电影史的发展。

发言人1 00:00:25

从电影的诞生,然后从无声到有声,从黑白到彩色,然后后面从一个数字到从中胶片到数字,其实整个技术其实在里面的发展还是有一个至关重要的一些作用。然后今天大家能看到AIGC的一些发展,会不会对今天整个影视会带来一些比较大的变化。坦白讲我觉得就是包括刚才田院士也讲了,就是对CB这一块领域,其实一些没有新进行突破性的一些进展,这是事实。

发言人1 00:00:58

但是我们从里面,因为从一线去看的话,会发现它虽然没有直接从textto video这块去做那个有一个阶段性突破。我们在发现我们的整个他的生成里面,各个环节里面都有AIGC在里面带来了一些渗透,一些变化。相信我们会相信就是整个ITC能够引领影视艺术的一个新一代的革新。对,然后我今天的整个对整个分享会把整个影视创作重新再捋一遍,来看一下哪些地方会有一些变化。

发言人1 00:01:33

剧本其实相对来说就是一句资本。我说我们所有的内容,所有的一个好的作品。其实坦白讲知识就是从剧本阶段开始的。相对来说以前的剧本的话就是我们的编剧,我们的创作团队在剧本上会花非常大的时间。然后现在因为有AI的诞生,然后今天我们在剧本创作创意发散,资料收集的时候,会发现能够带来非常大的体现。

发言人1 00:02:01

所以这个case是相对来说就是我是直接在在GGPT上加了一个一个要求,他就能够很自然的把整个大纲给我们,分给做出来了。当然而且他不是那个中局,你在中间可以做很多的调整。有了剧本之后,我们要把剧本变成最终的那个视频。其实中间会有个拆解的过程,会包括中间我对中远景,然后各个场景一些拆分。

发言人1 00:02:26

因为后面会涉及到对整个主创来说,他要去知道我这个场景到底应该是实拍,还是说要搭景,还是要通过CG去做,会有非常多的一些细节。所以今天AI能够在整个筹备期能够带来非常大的效率优化。对,包括台词一些拆解。但是就是我有文字的那个拆解之后,后面会到了一个我们的故事版。就是说白了那个图片的分镜,图片的分镜,以前的整个生产效率是相对来说需要人手绘业余去做那绘画。

发言人1 00:03:02

但绘画相对来说,它的成本还是就是时间成本还是比较高的,而且就是会涉及到里面的一个风格的一些变化。我几个风格的调整一调整有可能是几天或者几周,甚至上月的时间。但是因为AI这件事情,能够让我们的整个风格也好,我们整个故事版也好,效率能够极具的快速的提升。然后这两个case基本上就是我在做这个演讲前,让我小团队小伙伴直接对做这个分镜做的一个实际的案例是吧?

发言人1 00:03:32

就比如说右边那个我的我那输入的主要关键词就是伦敦贵族男女转角专家的那个酒吧,就能生成这样子的,基本就这种风格。但如果相对来说,如果大家去去了解了整个AI怎么使用,就会发现其实有个词叫炼丹。就是我们会发现我们在做图片使用的时候,会发现你的那个是不确定性是非常大的。但其实今天我们有蛮多有一些确定性的技术手法能够解决稳定性的问题。

发言人1 00:04:01

比如说我们可以通过一些自训练lora模型,以及加上一些control net一些插件,就能够让我们出现那种效果,能够相对比较稳定的一个效果出来。所以这个是就是在我们实际应用当中出现的一些问题。然后这两个case是完全是有刚才那个流程里面做的两个视频,一个是少儿用的,一个凿壁偷光的一个case。

发言人2 00:04:30

倒闭偷光。西汉时期,有个勤奋好学的孩子叫匡衡,他没钱上学,只能偷偷躲在学堂外听夫子讲课。一位亲戚看到匡衡这么好学,就抽空教他识字。那时候的书很贵,方恒买不起。他决定去富人家借书看。

发言人3 00:04:47

方恒对富人说,我不要工钱,只求你把家里的书借给我看,保证不耽误干活。

发言人2 00:04:52

主人被匡衡的情分感动,借给他许多书匡衡太开心了。匡衡白天辛勤工作,中午休息时抽出时间看书,通常要十天半个月才能读完一卷书。黄恒决定,晚上也看书,多学习知识。那个时代,只有富人才买得起油灯。匡衡家很穷,晚上没有光,不能看书。这天晚上,匡衡躺在床上,梦见白天读过的书,他突然发现东边墙壁有些发亮。匡衡起床一看,原来是墙壁裂了缝,邻居家的烛光从裂用处透了过来。

发言人2 00:05:25

他灵机一动,找来一把小刀,把裂缝挖大了一些,这样从邻居家靠过来的光亮也变大了,他就凑着透过来的烛光读起书来。黄恒刻苦学习,成为西汉时期有名的大学者。他凿壁抛光的故事,成为后世读书人的榜样。

发言人1 00:05:43

对,像这个视频的话,就是按照上面刚才讲的那个流程,其实就一个同学他在半天就把这个事情做出来了。但是按传统的方式,基本上是要至少一周,而且好多个人才能把这个事给做了。像这个的话是我们优酷里面一个一个顾欣,一个季的动漫的风格化的一些作品。也是一个人就几个小时就把它完成了。

发言人3 00:06:08

希望取回身体后难受啊。那时候你知道我根本就不会。做样品,你为什么不告诉你,为什么不?我怕你。

发言人1 00:06:26

对,然后另外一个前提是做这两个视频,小伙伴基本他是没有一个美术基础的,他没有个美术基础情况就能做这样的视频。这是就是像这样的内容,在可能大家在抖音里面应该也能看到类似的。这就是说白了这个AIDC进现阶段能够看到最多的一些内容的一些应用。

发言人1 00:06:47

对,然后就根据刚才那个就是说这个是题外话的一些事情,这三张照片,相对来说只有一张是真人实拍的,另外两张其实是根据这个,这是我团队的同事,根据同事他他去生成的。也就我们会发现后面就是女生拍照什么的,不需要去各个场地去去哪里去打卡什么。其实他们能真正能做到你想要在哪里就能在哪里,而且你的就是真实度会非常高。

发言人1 00:07:15

所以我们断言相对来说,后面的整个平面拍摄这个行业会有一个接比较大的一些变化。因为它确实效率太高,而且相对来说已经做到了真假真假难辨的一些阶段。然后另外就是关于整个文娱这一块的话,我们后面一些宣发的一些内容。比如说今天我们长安10万3万里的宣发物料,其实这些图片都已经是AIDC生成。

发言人1 00:07:41

然后这两天在北在在上海,其实上海电影节,我们阿里影业这边还做了一个AIGC的一个活动。四个小时内收到了6 600万张AIGC的选码,物料其实质量也非常高。然后下面就是优酷的很多一些剧集的内容的宣海报生产都已经在IDC去去生成了。坦白讲就是这个行业里面以前会我们会花非常大的钱在制作上,但现在基本都AIG这种完全起取代了。

发言人1 00:08:14

其实前面讲的主要还是说大家能比较熟悉的就是文本和图片带来了一些变化。但是真正回到了我们,其实回到第一页,我讲的那个就是我们关于影视级别的内容。怎么AIDC能够带来多大的变化?这其实相对来说后面他刚才说他不是说直接完全生成,他是里面一些渗透性的一些能力。所以右边有一个关键词叫做虚拟拍摄。对虚拟拍摄这个词有可能在座的很多人,就是以前会听到很多。

发言人1 00:08:46

但是坦白讲这几年虚拟拍摄在国内的发展不是非常快,是实际的落地应用。大家能听到迅拍的这个词,但是实际的落地应用场景还是比较少的。但是我们今天会发现,因为AI的加入,其实最近虚拟拍摄这件事情,它会越来越靠国际,一定是确定性比较高。我们下面再来看个视频。对,这个视频看完的话,基本上这个是我们最近。这是就是我们最近实际应用一个项目。

发言人1 00:10:38

然后这个项目的话就是我们花了十天左右的时间,但是有13个场景在这个所有就刚才你刚才大家看到所有镜头全部在一个盆里拍的,就最后定增的那内页基本就是在这个屏之前。然后搭建了不同的很简单的一些场景,就能完成这个操作。然后再回过头来,刚才讲的,从剧本创作到分镜,再到那个故事版,在虚拟拍摄。

发言人1 00:11:01

其实在后面它可以连接着previous再加take views,以及再到我现场可以进行实时的调整,以及现场直接剪辑和所见即所得。这个是对整个内容制作行业的效率会急剧的提升。然后刚才那个片子坦白讲是没有做任何后期的。他是就是我现场的,他是从监视监视器得到什么镜头,我只是做了简单的剪辑,就出现了刚才那样的视频。

发言人1 00:11:29

所以我们会发现虚拟拍摄,因为AI的加入能够带来整个影视制作行业的一个非常大的变革。然后这里面我还是得讲一下,里面它用到了哪些AI的技术。就是因为你要刚才看上去其实相对来说比较真实的情况里面,它其实几个关键的点。一个就是我的空间和色彩的对齐,这里面有用到了AIAI的整个校准。AI. 校准的话,它的整个效率的提升是非常大的。

发言人1 00:11:56

因为你一个就是我们在一个一这个剧真正在拍的时候,因为现场不管整个剧组几十号人,如果你一个场景的切换时间过长,几十号人都在等着你。所以你的效率对效率上的要求是非常大的。然后另外的话你要解决那个景深,你要解决那个透视关系,它里面的灯光的整个虚和实的融合度的要求也非常高。所以在里面的一些AI算法其实也起到了关键性的作用。

发言人1 00:12:24

然后另外的话,虚拟拍摄就是因为你它已经在这个盆里了,所以对3D的资产要求也是比较高的。以前做一些三就是能够上屏,就是比较真实的那个3D数字资产的话,以前的制作方式和手段,坦白讲成本也比较高。因为AI的加入,其实我们会发现它至少是三倍的时间的提升,以及至少五倍以上的成本的节省。这是就在里面带来的一些新的一些变化。

T HE EN D

温馨提醒&广告

郑重声明: 本文绝非小编编写,版权归原作者所有,转载文章仅为传播更多信息之目的,如涉及作品内容、版权和其它问题,请在30日内与本网联系,我们将在第一时间删除内容!

最新资讯

猜你喜欢