摘要:随着全球化经济的迅速发展,世界各行各业都将工作效率放在了首要的位置上。AI智能技术的出现不仅可以给人们的生活带来极大便利,还改变了许多行业的发展趋势,影视行业也不例外,看是完全不相干的AI智能,却能为影视制作带来诸多便利,提升了影视后期整个工作的效率和质量,这个制作的流程也由以往的繁琐逐渐向简单化转变,在很大程度上降低影视制作过程中的所需要耗费的成本进而提高整个影视投资的回报效益。根据目前情况来看,AI智能技术在影视制作中会被广泛应用,且发展前景非常乐观。基于此,本文对AI智能与影视制作进行研究。
关键词:AI智能;影视制作
一、引言
人工智能技术可以多方面的模拟人脑的思维,人工智能的出现不仅是提高人们生活质量与生活层次的产物,同时也是社会进步和发展的必然结果。随着人工智能技术的快速发展,影视内容制作现在与人工智能已经逐渐结合并且结合的效果也已经有了一定的起色,无论是自动配音环节,还是自动生成字幕环节都还需要人工将其全部完成,在当前形势下,人工智能技术已经逐渐与其相结合。尤其是对于一些高质量的影视制作,通过结合人工智能技术可以在提高效率的同时,满足用户对影视内容个性化的需求。为此,在影视制作领域要全面推广对AI智能技术的应用。
二、人工智能介入影视后期制作的条件
(一)建立有效的影像辞典
《西蒙尼》主要是由美国一家电影公司所发行的,电影的内容主要就是将主角要离开剧组,导演利用数字虚拟化的方式合成一个女明星,也就是电影名字西蒙尼。电影的这个影像过程都是采用数字虚拟技术,导演创造出了一个没有任何人可以取代的一个女主角,使女主角西蒙尼身上积聚了所有让人羡慕的属性。如果说导演制作了一个性质相对比较简单的电影假象,对于人工智能介入的数字化剪辑来讲,影像辞典在建立过程中会更加的复杂。要采集海量的影视素材,并对素材急性分析,这只是属于一个输入、计算学习的过程。例如对于大量的影视素材,都需要将其分割成多个小段,按照树形的结构将已经分割成的各个小段进行划分,在私有类别里,定义为肖似代码层面的,则不需要进行改正和调整,较为简单化,对于共有类别里,需要选择一个相应镜头组相接的参数,如:镜头类型、速率等,其他类型的镜头,都可以采用同一种风格作为参照的标注,加以统一化的处理,这种表示主要就是针对试听语言自身所具有的独特优势。针对新拍摄的素材,数字剪辑师在整个工作过程中需要采用一种方式进行处理和分析,同时还要结合原版的影响词典进行分析,利用计算机根据客户给出要求将其剪辑成片,对于已经剪辑好的成片也要被一起记录在整个影像词典中,完善整个影像词典的特效和质量。
(二)对于视听语言进行深度学习
为了保障人工智能技术可以更加顺畅介入到影像后期的剪辑中,就是保障计算机在意素层面中对整个影像情况进行深入性的分析和研究,简单来讲,就是利用计算机将影像内容全部读懂,将意素的属性以及意素之间相存在的联系全部理解透彻。安德烈巴赞深入研究影像场景的调度情况时,就有一个非常典型的案例,在电影《公民凯恩》中最具有代表的一幕就是,演员苏珊有了轻生的想法,凯恩需要在这个时候立即冲到演员苏珊的屋内,阻止他轻生的行为。这一幕只用了一个镜头进行表示。在人工智能技术下,将这一幕划分成若干个镜头,例如:苏珊脸色非常惨白,郁郁寡欢,床头有玻璃杯、安眠药片,凯恩迅速跑道苏珊的房间内,苏珊脸色更加惨白,这样也可以表述出上一幕所要表达的意思。这个案例被安德烈·巴赞用在了镜头调度的研究中华,在整个过程中应用人工智能技术,可以深入研究像后期介入的具体操作情况进行研究。另外,人工智能技术需要在读懂镜头里意素的同时,还要根据人物的心理状态和神态对镜头之间的衔接做好预测和判断,确保呈现出的影像画面是完整的。
三、智能媒体制作的应用案例分析
在科学技术迅速发展的背景下,网络新媒体发生了巨大的变化,开始借助人工智能技术对视频内容进行智能化的便捷和生产,主要采用的人工智能技术包括:人脸/人体的智能编辑技术、物体/场景的智能生成技术、跨模态内容匹配生成技术。
(一)人脸/人体的智能编辑技术
无论是人脸、还是人体动作的特效在整个视觉作品中都起着至关重要的作用,对于传统的影视为了营造一种良好的特效,需要依附在整个后期制作和图形的计算中,生成式对抗神经网络GAN的出现,打开了人脸的智能生成、智能编辑的新思路[1]。在一般情况下,人脸生成都是采用GAN的变体模型在这个实际操作过程中采用编码-解码器的结构进行操作,通过特征码来体现人脸的相关属性,例如:脸形、表情、姿势等,这样就可以使神经网络学习有关人脸属性分布特征码之间所存在的紧凑映射性的关系。对于映射关系,用户对其属性可以随意的进行控制,并采用生产新的脸型或者是人脸做出符合整个影视作品中鄋需要的动作、特效、表情,可以确保整个画面的完整性。对于DeepFake技术,在特定的条件下,可以对短视频中的人脸根据整个影像画面的需求进行修饰,该技术虽然在应用过程中还无法达到电影制作商所提出的相关要求和标准,但是有很多的影视制作公司已经开始对人脸/人体的智能编辑采用低成本的深度学习方法来将其应用在影视作品中,提高整个影视作品的视觉感。
(二)物体/场景的智能生成技术
图像生成技术的应用可以有效产生出图片特定的一种物体,产生出与视频相关的背景和影像。“BigGAN”技术就可以利用独立的模型产生出相关的图片,并且图片的质量非常高,对于同一种不同实体总所存在的多样性可以采用截断的操作进行控制,GAN的变体可以利用GAN、通过文字的形式来生成出更具有准确性的图像。同时也可以单一物体的形象特征进行描述,例如:例如有一匹骏马,骏马的毛发是红棕色,马蹄是黑色,尾巴比较短,或者是采用多个实体组合成不同的场景进行描述,例如:有三个滑雪者都背着书包从高处的雪山坡上划过[2]。无论是对文字的分析,还是图像生成模型的技术都属于目前新型的一种人工智能技术,通过对不同的数据集进行训练,可以更加满足对于文字的描述和讲解,从而形成一种单一化的实体生成,还可以采用多体的场景使其形成一种图像。利用图像操纵类GAN,就可以直接对实体的边缘情况进行分析,根据分析结果设定一个简单的轮廓,进而生成一种高质量的实体图像。以上这些技术应用在影视内容制作上都可以起到显著的效果,提供大量的具有个性化特性的示例图像素材,譬如在演播室的桌子上可以将不同的电视节目经过简单的操作生成出有关不同节目的装饰物,这样在很大程度上减少了人工制作素材的成本,节省了大量的人力和物力,全面提升整个影像视频所获取的经济效益。
(三)跨模态的匹配生成技术
跨媒体内容生成主要就是指在学习的基础上与不同的模态媒体内容中的低维特征相匹配,低维特征具有相似语义的特性,例如:像表征物体的像素集合,单词等;能够有效降不同模态之间、媒体内容中所存在的高维结构性匹配进行有效的完成,例如:多物体、多层次的图像、语句等,从而完整最终的内容生成和转化。在当前网络媒体节目制作中已经有两种技术被广泛应用,一种是总结型媒体内容生成,以图像到文本生成为主,包括图像描述、视频描述等,应用实例有自动体育视频解说,新闻稿件自动生成器等。另一种是想象型媒体内容生成,以文本到图像生成为主,包括文本-图像、文本-视频生成、文本-音频生成等。应用实例有图像内容编辑,以本文输入为主;虚拟人物乐器演奏视频,以音频信息生成为主。第二种技术与第一种技术的生成特性恰恰相反,想象型媒体内容生成属于扩展信息、联想信息的一个主要过程中,简单来讲,与以往的媒体内容对比可知,将要生成的内容所包含的信息量非常的大,这种方法在实际应用的过程中都需要具备海量的配对训练数据,在对抗生成网络的基础上对生成媒体内容构建模型,适合应用在对互动创意视频内容的智能制作中。
四、人工智能技术与应用在影视行业的发展
(一)人工智能对创意与编剧的影响
首先是创意编剧阶段。2018年依靠人工智能技术创作了一部小说,叫《哈利波特和看起来像一大坨灰烬的肖像》,在人类看来这完全不像是正常的词语,但就是这样一本小说,在全世界的零零后里引起了巨大的反响,它带着机械性的语言已经成为一种新时尚。还有《Sunspring》这部出现在去年伦敦科幻电影节上的影片,也是由人工智能创作的。以上例子是人工智能在创意阶段所做的一些尝试、一些工作。
(二)人工智能对制作的影响
在制作阶段,有些技术目前已经很成熟了。现在的体育比赛、现场秀和新闻节目中,摄像机的轨迹很多都是通过人工智能的大数据分析在驱动的。包括剪辑这样的制作环节,它的背后都有人工智能的驱动以保证最快的实效性。关于具体的图像处理技术,比如说NVIDIA新发布的RTX显卡,它通过人工智能的降噪完成光线追踪的实时处理;再比如说程序化纹理,在传统三维技术里面生成成本相对比较高的环节都可以通过人工智能去帮助实现。以及涵盖了面部捕捉和表情捕捉的动作捕捉技术,在好莱坞电影《复仇者联盟》和《星球大战侠盗一号》等影片中所呈现的虚拟角色的背后都有人工智能在驱动。还有声音后期制作的例子,所有内容相关的处理都有人工智能的尝试在其中。到了所谓触达阶段,我们现在用的一个词叫触达,是因为现在影视内容的呈现方式不再是确定的银幕或者屏幕,从现在的多屏融合到未来的VR。目前国内的各大视频平台,内容推送的背后都有大数据的支持。例如Netflix的项目,从立项到研发,背后都有人工智能数据的支撑。人工智能技术在影视行业中有些内容已经在应用阶段了,有些内容还处在实验阶段,例如谷歌、NVIDIA也不断会有一些实验室阶段的技术出现。
五、人工智能与电影未来
在当前社会形态下,人工智能技术已经被广泛应用,在科幻片中可以看到人工智能。例如:警匪片、侦探片等,将不清楚的画面进行放大,提高整个影像的清晰度,人工智能技术在以前是完全不可能实现的,但是现在我们已经实现了对人工智能技术的应用。人工智能技术应用在电影中可以对我们人物表情的编辑提供更多的可能性和操作性。所以技术发展共同的特性就是满足人类发展过程中的需求,使人类可以将需要创造的内容和影像变得更加简单、容易,在整个操作的过程中也不需要长时间的训练和调整。人工智能技术的出现,我们每一个人都像是拥有一个人工智能助理,可以在很大程度上满足我们创造过程中的实际需求。人工智能技术的发展不仅可以给我们的影视行业带来更多的变化,激发人们的创作积极性和主动性,甚至还可以改变人与人之间的沟通方式,利用人工智能技术将我们内心所想要表达的想法全部表达出来。相信,在人工智能的领导下新时代会很快就来临。
六、结束语
综上所述,人工智能技术应用在影视制作中具有较高的应用价值。科学、合理的应用人工智能技术能够有效改善长期以来我国传统网络技术的状态,改变了传统全人工式的内容制作模式,提高了人们的生活质量和工作效率,同时也能够准确预测剧本拍成电影是否可以获得更多的经济效益。例如:ScriptBook系统,它属于一种目前新型的一种高等技术,包含数据分析、处理、算则算法等环节,含有6500个以上剧本,同时它还具有对市场的应变能力,在自由数据库中可以对新型数据进行综合的判定。创始人Azermai表示,ScriptBook预测的准确性至少比人类高三倍。人工智能技术在性能的改变上还有非常大的进步空间,对于艺术创作在目前还不能完全被人工智能所取代,因为艺术创造是需要创新的,人的思维是发散性的,而人工智能技术是人类在艺术创作中所赋予的一种特殊能力。
参考文献:
[1]邓涛,王代强.浅谈影视艺术创作中的大数据智能算法分析与运用[J].艺术科技,2019,32(22):18-19.
[2]毛琦.技术主义与契约机制:基于社会学意义的电影数据管理体系研究[J].现代传播,2019,41(8):133-138.
作者:卢家强
AI智能与影视制作分析相关推荐数字科技影视制作技术开拓发展