品玩

科技创新者的每日必读

打开APP
关闭

对话《陌路狂刀》幕后团队:用AI给电影“上色”,让观众与创作者再近一步

AI能为拍电影做些什么?

辛峰

发布于 3月18日

用一些简单的提示词,就可以直接生成时长1分钟、多角度的连续视频,构建富有情感的角色,也可以实现无缝转场。Sora的出现,让电影人捏了一把汗。

AIGC的概念危险又诱人。一种新的生产力意味着传统电影工业中的从业者们可能有被颠覆的危险。但这种发生在剧本创作、电影特效甚至是整部电影拍摄过程中的变革,又能够给电影人和电影制作带来更大的想象空间。

现实比外界想象得更快,崭新的AI能力已经开始在电影制作中承担比原来更重的角色。对正在热映中,爱奇艺出品电影《陌路狂刀》的制片人李亮文来说,这部武侠片的色彩和影调必须要做到极致,而AI在后期调色技术上的加持,可以提供帮助。

给电影“上色”

《陌路狂刀》的故事背景是五代十国的后唐,皇帝驾崩,齐王叛乱,陷害太子,屠城,并且暗中追杀皇帝逃离的妻子和他唯一的子嗣。隐姓埋名的陌刀军总教头田安邺在无意中卷入这场与叛臣贼子的对抗中。

整个故事在一个极暗的影调中展开。冬日的肃杀里,炭火像人心,冷兵器的光影凿出一份快意恩仇。

“刀剑与火炭,就像是追杀的肃杀气氛和主角的热心肠之间的映射”,李亮文说,“我们画面刻意地去突出了一种冷暖对比。”

这对拍摄以及后期调色是非常大的考验,弱光的情况下,最终画面的呈现效果需要在很狭窄的光域中分出层次。“比如看剧本就知道,很多是夜戏。这无论是对电视大屏还是手机端来说,都不是很友好。”

为此,在项目开始前期,李亮文与《陌路狂刀》制作团队就和爱奇艺技术团队见了面。

“从SDR 到HDR、提高帧率,这些都可以通过我们的算法调色模型来完成。”爱奇艺算法工程师Peter说。

业界对HDR已经并不陌生。笼统地说,这代表着一种更好的画质。HDR的全称是High-Dynamic Range,即高动态范围。作为一种图像和视频处理技术,HDR能够提供比标准动态范围(SDR)更广的亮度和颜色范围。通过HDR技术,图像能够更真实地反映现实世界中的亮度层次,从最暗的阴影到最亮的高光,都能呈现更细腻的细节。这使得颜色更加丰富,对比度更高,从而带来更好的画面效果。

而这样的画质转换甚至整个调色的工作,现在大部分都可以依靠AI来完成。

“从技术上, 把 SDR 转换到 HDR 是一个从一到多的映射,这需要动态的结合电影中每一帧画面的上下文信息来做出生成。转化成 HDR之后,色域会更广,但是画面鲜艳的程度和幅度需要控制,也就是说既要比以前鲜艳,但是它又需要在整体上能够和原片调性保持一致。 ”Peter 向硅星人表示。

这样的能力基于爱奇艺在后期调色上的一个算法模型训练。喂给它很多调色成熟的电影——SDR和HDR两种版本——“给他看很多(色彩)转换成功案例,然后让他学”。这其中是一个从不可控到可控的过程。在训练过程中,训练人员会识别出一些相对明显的问题(比如把一个红色背景的画面调成绿色),然后更细致的调色尺度的把握,则会交给更专业的人来给出反馈。

提高帧率也是后期制作中的一项。对于动作电影来说,帧率意味着一切。在传统的24帧/秒(FPS)的电影播放标准下,快速移动的物体可能会显得有些模糊。提高帧率可以减少这种运动模糊,使得快速动作场景更加清晰。观众可以捕捉到更多的细节。

在《陌路狂刀》的项目前期,拍摄团队和爱奇艺的技术团队已经打磨好一个成熟的AI调色技术方案, 李亮文用一场打戏举了个例子。

“有一场戏是主人公以绳拴炭躲在暗处迎敌的戏,整个画面几乎都是黑色,只有炭火甩出来的火花是明亮的。但那些火花就像放烟花一样转瞬即逝,很难捕捉。”

“在高动态范围和高帧率的加持下,我们就敢在拍的时候用很多的特写镜头,因为它能够还原得非常真实。”李亮文表示。

如今,这份努力实实在在转化为了一场惠及更多受众的观影体验。

由于这次《陌路狂刀》选择了分线发行的模式,在线下和爱奇艺云影院同步上映。这也意味着,更多的观众将会是通过电视机或者移动终端看到这部片子。

如果说前期AI调色的优势让一部电影能最大程度释放创作者热情,而如何在型号繁多的设备上都能始终如一展现出高品质的视听,还需要在播放端给视觉呈现划一道 “标尺”。

让创作者的意图直达观众

3月7日《陌路狂刀》首映礼映后,张晋、耿乐和一众主创现身,身前是从各地赶来的几百位影迷,身后是一块22米宽、16米高的IMAX银幕。

一切都率先、甚至只在电影院里发生——这是曾经电影无可争议的经典形式,但现在《陌路狂刀》在院线上映几天后,就迅速出现在爱奇艺线上云影院里。对于《陌路狂刀》制作团队来说,这并不是一个草率的决定。

美国电影协会每年都会发布一份“全球电影市场数据报告”。这份影响力巨大的研报每年一经发布就会被业内广泛引用。这份报告的名字从2017年开始第一次把OTT流媒体平台的VOD网络视频业务数据也纳入了统计,名字则变成了全球影院和家庭/移动娱乐市场环境报告。这一变化说明了网络视频平台对电影市场的影响已经受到好莱坞传统电影公司的高度关注。

流媒体开始改变影迷观看电影的方式,而对于电影制作方来说,这首先意味着电影观看终端的变化。

现在电视机的型号早就超过上百种,如果把手机、电脑也算进来,一部电影有机会抵达的终端则更多。好的一面是这意味着一部电影容易被更多人看到了,但挑战在于,每一块屏幕对于电影视效的呈现可能各不相同。

以往的电影工业是以影院大屏为终端所建立起来的。从制作的角度来看,电影院的回放环境是可控的,是标准的。这意味着调色师眼中看到的影片母版和电影观众在影厅里面看到的应该是一模一样的。如果说电影院代表着一种变量可控的观影体验,那流媒体连接着的每一款不同的屏幕,如何统一终端设备的视效表现,对于一部电影的创作变得越来越重要。

2020年7月,爱奇艺首次推出帧绮映画。在此基础上,为了适配更复杂的大屏终端生态,爱奇艺在2022年8月推出了TV端的“帧绮映画 MAX”认证标准。

这个认证标准的出发点是为了避免不同的电视屏幕性能对于电影视效呈现上的偏差。以爱奇艺副总裁余珂的话来说,“最大程度还原片方在监视器中呈现的效果,这是爱奇艺技术和内容团队的共识”。爱奇艺希望从技术角度,将导演的想法和审美,原汁原味地拿给观众看。

流媒体平台开始变成电影的重要阵地,这种变化甚至一定程度上驱动内容创作者在影片拍摄的开始,就将播放时的画面色彩考虑在内。比如李亮文在项目开始之前就已经将最终的放映效果考虑进去了。

“所以我们会做测试,比如拍一个试拍的片段,然后拿给我们的技术团队去测试,比如这样的还原效果在终端成片会是什么样子,色彩宽容度是不是OK,对比明暗是不是OK之类的都要一点点确立——既要达到创作的艺术效果,也要保证最后能够在终端上把创作意图完整的呈现出来,这其实是需要我们的创作部门在前期就开始跟爱奇艺的技术团队去做尝试和磨合。这也意味着整个创作过程,会先往后看效果,然后再回来相应的调整整个拍摄过程。”

李亮文表示,通过帧绮映画 MAX 认证的机型,可以大幅还原导演、美术等创作者在影视内容创作时的色彩表达。“有了帧绮映画MAX这样的技术标准出现,大部分影片在流媒体上观看时体验不会损失。 ”

用技术,让电影链接更多人

帧绮映画 MAX意味着最高达“HDR+ 超高清+全景声+高帧率+高标准认证”的影院级体验。这背后是一个多维度、跨领域的技术发展路径。Peter 进入爱奇艺已经多年,他记得爱奇艺内部对帧绮映画相关技术的研发工作是从2018年左右开始的。

2018年前后,国内市场上终端设备的播放能力迅速变强,开始可以支持比较高的帧率和分辨率显示。这一年也是HDR概念走向大众化的时间点。支持HDR播放逐渐开始成为当年新款电视贴在显眼位置的广告词。 技术的演进总是需要这样的一些外部动力。

“对于插帧、SDR 转换HDR等的研究几乎都是在2018年同时起步的,视频编码算法的研究或需要追溯到爱奇艺刚成立的时候。到后来,随着终端播放能力的提高,才开始进行视频处理算法的研究,就像现在用到的AI调色算法。” Peter说。

Peter也很早就参与过电视机认证帧绮映画MAX标准的工作。

整个测试流程会分成两部分。第一阶段是对播放设备硬件能力的测试,“比如说它的亮度和色域的极限能到多少,它的色偏是多少,这些都会通过专用的光度计来测量。 ”

第二阶段是对电视终端在播放处理中表现的测试。算法团队的测试人员会去跟调色师沟通,选择一些特殊场景的样片,用人眼来观察电视机播放过程中在特定场景下的表现。

一些新上市的电视产品会运到爱奇艺的办公大楼里去做测试,但更多的是爱奇艺的测试人员去到厂家。这个复杂的认证过程现在也形成了一种稳定的工作流,在AI能力的加入后可以做一些自动化的处理。

目前包括海信、三星、TCL、华为、小米、索尼等电视品牌在内,超过180款旗舰级机型已经获得了帧绮映画MAX认证。

电视机的尺寸也在迅速变大。《一代宗师》在2013年上映的时候,国内电视市场的平均尺寸是40寸;《叶问4》在2019年上映的时候,这个平均值第一次超过50寸。接下来,中国电视市场平均尺寸从50寸突破到60英寸只用了4年。2023年中旬,65寸的市场占比已经超越55英寸,成为第一大尺寸。

人们家里摆着的电视正在变得越来越接近电影院里的那块屏幕,这或许是流媒体兴起并且与电影这种艺术形式越来越靠近的现象背后的一个朴素原因。

《陌路狂刀》在上线院线几天后就出现在了爱奇艺云影院的新片目录里。在《陌路狂刀》之前,另一部武侠电影《目中无人2》在2月于爱奇艺云影院独家上线,引起了一波武侠热,到现在已经有超过10万人观看。而现在云影院中最热门的电影,是刚在奥斯卡斩获七项大奖的《奥本海默》。

帧绮映画MAX标准试图用技术的手段让 “云影院”体验无限接近真实的电影院。在这个过程中,流媒体平台作为承接电影制作方与观影人群的连接者角色,在未来只会变的越来越重要。

辛峰

这家伙很懒,什么也没留下,却只想留下你!

取消 发布
AI阅读助手
以下有两点提示,请您注意:
1. 请避免输入违反公序良俗、不安全或敏感的内容,模型可能无法回答不合适的问题。
2. 我们致力于提供高质量的大模型问答服务,但无法保证回答的准确性、时效性、全面性或适用性。在使用本服务时,您需要自行判断并承担风险;
感谢您的理解与配合
该功能目前正处于内测阶段,尚未对所有用户开放。如果您想快人一步体验产品的新功能,欢迎点击下面的按钮申请参与内测 申请内测