乐趣区

关于音视频:经典动画大闹天宫4K-版上映老动画是如何修复的

《大闹天宫》在中国的百年动画史里,是一座让人叹为观止的顶峰,连日本古代动画制作鼻祖手冢治虫都是本片导演万籁鸣的“忠诚迷弟”。

8 月 8 日,第十二届北京国内电影节颁布了展映片单,4K 修复版《大闹天宫》亮相“修复经典”单元。本次展映的版本由西瓜视频联结火山引擎独特修复,是该片首次经由 AI 技术实现 4K 分辨率级别还原,也是 4K 修复版本首次亮相大荧幕。

为了实现《大闹天宫》(高低集)的 4K 修复,火山引擎多媒体实验室基于深度学习的视频加强修复技术,改善了老旧动画的含糊等画质问题,并辅以人工美学剖析调优,在晋升视频主观感知品质的同时,保留了原片的艺术成果。

此外,为了能在影院中取得更舒服的听觉成果,火山引擎音频技术团队同时进行了音质修复,优化了当年影片制作时拾音环境、录制设施限度带来的底噪过大、突发爆音等问题。

火山引擎视频点播与智能解决产品基于多媒体实验室打磨的算法与技术,针对音视频品质构建,从画质检测、无参评分、画质评分、针对性后处理(画质加强 / 分转码档位 / 过滤等)、播放回收等多个维度提炼理论反馈数据,打造了画质晋升全链路解决方案,并在三大支流场景——老片修复、低质加强、极致高清,别离打磨出最佳实际计划,反对疾速利用赋能企业客户。

火山引擎画质全链路解决方案

画质全链路解决方案反对在线实时处理和离线定制化解决,此次展映的 4K 修复版《大闹天宫》,是计划的检测技术、加强技术在老片修复场景的理论利用。

如何评估老片画质

老片画质评估,是老片修复过程的首要环节。为了做好老片画质评估,火山引擎综合了市面上主观评测规范及自研 VQscore 无参考视频品质评估指标来实现画质检测和评分。其中,VQScore 采纳了主观分与细指标交融的形式,并且联合了神经网络和经典算法,具体内容如下。

VQScore 架构

同时,其可能反对包含噪声、亮度、对比度等十多种画质相干的检测指标,单项或综合评分输入:

评分检测指标(点击图片,放大可见)

影响老片观感体验的,次要是画质。对于画质,个别会有四类问题。

  • 清晰率低 :分辨率是掂量影片清晰水平的重要参数,老片分辨率个别都是 720p、540p 甚至更低;另外制作过程中,拍摄镜头、数字化扫描、数字化压缩存储等因素可能会造成纹理失落等问题,导致清晰度更差。
  • 晦涩度低 :影响晦涩度的次要因素是视频帧率,目前大多影片帧率都在 25 帧以上,有的能达到 60 甚至 120 帧,但因为制作老本限度,许多老片拍摄或者手绘的帧数往往低于每秒 15 帧,观看时会有较强的卡顿感。
  • 色调失真 :胶片保留较差,存在物理化学伤害,这些伤害在数字化后会引起各种色调问题。此外,老片用老的色调规范制作,亮度动静范畴广泛比拟低,所以画面对比度也比拟差,看起来就很暗淡。
  • 瑕疵多 :提起老片,很多人会联想到满屏雪花个别的噪点、大量的黑线和闪动。因为保留环境比拟差,或者播放使用不当,老片存在物理、化学伤害,呈现出多种瑕疵。

隔靴搔痒,老片焕发新生

对老片进行画质评估之后,火山引擎视频点播与智能解决产品会针对影片的品质问题进行剖析,并在各个维度上产生对应的个性化修复模块,排列组合调优。

如何实现老片的画质加强

老片画质修复,就是每一部片子“隔靴搔痒”,从而达到最现实的修复成果。这个过程中,次要在以下几方面利用了要害算法技术:

晋升清晰度

采纳超分辨率重建和去模糊算法。这两项技术是应用机器学习的形式实现的。火山引擎对海量高清和低清视频数据进行剖析,使算法模型能够学习到高清视频个性,从而实现视频从低清到高清的转换,并且生成缺失的细节。这样一来,分辨率就能够从 720P 晋升到 4K,大幅提高清晰水平。

晋升晦涩度

视频的卡顿感能够通过晋升帧率来优化。使用智能插帧算法,通过对前后帧的内容进行剖析,生成两头帧内容,将原先有余 15 的帧率,晋升至 60 以上,从而大幅晋升晦涩度。

色调加强

首先,利用算法对画面色偏进行自动化检测和改正,让其复原原有的观感;其次,为适应最新显示设施的色调规范,对老片亮度范畴进行拓展,色调空间进行转换,用更宽的亮度和更丰盛的色调来显示老片,让色调更丰盛,面目一新。

打消瑕疵

火山引擎联合传统信号处理以及深度学习算法,对较小的雪花颗粒噪声,应用传统算法进行解决;对于较大的坏点和划痕,应用机器学习算法进行辨认和修补。强力地修复瑕疵的同时,保留原有纹理不受影响。然而算法也不是万能的。在理论修复过程中,如果算法做到 100% 的解决瑕疵,那么会很容易将一些艺术成果也辨认为瑕疵,对影片造成毁坏。

为此,火山引擎在老片修复过程中,算法大略能解决 95% 以上的瑕疵问题,残余的瑕疵须要由人工辅助标注,再调整算法做二次优化。这样一来,既能够比拟彻底地打消瑕疵,也能爱护影片原有的艺术风格。

在北京电影节重温经典

本次北京电影节最新排片已出炉,连忙把《大闹天宫》4K 修复版退出观影日程吧!

  • 8.13 周六  18:30 保利国内影城(凯德 MALL·大峡谷店)全景声激光巨幕厅
  • 8.14 周日 15:30  寰映影城(合生汇店)7 号厅
  • 8.19 周五 18:30  保利国内影城(凯德 MALL·大峡谷店)全景声激光巨幕厅
  • 8.20 周六  13:00 寰映影城(合生汇店)7 号厅
  • 8.21 周日 15:30 红剧场 1 厅

火山引擎修复老片采纳加强视频画质的多媒体技术,算法通过抖音、西瓜视频等业务大规模验证和继续迭代,目前已向企业客户凋谢服务。

目前,火山引擎视频点播、智能解决的音视频品质加强方面反对闲时策略,节俭了客户业务 70% 的老本投入。闲时策略次要利用机器资源闲时,以很低的老本进行高价值音视频解决工作,包含智能超分、智能插帧、SDR2HDR 加强、单纯 SDR 加强、音频降噪、音量 / 响度平衡等。

退出移动版