火山引擎4K修复影片入选北影节，相关技术在CVPR2024夺冠

4月22日消息，近日第十四届北京国际电影节正式开幕。由中国电影资料馆、抖音和火山引擎联合4K修复版的港片《A 计划》与《卖身契》入选“致敬·修复”单元。

据悉，《A计划》《卖身契》分别上映于1983、1978年。2023年8月，中国电影资料馆、抖音和火山引擎共同发起了“经典香港电影修复计划”，宣布将4K修复100部香港电影。此次放映的这两部影片就来自上述项目，影片的原始拍摄底片在香港完成4K规格扫描，整个修复流程包括中国电影资料馆的物理和数字修复，火山引擎的AI技术修复，以及双方合作的艺术修复等环节。

火山引擎是字节跳动旗下的云服务平台，曾分别携手西瓜视频和抖音，完成100部国产经典动画和Beyond经典演唱会的4K修复。

在“经典香港电影修复计划”中，火山引擎首次将AIGC技术应用于老片修复场景，借助视觉大模型强大的生成能力和丰富的先验知识，实现修复效果在清晰度、色彩、流畅度和瑕疵消除等方面的全方位提升。

“一方面，大模型生成能力强，借助Stable Diffusion大模型的生成能力，修复效果优于之前的算法，画面细节更自然；另一方面，大模型具有非常强的信息结构化能力，在学习了海量数据对后，可以在其中提炼出大量的知识并“存储”在模型参数之中，其生成空间更丰富，能够应对更多的修复场景。”火山引擎视频云技术架构总监王悦介绍。

目前，火山引擎已针对视觉大模型在一些场景下容易生成伪影或者虚假纹理，以及视频多帧场景的稳定性等问题，在算法和工程上进行了一系列优化，提升了大模型在4K场景下的处理效率并兼顾算力成本。

随着修复工作的深入，火山引擎多媒体实验室通过引入自适应特征加权模块、无监督学习与有监督学习相结合、文字语义先验等训练手段，对视觉大模型进一步的调优，在极低画质人像重建、褪色胶片颜色调整和文字缺失笔画生成等几个方面取得了较好效果。

与此同时，在计算机视觉顶级会议CVPR 2024中，火山引擎多媒体实验室一举夺得了NTIRE（ 图像恢复与增强的新趋势New Trends in Image Restoration and Enhancement）赛道的冠军，其夺冠方案是基于提示学习（Prompt Learning）的图像增强恢复，主要解决的问题，就是修复类似于老片中大量存在的不可预知的复杂损害（未知复杂退化）。

“老片修复这件事情，其实我们每天都在做。”王悦说，老片中常见的清晰度低、流畅度低、色彩失真、有瑕疵等画质问题，在抖音的海量投稿里也广泛存在。通过服务抖音，火山引擎在老片修复方面已经形成了一套较为完整的智能处理技术方案。

目前，观众在抖音、西瓜视频，可线上观看“经典香港电影修复计划”已修复完成的电影，其余电影的4K修复版也将陆续上线。（一橙）

本文系本站科技报道，更多新闻资讯和深度解析，关注我们。