公开资料显示,电影修复工艺繁杂琐碎,一位经验丰富的修复师需要1个月才可以修复完成一部影片。近些年,通过深度学习等AI技术,大幅提升老片修复的质量和效率成为可能。
随着修复工作的深入,火山引擎多媒体实验室通过引入自适应特征加权模块、无监督学习与有监督学习相结合、文字语义先验等训练手段,对视觉大模型进一步的调优,在极低画质人像重建、褪色胶片颜色调整和文字缺失笔画生成等几个方面取得了较好效果。
与此同时,解决老片修复中的各项实际问题,也为火山引擎多媒体实验室的学术研究提供了价值。在计算机视觉顶级会议CVPR 2024中,火山引擎多媒体实验室一举夺得了NTIRE( 图像恢复与增强的新趋势New Trends in Image Restoration and Enhancement)赛道的冠军,其夺冠方案是基于提示学习(Prompt Learning)的图像增强恢复,主要解决的问题,就是修复类似于老片中大量存在的不可预知的复杂损害(未知复杂退化)。
“老片修复这件事情,其实我们每天都在做。”王悦说,老片中常见的清晰度低、流畅度低、色彩失真、有瑕疵等画质问题,在抖音的海量投稿里也广泛存在。通过服务抖音,火山引擎在老片修复方面已经形成了一套较为完整的智能处理技术方案。
火山引擎是字节跳动旗下的云服务平台,曾分别携手西瓜视频和抖音,完成100部国产经典动画和Beyond经典演唱会的4K修复。
“一方面,大模型生成能力强,借助Stable Diffusion大模型的生成能力,修复效果优于之前的算法,画面细节更自然;另一方面,大模型具有非常强的信息结构化能力,在学习了海量数据对后,可以在其中提炼出大量的知识并‘存储’在模型参数之中,其生成空间更丰富,能够应对更多的修复场景。”火山引擎视频云技术架构总监王悦介绍。
老港片承载着许多观众的青春记忆,成龙在《A计划》中的精湛演技与惊险动作场面,以及许冠文在《卖身契》中幽默诙谐的表演,都曾给观众带来无数惊喜,伴随修复技术的提升,这些旧时光里的经典将重新焕发生机。
在《A计划》的映前活动环节,曾任成龙中国副总裁的资深电影制片人孙嵘现场与影迷分享,成龙此前认为《飞鹰计划》里隧道的光不够亮,“经典香港电影修复计划”团队根据意见调整,弥补了他当年创作的遗憾。
在“经典香港电影修复计划”中,火山引擎首次将AIGC技术应用于老片修复场景,借助视觉大模型强大的生成能力和丰富的先验知识,实现修复效果在清晰度、色彩、流畅度和瑕疵消除等方面的全方位提升。
波盘王爆料前足球推荐4月18日,第十四届北京国际电影节正式开幕。由中国电影资料馆、抖音和火山引擎联合4K修复版的港片《A 计划》与《卖身契》入选“致敬·修复”单元,并于4月18日、19日进行放映。
《A计划》《卖身契》分别上映于1983、1978年,距今已四十多年。2023年8月,中国电影资料馆、抖音和火山引擎共同发起了“经典香港电影修复计划”,宣布将4K修复100部香港电影。此次放映的这两部影片就来自上述项目,影片的原始拍摄底片在香港完成4K规格扫描,整个修复流程包括中国电影资料馆的物理和数字修复,火山引擎的AI技术修复,以及双方合作的艺术修复等环节。
为保持“修旧如旧”的原片胶片质感,技术团队在提升受损图像纹理的平滑度、夜景噪声去除等效果的同时,还特意研发了自适应质感增强方案,添加模拟胶片噪声的颗粒。
香港城市大学计算机系助理教授马柯德表示,当前人工智能技术的快速发展显现出巨大的潜力,未来不仅一些老电影中音画不同步的问题将借由AIGC得到更有效的解决,甚至有望让AI学会自动评判修复效果。
目前,火山引擎已针对视觉大模型在一些场景下容易生成伪影或者虚假纹理,以及视频多帧场景的稳定性等问题,在算法和工程上进行了一系列优化,提升了大模型在4K场景下的处理效率并兼顾算力成本。
波盘王爆料前足球推荐在哪下载安装?波盘王爆料前足球推荐好用吗?
作者: 敦化 ♄
网友评论更多
94磐石w
防汛减灾进行时,麦克传感助力城市供排水监...☴☵
2024-11-26 19:24:25 推荐
187****9419 回复 184****9199:媒体对话:以创新为引擎,推动人工智能时代...☶来自公主岭
187****9616 回复 184****4654:国家先进计算太原中心:打造汽车工业仿真全...☷来自双辽
157****4897:按最下面的历史版本☸☹来自梅河口
33集安112
新质生产力引领能源转型,思谋智能读码器助...☺☻
2024-11-28 12:20:56 推荐
永久VIP:水库动态监管系统 小型水库安全监测能力提...☼来自洮南
158****7871:活动回顾 | 苏州源控携手英特尔,共推边缘A...☽来自大安
158****4178 回复 666☾:杰和科技丨支持PCIe5.0,杰和科技B760主板I...☿来自临江
80延吉ba
翻倍带宽 超高频率|杰和科技全新英特尔B760...♀♁
2024-11-26 04:24:50 不推荐
图们yg:谁是窄道应用最优解?♂
186****2696 回复 159****3614:运行稳定无抖动,大族协作机器人助力电池托...♃