AI助力经典老电影修复:抖音火山引擎打造全新视效体验

火山引擎10mos agoupdate lida
73 0 0

文章主题:香港电影, 4K修复, AI技术

666ChatGPT办公新姿势,助力做AI时代先行者!

在8月16日,北京的一场盛事中,抖音、中国电影资料馆以及火山引擎联合举办了一场名为“再续时光-经典香港电影修复发布会”的活动。这一活动对外宣布了一个重大消息:他们将会对我国百部珍贵的香港经典老电影进行4K修复,目的是为了恢复这些电影的原始风貌,呈现其独特的韵味和风华。火山引擎为此项计划提供了强大的技术支持,而中国电影资料馆则与火山引擎一同,运用AI技术对这些电影进行了深度修复。目前,首批完成4K精修的影片已经问世,其中包括《武状元苏乞儿》、《A计划》以及《蜀山·新蜀山剑侠》等经典之作。

火山引擎成功地将其先进的视觉大模型技术运用于老片修复领域,通过充分利用该模型的强大生成能力与丰富的先验知识,实现了对修复成果在清晰度、色彩、流畅度和瑕疵消除等多方面的全面提升。这一突破性进展展示了人工智能在影视领域的广泛应用潜力,并为老片修复技术注入了新的活力。

大模型首次用于影视修复

在众多资料中,我们发现电影修复的过程既复杂又繁琐,一位富有经验的修复师至少需要一个月的时间才能完成一项任务。然而,近年来,随着深度学习和人工智能等先进技术的不断发展,老电影的修复工作正逐渐变得更加高效和精准。

作为一名具备专业水准的文章写作高手,我会将原文进行重新组织,使其表达更为精准且具有深度。火山引擎视频云技术架构总监王悦表示,老影片在清晰度、流畅度、色彩真实度和画面完美度等方面存在的问题,在抖音的海量投稿中非常常见。借助于服务抖音的经验,火山引擎已经在老片修复领域 develop 出一种相对完善的智能处理技术方案。该方案曾与西瓜视频和抖音联手,成功完成了100部我国经典动画以及Beyond经典演唱会的4K修复工作。

王悦阐述了一种新颖的技术应用,该技术首次成功地融入了大型模型领域,被运用于老片修复任务。她指出,这种方法具有两大优势。首先,大型模型的生成能力相当强大,其修复成果远超传统的算法,且画面细节更为自然流畅。其次,大型模型具备卓越的信息结构化能力,当其学习大量数据后,可以从中挖掘出丰富的知识,并将这些知识“存储”在模型参数中。这使得大型模型的生成空间更为广阔,从而能够应对更多复杂的修复场景。

举个例子,当大量狗狗照片涌入视野时,大型人工智能模型能够从中吸取知识,深刻理解狗的形态特征,进而更栩栩如生地描绘出狗的轮廓。这是王悦所阐述的观点。

但大模型强大的生成能力也是一把双刃剑,其表现在一些场景下并不稳定,容易生成伪影或者虚假纹理等;以 Stable Diffusion 为代表的视觉大模型本身大多是基于图片或者单帧的算法,在视频这种多帧序列的场景下也存在效果和稳定性的问题。

为了应对老旧电影修复中那些特殊场景,我国火山引擎多媒体实验室对视觉大模型进行了深度的算法优化,从三个方面进行了改进:首先,在图像生成的环节,该实验室通过精细调控模型的边界条件,并着力强化高质量空间的生成,从而大幅度提升了大模型的图像输出质量。其次,在视频场景的处理上,实验室采用了设计时域的自编码器、光流特征对齐以及时域条件约束等技术,使得大模型在修复过程中能够充分运用前后帧的信息,进而提高了其对视频任务的处理能力。最后,火山引擎与Intel在算法和工程上进行了深度合作,成功提升了大模型在4K场景下的处理效率,同时保持了较低的算力成本。

《武状元苏乞儿》修复前后对比

算法助力经典文化传承

根据王悦的阐述,对于火山引擎多媒体实验室的工程师而言,老港片修复过程中最大的难题并非算法技术的应用,而是在保持影片原有艺术风格方面达到平衡。

中国电影资料馆在许多影片修复过程中,一直努力邀请 original 主创人员进入修复实验室。中国电影资料馆副馆长张小光指出,在最近进行的 4K 修复《武状元苏乞儿》项目中,便得到了著名导演陈嘉上的艺术指导。

在这一过程中,火山引擎和中国电影资料馆进行了多轮沟通和讨论,经过不断的测试和反复的调优,才达到算法服务于艺术的理想效果。以色偏和色彩的处理为例,此前的 AI 算法能够完成和优化一系列客观上色彩的问题,但对于部分艺术色彩上的还原容易产生偏差,火山引擎此次摸索了一种 AI 加速艺术修复的方案,能通过学习人工修复片段的数据获得更理想的色彩方案效果,从而加速修复进程。

” 我们在不断思考,怎么让过去的老片焕发新生。” 王悦表示,” 利用大模型算法进一步提升老片的修复质量,无论是从技术实践还是从文化传承的角度来看,都是一次有意义的尝试。”

抖音副总裁陈都烨介绍,未来一年,《喋血双雄》《阿郎的故事》等 100 部香港电影的 4K 修复版,也将陆续在抖音、西瓜视频上线。

这 100 部香港电影制作时间集中在上世纪 70 年代到 90 年代,涵盖陈嘉上、徐克、成龙、关锦鹏、周星驰等多位导演作品。中国电影资料馆的电影策展人沙丹表示,这个时段正是香港电影的黄金时代。彼时内地正逐渐走向开放,香港电影成为很多内地青年了解世界的窗口。

受限于早期拍摄的设备技术以及胶片存放使用过程中造成的损伤,记忆中的老港片虽然情节鲜活,画面却模糊、昏暗、不清晰。对于习惯了高清视频的观众来说,重温经典的观影体验并不友好。

” 我们希望通过技术手段让现在的年轻人也能喜欢上过去的经典,老的观众可以重温曾经的回忆,形成几代人的共同记忆。” 王悦说。(作者:张鑫)

AI助力经典老电影修复:抖音火山引擎打造全新视效体验

AI时代,拥有个人微信机器人AI助手!AI时代不落人后!

免费ChatGPT问答,办公、写作、生活好得力助手!

搜索微信号aigc666aigc999或上边扫码,即可拥有个人AI助手!

© Copyright notes

Related posts

No comments

No comments...