老电影承载着往昔时光,然而岁月流转,画面逐渐变得朦胧。如今,字节跳动借助AIGC视觉大模型,让这些老电影焕发新生,修复质量和速度都得到了大幅提高。那么,这背后究竟有何高招?
修复效果提升
王悦是字节跳动视频架构部门的主管,她指出,视觉大模型具备卓越的创造力和众多先验知识。在“经典影像修复计划”项目中,火山引擎团队将传统技术同AI算法相结合,显著提升了修复质量。那些原本模糊不清的战争影像,经过修复处理,人物的动作和场景的细节都变得格外分明。这样一来,工作效率显著提升。过去可能需要数月才能完成的工作,现在仅需几周即可完成。
AIGC 模型应用
火山引擎多媒体实验室敢于突破,首次将AIGC视觉大模型“Stable Diffusion”用于老电影的修复。这项逐帧修复的视频技术,源自图像修复领域,它可以将老旧视频画质提升到高清水平,或者进一步提高其清晰度。以80年代的一部香港电影为例,运用此模型后,画面质感显著提升,从模糊变得清晰且细腻,让人仿佛置身于那个经典的时代。
老港片修复难题
老港片题材的电影场景往往比较单调,而且其退化情况复杂多变,难以预料。这就使得构建一个专门的数据集变得非常困难。所以,我们需要找到一种能够吸收大量先验知识的生成模型。不过,使用现成的开源大模型Stable Diffusion来修复旧香港电影时,常常会遇到制作出虚假画面以及处理连续视频效果不稳定的麻烦。这些问题直接对修复影片的画质和播放流畅性产生了不利影响。
模型优化之道
针对这些问题,我们团队采取了有针对性的措施进行改进。在生成能力上,我们对扩散模型策略进行了优化,显著减少了生成伪影等问题。在视频处理领域,我们对连续视频序列的处理进行了加强,保证了效果的稳定性。以一段连续打斗场景为例,经过处理后,画面不再闪烁,假纹理消失,变得流畅自然。
常见问题攻坚
火山引擎在处理老片修复时,针对画质、流畅度、色彩以及瑕疵等问题,运用了成熟的AI技术。特别是在色彩处理上,它构建了一套完整的算法体系。对于诸如老式爱情片等类型的影片,它能有效解决褪色和色彩偏差的问题。运用色彩增强和SDR转HDR等技术,影片色彩变得更加丰富多彩,情感氛围也因此得到加强。此外,它运用质量检测算法对校正矩阵进行优化处理,目的是为了保证色彩校正的效果既稳定又可靠。
技术开放服务
AI修复过程颇为繁复,但现在,借助火山引擎的“智能处理”特性,这项技术已对内外客户全面开放。即便是普通企业,也能借此机会参与老旧影片的修复,让观众享受到更多4K超高清的影视作品。或许在不久的将来,我们甚至能在家里修复自己的老视频,留住那些清晰美好的回忆。
大家对AIGC视觉大模型在老电影修复方面的运用有何看法?你觉得它将来还能在哪些行业派上用场?欢迎在评论区分享你的观点。别忘了点赞和转发这篇文章!