新中国首支奥运代表团的荣耀时刻,经南理工团队修复后重现!
2024-07-28 13:19:00  来源:新江苏客户端·中国江苏网  
1
听新闻

1952年8月3日,中国奥运代表团挥舞着鲜艳的五星红旗,昂首挺胸、阔步迈入芬兰赫尔辛基奥运会闭幕式,这是五星红旗在奥运会的首次正式亮相……近期,这一幕经由南京理工大学计算机科学与工程学院科研团队AI修复以彩色画面清晰再现。

在这段1-2分钟左右的视频片段中,原先有噪声、划痕的黑白视频经过AI修复后,不仅噪声、划痕等被祛除,影像的色彩也得到了还原。“当我们刚拿到这段视频的时候,发现这个视频的质量还是非常低的。”南京理工大学计算机科学与工程学院潘金山说,团队花了近1个月的时间,运用面向视频着色的记忆深度时空特征传播方法、双向时序特征融合方法以及面向视频复原与增强的判别性扩散大模型,通过数据与知识联合驱动的方式实现经典影视的高质量修复。

“现有的视频着色方法通过爬取大量现代颜色数据对模型进行训练,导致结果偏向现代色彩。”南京理工大学计算机科学与工程学院院长唐金辉解释道:“这种方法无法还原当年的色彩。为此,我们提出了一种语义信息引导的模型训练方法,通过采集老物件、老照片等的颜色建立语料库,纠正偏差,恢复当年的色彩。另外,新中国首位奥运旗手张长禄先生也对当年的颜色做了具体的确认。”

“当时我们第一次修复的时候,出来的西服颜色是现代西服的那种藏蓝色。拿给张长禄先生看后,他告诉我们,那时候的西服应该是咖啡色的,于是我们就进行了修改。”潘金山说,“视频修复完后,张长禄先生非常感动。我们看到自己研发的技术能够解决实际问题,而且能够得到旗手本身的高度认可,都非常激动。”

除了历史影像修复外,这一技术还被用于修复一些经典影视资料。“以这张原型人物为雷锋的电影截图为例,现有的模型在着色时使用了大量的现代数据,将雷锋的帽子和衣服错误地着色为红褐色,但是我们都知道那个年代的衣服是军绿色的。为解决这一问题,我们收集了那个年代的军帽和徽章等物品的颜色,建立了一个语料库,并用它来训练模型,使其能够准确地还原当年的色彩,避免了误差。”唐金辉说。

据悉,南理工科研团队目前还在对家喻户晓的“四大名著”的经典电视剧进行修复,尤其是《西游记》。“我们拿到《西游记》的视频的时候,它的分辨率是720x576像素,我们现在可以把它修复成高清甚至是超高清的视频。”潘金山说。

“我们研究了经典影视和历史档案中常见的造成画质低的因素,如模糊、噪声和划痕等退化因素。通过分析这些因素在视频质量退化中的作用机理,我们构建了一个能够同时刻画多种退化因素的模型,并提出了数据与知识联合驱动的视频复原模型,能有效地克服现有方法在修复过程当中重要细节结构丢失的问题,显著提升了视频的质量。”潘金山表示,目前这项技术已经十分成熟,能够实现实时画面修复,在国际上处于先进水平,未来可以被广泛地应用于经典影像和历史档案等相关影像资料的修复。

新华报业·新江苏记者 国亚妮

标签:
责编:国亚妮
下一篇