美图AI视频修复新技术,速度提升10倍,过曝也能搞定

在视频制作和图像处理领域,视频的“去闪”技术一直是提升视频质量的关键。随着技术的发展,一种名为BlazeBVD的新型去闪算法应运而生,它不仅能够快速去除视频中的闪烁现象,还能保持视频内容的完整性和色彩的真实性。

BlazeBVD,全称为Blaze Blind Video Deflickering,是一种自动化的视频去闪技术。它能够在未知视频退化情况下,有效提升视频的时间一致性。这项技术的出现,为视频后期制作带来了革命性的改变。

美图AI视频修复新技术,速度提升10倍,过曝也能搞定

视频的闪烁问题通常由拍摄环境、相机硬件限制或图像处理技术引起。这些问题在视频帧之间造成了亮度或色彩的不一致性,严重影响了观看体验。因此,开发一种能够消除闪烁并保持视频内容完整性的技术显得尤为重要。

美图AI视频修复新技术,速度提升10倍,过曝也能搞定

BlazeBVD的工作原理

BlazeBVD技术的核心在于利用了经典的尺度-时间均衡(Scale-Time Equalization, STE)方法,通过对视频帧的直方图进行处理,来捕捉闪烁和局部曝光变化。这一过程包括以下几个关键步骤:

直方图辅助:BlazeBVD首先将像素值压缩成照明直方图,这些直方图能够精确捕捉闪烁和局部曝光变化。

STE滤波:通过STE方法,对照明直方图进行平滑处理,生成单一帧集合、过滤后的照明图和曝光图。

全局和局部去闪模块:BlazeBVD利用2D网络恢复受光照变化或局部曝光问题影响的纹理,并使用轻量级3D网络修正轻微的时间不一致性。

自适应时间一致性:最后,BlazeBVD通过一个轻量级时空网络处理所有帧,并通过设计自适应掩模加权变形损失来提高视频的连贯性。

通过在合成视频、真实世界视频和生成视频上的全面实验,BlazeBVD展现出了卓越的定性和定量结果。它不仅在保持视频质量的同时去除了闪烁,而且在推理速度上达到了现有技术的10倍。

BlazeBVD技术的应用前景广阔,它可以应用于视频编辑、电影后期制作、视频内容生成等多个领域。随着技术的不断进步,BlazeBVD有望成为视频处理领域的新标准。

论文地址:https://arxiv.org/html/2403.06243v1

 

声明:内容均采集自公开的网站等各类媒体平台,若收录的内容侵犯了您的权益,请联系邮箱,本站将第一时间处理。
头条资讯

中共中央:建立人工智能安全监管制度

2024-7-22 8:08:16

资讯

日本媒体警告:AI搜索引擎或将对文化造成不可逆转的影响

2024-7-22 10:09:10

搜索