标题:基于通道隐式对齐的视频超分辨率方法 作者:李迪 冯迎宾 作者单位:沈阳理工大学自动化与电气工程学院,辽宁 沈阳 110159 关键字:视频超分辨率;深度学习;多帧自注意力机制;隐式帧对齐 摘要:视频超分辨率(VSR)任务由于引入了时间维度的信息,需要利用相邻帧之间的高相关性来重建当前帧,如何对齐相邻帧并提取帧间的高相关性信息,是VSR任务的难点。针对上述问题,提出了一种基于通道隐式对齐的VSR模型。首先,引入多帧密集注意力结构提取低分辨率视频帧(LR)的深层特征。其次,通过隐式对齐的方法来估计视频帧间的相似性,并融入CA模块来增强特征的表达。最后,在重建特征聚合时融入初始视频帧的像素信息,赋予图像丰富的特征细节。实验结果表明,该方法可以更好地利用连续帧间的特征信息来恢复高频信息,在公开数据集上有着良好的表现。 |