首页  专利技术  电子电路装置的制造及其应用技术

一种退化参数辅助的空间自适应多帧图像复原方法

2026-08-11 10:20:01 401次浏览

技术特征:

1.一种退化参数辅助的空间自适应多帧图像复原方法,其特征在于:该方法具体步骤如下:

2.根据权利要求1所述的一种退化参数辅助的空间自适应多帧图像复原方法,其特征在于:在步骤一中,退化参数预测网络采用编码器-解码器结构,首先通过由3d卷积层、残差块和归一化层组成的特征编码器提取退化序列的特征,然后将特征在时间和通道维度上整合,最终通过解码器将整合后的特征解码为噪声强度或湍流强度的空间分布矩阵。

3.根据权利要求1所述的一种退化参数辅助的空间自适应多帧图像复原方法,其特征在于:在步骤二中,特征提取模块对退化序列进行多层下采样和深度编码,退化参数辅助重建模块作为解码器,在图像重建的过程中引入多尺度退化信息,实现从退化序列到复原序列的端到端映射;具体地,退化序列首先经过由双向循环神经网络brnn实现的特征提取器编码为密集图像特征,提取出每一帧图像特征在与前后相邻4帧的特征拼接融合后,再通过退化参数辅助重建模块、转置卷积层和残差块组成的重建器进行解码,最终输出当前目标帧图像的复原结果。

4.根据权利要求1所述的一种退化参数辅助的空间自适应多帧图像复原方法,其特征在于:在步骤三中,dpirn与退化参数预测网络并非联合训练,而是分两个阶段依次训练;第一阶段,ppn使用退化图像序列作为输入,以退化参数矩阵作为输出展开训练;第二阶段,dpirn使用退化参数预测网络学习到的退化参数矩阵进行微调;通过双阶段训练得到的退化参数矩阵预测网络和退化参数辅助的图像复原网络用于图像退化的空间自适应抑制。

5.根据权利要求1或2所述的一种退化参数辅助的空间自适应多帧图像复原方法,其特征在于:步骤一具体过程如下:

6.根据权利要求1或3所述的一种退化参数辅助的空间自适应多帧图像复原方法,其特征在于:步骤二的具体过程如下:

7.根据权利要求1或4所述的一种退化参数辅助的空间自适应多帧图像复原方法,其特征在于:步骤三的具体过程如下:

8.根据权利要求7所述的一种退化参数辅助的空间自适应多帧图像复原方法,其特征在于:l1损失函数定义为:lparam=||parampred-paramgt||1;其中,parampred为预测的退化参数矩阵,paramgt为退化参数标签,|| ||1表示l1范数。

9.根据权利要求7所述的一种退化参数辅助的空间自适应多帧图像复原方法,其特征在于:图像复原网络损失函数定义为:ls=lsmoothl1+γ·lperceptual;其中,lsmoothl1表示平滑l1损失,lperceptual表示感知损失,γ为平衡系数;平滑l1损失定义为:

10.根据权利要求7所述的一种退化参数辅助的空间自适应多帧图像复原方法,其特征在于:感知损失采用预训练的vgg网络提取的多尺度特征图之间的均方误差mse:其中,vgg3,8,15()表示提取vgg网络第3、8、15层的特征图。


技术总结
本发明提出一种退化参数辅助的空间自适应多帧图像复原方法,步骤为:步骤一:由退化参数矩阵预测网络生成图像序列对应的退化参数矩阵;退化参数预测网络接收退化图像序列,并输出其对应的退化参数矩阵;步骤二:使用退化参数辅助的多帧图像复原网络DPIRN得到复原图像;实现高质量的空间自适应图像复原;步骤三:构造损失函数,展开双阶段的训练;首先使用L<subgt;1</subgt;范数作为损失函数对退化参数预测网络进行训练,用于衡量预测的退化参数矩阵与参数标签之间的误差;其次,使用由平滑L<subgt;1</subgt;损失和感知损失组成的联合损失函数对图像复原网络进行端到端训练,其中平滑L<subgt;1</subgt;损失和感知损失分别用于衡量复原图像与参考图像在低频和高频细节上的相似度。

技术研发人员:白相志,江行舶
受保护的技术使用者:北京航空航天大学
技术研发日:
技术公布日:2024/12/2
文档序号 : 【 40201566 】

技术研发人员:白相志,江行舶
技术所有人:北京航空航天大学

备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
白相志江行舶北京航空航天大学
一种产品鉴定方法、装置、计算机设备和存储介质与流程 数据处理方法、装置、设备及存储介质与流程
相关内容