Document
拖动滑块完成拼图
个人中心

预订订单
商城订单
发布专利 发布成果 人才入驻 发布商标 发布需求

请提出您的宝贵建议,有机会获取IP积分或其他奖励

投诉建议

在线咨询

联系我们

龙图腾公众号
专利交易 积分商城 国际服务 IP管家助手 科技果 科技人才 商标交易 会员权益 需求市场 关于龙图腾 更多
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 河北工业大学顾军华获国家专利权

河北工业大学顾军华获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉河北工业大学申请的专利一种基于门控小波的图片去模糊方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116797472B

龙图腾网通过国家知识产权局官网在2026-02-13发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310293003.8,技术领域涉及:G06T5/73;该发明授权一种基于门控小波的图片去模糊方法是由顾军华;李岩;陈晨;牛炳鑫设计研发完成,并于2023-03-22向国家知识产权局提交的专利申请。

一种基于门控小波的图片去模糊方法在说明书摘要公布了:本发明公开一种基于门控小波的图片去模糊方法,该方法采用生成对抗网络基本构架,设计有门控小波处理模块,并对图片的空域和频域分别进行处理,得到边缘清晰清晰可读性强的图片,获得了较好的去模糊效果。相对于使用模糊核估计方法的去模糊模型而言,本发明由于端到端的层级结构,具有较大的感受野,可以去除不均匀的运动模糊,解决了模糊核估计方法只能对整体运动方向进行建模的问题。使用GAN网络更容易保存图像中的纹理细节、创建更接近真实的图像,使得人在感官上对于生成出来的图片有更高的接受度。由于网络基于CNN进行设计,因此模型尺寸小,易于部署到嵌入式终端,推理速度也更快。

本发明授权一种基于门控小波的图片去模糊方法在权利要求书中公布了:1.一种基于门控小波的图片去模糊方法,其特征在于,该方法包括以下步骤: 步骤一:获取图像训练集将大尺寸的模糊图片与对应的清晰图片,分别分割成相同尺寸的若干小尺寸图块,得到模糊图块集与清晰图块集;对模糊图块集与清晰图块集分别进行数据增广,以扩大数据集规模,得到模糊图像训练集与清晰图像训练集; 步骤二:建立图像去模糊神经网络图像去模糊神经网络基本构架为生成对抗网络,包括一个生成器和一个判别器;生成器的输入为模糊图像,生成器对模糊图像的处理过程为:令输入的模糊图像表示为IR,首先将IR输入到生成器的Inception预训练模型中提取中间特征,得到F1、F2、F3、F4这四个不同尺度的特征图;然后将这四个特征图分别送入四个门控小波卷积模块,分别对特征图进行频域层面的学习; 在门控小波卷积模块中,首先对输入的特征图进行二维离散小波变换,经过分解得到四个子频带LL、HL、LH、HH,然后对四个子频带分别使用投影卷积,卷积核大小为1,步长为1,填充为0,通道数是输入子频带的两倍;然后将投影卷积后得到的4个张量分别沿特征维度平均分为两个尺寸相同的张量,分别记为LL1、LL2、HL1、HL2、LH1、LH2、HH1、HH2;将其中的LL2、HL2、LH2、HH2使用Sigmoid函数将值压缩至0~1,作为其对应子频带的门;再将LL1、HL1、LH1、HH1分别对应输入到第五特征学习模块M5、第六特征学习模块、第七特征学习模块、第八特征学习模块中进行特征学习,然后与对应的子频带的门进行点乘,对频域信息选择性的滤除和保留,得到四个子频带特征图,最后对其使用小波逆变换,还原到门控小波卷积模块的输入特征图的尺寸;第五特征学习模块、第六特征学习模块、第七特征学习模块、第八特征学习模块的结构相同,均由第三卷积层、第三ReLU激活函数层、第四卷积层、第四ReLU激活函数层、第五卷积层依次顺接而得,上一层的输出即为下一层的输入; 对于四个门控小波卷积模块的输出,分别使用第一特征学习模块、第二特征学习模块、第三特征学习模块、第四特征学习模块分别对不同尺度输出的特征图进行特征学习,该四个特征学习模块的结构相同,均由第一卷积层、第一ReLU激活函数层、第二卷积层和第二ReLU激活函数层依次顺接而得,上一层的输出即为下一层的输入;通过特征学习模块,将不同尺度的高维低维特征映射到一个统一的特征维度;然后对第二特征学习模块、第三特征学习模块、第四特征学习模块的输出分别对应使用第二上采样层、第三上采样层、第四上采样层进行上采样,使得这三个特征图的宽高尺寸与第一特征学习模块的输出一致,再将这三个特征图沿特征维度进行拼接,最后通过融合层的卷积操作将拼接后的特征维度映射到第一特征学习模块的输出特征图的特征维度;在融合层之后,将输出再进行上采样,还原到生成器的原输入图像大小,同时与原输入图像进行残差连接,得到最后的输出图像,也就是由模糊图像得到的修复图像; 所述判别器采用全卷积的形式,首先将输入图像通过一号卷积层、一号LeakyReLU激活函数层,将输入特征从3维映射到64维,其中一号卷积层的卷积核大小为4,步长和填充均为2,得到输入的空域图;然后将输入的空域图通过二维离散傅里叶变换将输入转换到同等大小的频域图;接着分别对输入的空域图和频域图使用第八特征学习模块和第九特征学习模块对其进行特征提取;第八特征学习模块和第九特征学习模块的结构相同,均由第六卷积层、一号归一化层、二号LeakyReLU激活函数层、第七卷积层、二号归一化层、三号LeakyReLU激活函数层、第八卷积层、三号归一化层、四号LeakyReLU激活函数层、第九卷积层依次顺接而得,输入数据首先输入到第六卷积层,上一层的输出即为下一层的输入,第九卷积层的输出即为对应特征学习模块的输出;第六卷积层、第七卷积层的卷积核大小为4,步长为2,填充为2;第八卷积层、第九卷积层的卷积核大小为4,步长为1,填充为2;输入的空域图和频域图通过第八特征学习模块和第九特征学习模块进行特征提取后,分别映射成一个N×N的特征图,再将两个特征图进行拼接,得到区域评价的组合特征图,组合特征图中的每一个值表示对原图中一个区域的评价,判别器的输出同时包含空域和频域的评价指标; 步骤三:训练图像去模糊神经网络步骤3.1对图像去模糊神经网络进行初始化,卷积层的权重初始值的设置符合均值为0、方差为0.02的正态分布;BN层的权重初始值的设置符合均值为1、方差为0.02的正态分布;初始偏置设置为0;设置迭代训练次数300代;学习率设置为0.0001; 步骤3.2将模糊图像训练集中的一个批次的模糊图像输入到初始化的生成器,该批次的每一张模糊图像在生成器内先通过Inception预训练层进行特征提取,输出4个不同大小的特征图F1、F2、F3、F4;再将每个特征图输入到门控小波卷积模块,将特征图分解为四个子带,并使用第五特征学习模块、第六特征学习模块、第七特征学习模块、第八特征学习模块对每个子带进行学习,之后使用门控矩阵对输出进行过滤,最后小波逆变换将特征图进行恢复;将经过门控小波卷积模块处理后的数据送入到第一特征学习模块、第二特征学习模块、第三特征学习模块、第四特征学习模块中,在空域对图像进行学习,之后针对不同尺寸的特征图,使用不同比例的上采样层将特征图调整到同一大小,然后在特征维度进行合并; 通过融合层将通道数融合为初始输入图像的通道数,然后通过一个上采样层将图像尺寸恢复到初始输入大小,并与初始输入图像进行相加,得到生成器输出的一张恢复图像; 步骤3.3将步骤3.2中生成器输出的一个批次的恢复图像输入到初始化的判别器中,经过判别器的多个卷积层的处理,逐渐减小图像尺寸,最后得到一个区域评价的组合特征图; 将恢复图像的区域评价的组合特征图的评价值取平均,即得恢复图像的评价值;然后将清晰图像训练集中与该批次模糊图像对应的清晰图像输入到判别器中,对其区域评价的组合特征图中的评价值取平均,即得对应的清晰图像的评价值;然后,对清晰图像和恢复图像计算梯度惩罚,具体过程为:首先生成一个取值范围为0~1的随机数a,然后将恢复图像的张量乘以1‑a,清晰图像的张量乘以a,之后再将两者融合,得到一个按照随机数比例生成的张量样本x;然后将张量样本x输入到判别器,得到判别器输出的区域评价组合特征图y;对张量样本x和区域评价组合特征图y进行求导后再计算其二范数并减1,最后取该值和0之间的最大值,即得梯度惩罚的值;清晰图像的评价值与恢复图像的评价值的差与加权重后的梯度惩罚的值相加,作为该张恢复图像的判别器的损失;根据一个批次的恢复图像的判别器的损失的均值,利用判别器的优化器进行反向梯度传播来更新一次判别器的参数,之后对判别器的优化器进行一次参数更新,判别器的参数完成一次迭代更新,一个批次的模糊图像对判别器的训练完成; 步骤3.4保持判别器的参数不变,将模糊图像训练集中的一个批次的模糊图像输入到初始化的生成器,得到生成器输出的对应的恢复图像;将该恢复图像输入到判别器中,得到恢复图像的评价值,该评价值的负数即为生成器的对抗损失;计算恢复图像与对应模糊图像的感知损失,感知损失的计算过程是使用VGG网络预训练模型分别对恢复图像以及清晰图像进行特征提取,对所得的两个特征图计算均方误差,该值即为清晰图像和恢复图像的感知损失值;一张模糊图像的生成器的损失为对抗损失与感知损失相加;根据一个批次的模糊图像的生成器的损失的均值,对生成器进行梯度的反向传播,更新一次生成器参数与学习率,一个批次的模糊图像对生成器的训练完成,至此,判别器与生成器完成了一个批次图像的训练; 步骤3.5将判别器与生成器完成上一个批次图像的训练时的参数作为下一个批次图像的训练的初始参数,不断重复步骤步骤3.2—步骤3.4的过程,直至训练完所有批次的图像,判别器与生成器完成一次迭代训练;将判别器与生成器完成上一次迭代训练时的参数作为下一次迭代训练时的初始参数,不断重复,直至迭代训练次数到达预设值,保存判别器与生成器完成最后一次迭代训练的参数,即得训练好的图像去模糊神经网络模型; 步骤四:图片去模糊处理将待处理的模糊图片的尺寸大小调整为步骤一中小尺寸图块的尺寸,然后将其输入到步骤三中训练好的图像去模糊神经网络模型,由生成器输出恢复图像,再将恢复图像还原回待处理的模糊图片的尺寸,即得去模糊图片。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人河北工业大学,其通讯地址为:300130 天津市红桥区丁字沽光荣道8号河北工业大学东院;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。