Document
拖动滑块完成拼图
个人中心

预订订单
商城订单
发布专利 发布成果 人才入驻 发布商标 发布需求

请提出您的宝贵建议,有机会获取IP积分或其他奖励

投诉建议

在线咨询

联系我们

龙图腾公众号
首页 专利交易 IP管家助手 科技果 科技人才 积分商城 国际服务 商标交易 会员权益 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 大连理工大学王世东获国家专利权

大连理工大学王世东获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉大连理工大学申请的专利一种可解释的CNN分类模型的模型剪枝方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN115906937B

龙图腾网通过国家知识产权局官网在2026-02-17发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202211390301.0,技术领域涉及:G06N3/0464;该发明授权一种可解释的CNN分类模型的模型剪枝方法是由王世东;吴国伟设计研发完成,并于2022-11-08向国家知识产权局提交的专利申请。

一种可解释的CNN分类模型的模型剪枝方法在说明书摘要公布了:本发明涉及一种可解释的CNN分类模型的模型剪枝方法,属于图像压缩领域,解决了现有深度CNN模型运算复杂度高、时间和内存消耗大以及难以在终端设备上部署的问题,且解决了现有模型剪枝算法缺乏可解释性的问题。方法包括将训练图片输入待剪枝神经网络模型,提取各卷积层的特征图矩阵;将特征图矩阵上采样到输入图片大小,再经过归一化操作,构建显著性图;将显著性图与输入图片逐元素相乘,构建加权的输入图片;将输入图片与加权图片逐元素向减,构建注意力区域遮挡图;将注意力遮挡图输入待剪枝模型,观察模型准确率的变化作为通道的重要性分数,对通道进行剪枝得到剪枝轻量化模型。本发明实现了模型的高剪枝率,提升了剪枝过程的可解释性。

本发明授权一种可解释的CNN分类模型的模型剪枝方法在权利要求书中公布了:1.一种可解释的CNN分类模型的模型剪枝方法,其特征在于,包括以下几个步骤: 1基准模型的构建:通过在预先定义的数据集上,训练预确定的深度神经网络CNN分类模型,获取基准模型;具体为:首先使用python编程语言及pytorch深度学习框架搭建预先确定的深度神经网络CNN分类模型;之后使用预先确定的训练参数在数据集上训练模型,并记录模型的准确率作为基准分数,得到基准模型; 2过滤器注意力区域遮挡图片的获取:为了评估CNN分类模型中每个过滤器在推理过程中所起到的作用,需要获取每个过滤器在输入图片中的注意力区域,然后遮挡该区域来用模拟删除过滤器对模型的影响;具体为:首先,将训练集中的某一图片输入步骤1中获得的基准模型,提取某一卷积层的特征图矩阵,以及模型对该图片的分类分数;然后,对每个特征图矩阵采取上采样操作,将矩阵放大到输入图片的大小;对上采样的图片进行归一化操作,将其元素的值限定到0‑1范围内,进而得到每个过滤器的显著性图;进一步,将得到的显著性图与输入图片逐元素相乘,得到加权的输入图片;将加权图片输入ReLU激活函数,保留加权图片中大于零的部分,得到注意力区域图;最终,通过分别将原始输入图片与得到的注意力区域图逐元素相减,得到保留原始输入图片中除某一过滤器的注意力区域外的所有信息的注意力区域遮挡图片; 3过滤器重要性分数生成:通过观察要剪枝模型的准确率变化,利用模型的前向推理过程,对该卷积层的过滤器重要性进行评估;具体为:首先将步骤2中得到的注意力区域遮挡图片,输入步骤1中获得的基准模型中,记录模型输入的每张遮挡图片的分类分数;将步骤1中记录的基准分数分别与遮挡图片的分数相减,得到对应过滤器在推理该输入图片中所起到的作用的分数;不同过滤器对不同类别图片的激活程度不同,从单张图片中计算出的分数,不能反应每个过滤器对识别所有类别图片所起到的作用;为此,从训练数据集中随机采样n张所属不同类别的图片,重复上述过程,得到每个过滤器的n个分数;进一步,对这些分数先进行求和操作,然后进行再进行归一化操作;最终得到过滤器对判别各类别图片的综合贡献度分数; 4进行剪枝:从小到大排序从步骤3得到的综合贡献度分数,所有综合贡献度分数小于预定义的剪枝阈值的过滤器均被标记为冗余部分,直接删除该与过滤器有关的全部参数;对步骤1中获得的基准模型,从输入到输出的每层卷积采取剪枝步骤,在对每层剪枝完成后,经过微调来恢复模型的泛化能力,获得轻量化模型;所述的全部参数包括卷积核的参数、邻接的批量归一化层的参数、下一卷积层的输入通道。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人大连理工大学,其通讯地址为:116024 辽宁省大连市甘井子区凌工路2号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。