北京邮电大学;国网综合能源服务集团有限公司;国网江苏省电力有限公司苏州供电分公司;中国电子技术标准化研究院熊翱获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉北京邮电大学;国网综合能源服务集团有限公司;国网江苏省电力有限公司苏州供电分公司;中国电子技术标准化研究院申请的专利一种基于深度强化学习的边缘协作缓存方法及装置获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN115622998B 。
龙图腾网通过国家知识产权局官网在2025-08-05发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202210824585.3,技术领域涉及:H04L67/10;该发明授权一种基于深度强化学习的边缘协作缓存方法及装置是由熊翱;刘雨潇;李娜;廖双乐;景栋盛;周游;张群;马珊珊设计研发完成,并于2022-07-14向国家知识产权局提交的专利申请。
本一种基于深度强化学习的边缘协作缓存方法及装置在说明书摘要公布了:本发明提供一种基于深度强化学习的边缘协作缓存方法及装置,所述方法的步骤包括:边缘节点基于数据请求调用数据,划分为多个数据块,并进行标记;构建第一状态向量,输入门循环单元中,得到第一隐藏状态向量,输入到边缘节点预训练的目标网络中,输出第一动作;基于第一动作更改边缘节点内保存的数据块,并基于变更数据块的边缘节点和另一个调用的数据块构建第二状态向量,进一步基于门循环单元得到第二隐藏状态向量;将第二隐藏状态向量输入到中心节点的价值网络中,得到估计动作,输出估计动作对应的估计值,基于估计值计算目标值;基于目标值计算得到损失函数值,更新价值网络中的网络参数,将价值网络中的网络参数同步至的目标网络。
本发明授权一种基于深度强化学习的边缘协作缓存方法及装置在权利要求书中公布了:1.一种基于深度强化学习的边缘协作缓存方法,其特征在于,所述方法应用于分布式系统,所述分布式系统包括中心节点和多个边缘节点,所述方法的步骤包括: 边缘节点接收终端设备的数据请求,基于数据请求为终端设备调用数据,基于数据大小将数据划分为多个数据块,并对每个数据块进行标记; 基于当前边缘节点内保存的数据块和其中一个调用的数据块构建第一状态向量,将第一状态向量输入门循环单元中,得到第一隐藏状态向量,将所述第一隐藏状态向量输入到边缘节点预训练的目标网络中,输出第一动作,门循环单元为GRU; 基于第一动作更改边缘节点内保存的数据块,并基于变更数据块的边缘节点和另一个调用的数据块构建第二状态向量,进一步基于门循环单元得到第二隐藏状态向量; 将第二隐藏状态向量输入到中心节点的价值网络中,得到估计动作,输出估计动作对应的估计值,基于估计值计算目标值,所述目标网络和价值网络均采用对决网络结构; 基于目标值计算得到损失函数值,基于损失函数值更新价值网络中的网络参数,将价值网络中的网络参数同步至每个边缘节点的目标网络。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人北京邮电大学;国网综合能源服务集团有限公司;国网江苏省电力有限公司苏州供电分公司;中国电子技术标准化研究院,其通讯地址为:100876 北京市海淀区西土城路10号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。