重庆邮电大学雷建军获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉重庆邮电大学申请的专利一种基于深度强化学习的物联网路由优化方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116033513B 。
龙图腾网通过国家知识产权局官网在2025-08-29发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202310055487.2,技术领域涉及:H04W40/02;该发明授权一种基于深度强化学习的物联网路由优化方法是由雷建军;刘捷;谭德望;周盈设计研发完成,并于2023-01-17向国家知识产权局提交的专利申请。
本一种基于深度强化学习的物联网路由优化方法在说明书摘要公布了:本发明属于无线网络通信技术领域,具体涉及一种基于深度强化学习的物联网路由优化方法;该方法包括:将汇聚节点和普通传感器节点组网,构建DODAG;进入数据传输阶段,传感器节点进行数据包收发操作;数据传输阶段结束后,唤醒Trickle定时器重置DIO间隔;进入路由优化阶段,所有节点根据DIO间隔广播DIO控制消息;传感器节点从汇聚节点下载最新模型参数;根据最新模型参数和邻居传感器节点的DIO控制消息进行路由选择并生成经验信息;汇聚节点根据经验对DuelingDQN模型进行训练,更新模型参数;路由优化阶段结束后,冻结Trickle定时器;本发明可以提升网络的负载平衡,生命周期以及可靠性等各项性能。
本发明授权一种基于深度强化学习的物联网路由优化方法在权利要求书中公布了:1.一种基于深度强化学习的物联网路由优化方法,其特征在于,包括: S1:将汇聚节点作为根节点,普通传感器节点作为子孙节点以树形结构进行组网,构建DODAG; S2:进入数据传输阶段,传感器节点进行数据包收发操作;数据传输阶段结束后,唤醒Trickle定时器重置DIO间隔; S3:进入路由优化阶段,所有节点根据DIO间隔广播DIO控制消息; S4:传感器节点从汇聚节点下载最新模型参数;根据最新模型参数和邻居传感器节点的DIO控制消息进行路由选择并生成经验信息;将经验信息上传至汇聚节点;进行路由选择并生成经验信息的过程包括: S41:根据邻居传感器节点的DIO控制消息获取路由度量信息并根据路由度量信息构建状态矩阵;构建状态矩阵的过程包括:根据DIO控制消息获取邻居传感器节点的路由度量,包括ETX、HC、RE和QLR;根据路由度量在候选父节点中找出最高RE值的k个节点生成状态矩阵,若候选父节点数小于k,则将全部候选节点填入状态矩阵,余下条目用0填充;其中,矩阵大小为4行k列; S42:根据最新模型参数和状态矩阵计算动作a,根据动作a进行路由选择并切换父节点;所述动作a由本地路由模块输入状态矩阵计算得出,表示数据传输阶段选择a值在状态矩阵中对应的节点作为父节点进行数据转发;其中a∈ [0,k-1],k表示状态矩阵列数; S43:根据动作a和父节点的路由度量信息计算奖励值;计算奖励值的公式为: 其中,r表示奖励值,RankNi表示节点i的rank值;m表示节点的候选父节点个数; rank值的计算公式为: RankNi=Rankp+ω1QUp+ω2ECRp 其中,Rankp表示节点i的父节点p的rank值,QUp表示父节点p的队列利用率,ECRp表示父节点能量消耗率,ω1表示第一权重,ω2表示第二权重; S44:根据状态矩阵、动作a和奖励值生成经验信息; S5:汇聚节点根据经验对DuelingDQN模型进行训练,更新模型参数; S6:路由优化阶段结束后,冻结Trickle定时器; S7:返回步骤S2,进行下一次路由选择周期,直到网络停止运行。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人重庆邮电大学,其通讯地址为:400065 重庆市南岸区南山街道崇文路2号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。