龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：中国电子科技集团公司第二十二研究所
摘要：本发明公开了一种基于SARSAλ算法的定向天线自组网邻居发现方法，包括如下步骤：步骤1：邻居发现过程开始时，每个节点初始化自己的Q矩阵，随机选择初始状态和初始动作；步骤2：节点进入传输模式和接收模式进行相应步骤，采取不同步骤3：使用贪婪策略选择下一个时隙的动作；步骤4：计算一步预测误差；步骤5：对于所有状态和动作，根据一步预测误差更新Q矩阵；步骤6：进入下一个时隙，回到步骤2，直到邻居发现过程结束后停止。本发明所公开的自组网邻居发现方法，相比于完全随机算法，能够积累扫描中的经验，自适应地找到存在未被发现邻居的扇区，从而加快邻居的发现速度。
主权项：1.一种基于SARSAλ算法的定向天线自组网邻居发现方法，其特征在于，包括如下步骤：步骤1：邻居发现过程开始时，每个节点初始化自己的Q矩阵，随机选择初始状态s0和初始动作a0，其中s0指传输或接收模式，a0指天线波束方向；步骤2：如果节点进入传输模式，在当前时隙t内发送HELLO消息；如果节点进入接收模式，接收机监听在当前天线波束方向内的消息，如果多个HELLO消息在此处发生了碰撞，奖励是1；如果成功监听到了HELLO消息，那么成功发现了对方，奖励是0；如果没有监听到任何消息，奖励是0； 步骤3：使用ε-贪婪策略选择下一个时隙的动作at+1，at+1指天线波束方向，以ε-贪婪策略参数ε的概率随机选择动作，以1-ε的概率选择Q矩阵中在下一个状态下最大值所对应的动作 A指动作空间，步骤4：计算一步预测误差δ，δ＝r+γQst+1,at+1-Qst,at3γ指折扣因子，对于刚访问过状态的资格迹增大1，est,at＝est,at+14步骤5：对于所有状态和动作，根据一步预测误差δ更新Q矩阵，Qs,a＝Qs,a+αδes,a5α指更新步长；每个状态的资格迹以γλ的速率衰减，λ指衰减因子；es,a＝γλes,a6步骤6：进入下一个时隙，回到步骤2，直到邻居发现过程结束后停止。
全文数据：
权利要求：
百度查询： 中国电子科技集团公司第二十二研究所 一种基于SARSA(λ)算法的定向天线自组网邻居发现方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号