买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:电子科技大学
摘要:本发明公开了一种策略正则化提升探索效率的机器人控制方法,涉及机器学习技术领域。包括:构建策略网络、多个Q值网络和缓冲池;机器人使用策略网络产生动作与环境进行交互,并记录所述交互轨迹存储到缓冲池;从缓冲池中采样状态数据构建策略正则化值;根据所述缓冲池数据更新所述Q值网络和策略网络;重复策略与环境的交互并进行Q值网络和策略网络的更新至策略性能满足预设要求;根据最终的策略网络控制机器人进行任务。本发明通过构建策略正则化项去鼓励在更多的区域进行探索,进而解决强化学习中Q值被低估导致的样本探索利用效率低。
主权项:1.一种策略正则化提升探索效率的机器人控制方法,其特征在于,该方法包括:步骤1:维护策略网络、多个Q值网络和缓冲池;步骤2:机器人使用策略网络产生动作与环境进行交互,并记录所述交互轨迹存储到缓冲池;步骤3:从缓冲池中采样状态数据构建策略正则化值;步骤4:根据所述缓冲池数据更新Q值网络和策略网络;步骤5:重复策略与环境的交互并进行Q值网络和策略网络的更新至策略性能满足预设要求;步骤6:根据最终的策略网络控制机器人进行任务。
全文数据:
权利要求:
百度查询: 电子科技大学 一种策略正则化提升探索效率的机器人控制方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。