首页> 中国专利> 减少过估计的模型化强化学习机器人控制方法及系统

减少过估计的模型化强化学习机器人控制方法及系统

摘要

本发明涉及一种减少过估计的模型化强化学习机器人控制方法及系统,其包括:初始化环境和各网络参数;利用与真实环境的交互数据训练环境模型;利用策略网络πφ与训练后的环境模型交互,将交互数据存放在数据存放器Dmodel中;根据环境模型,采用Actor‑Critic方法进行策略训练,其中Critic评估方法采用带有方差惩罚项的评估方式,估计值根据权重λ进行调节;重复执行,直至收敛。本发明能解决策略退化的问题,缓解值函数的过估计问题。本发明可以广泛在机器人控制领域中应用。

著录项

  • 公开/公告号CN113419424A

    专利类型发明专利

  • 公开/公告日2021-09-21

    原文格式PDF

  • 申请/专利权人 清华大学深圳国际研究生院;

    申请/专利号CN202110757340.9

  • 发明设计人 李秀;贾若楠;

    申请日2021-07-05

  • 分类号G05B13/04(20060101);

  • 代理机构11245 北京纪凯知识产权代理有限公司;

  • 代理人孙楠

  • 地址 518071 广东省深圳市南山区丽水路2279号

  • 入库时间 2023-06-19 12:40:27

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2023-08-18

    授权

    发明专利权授予

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号