首页 | 本学科首页   官方微博 | 高级检索  
     

基于三角剖分的小脑模型在增强学习中的应用
引用本文:孙方义,郑志强.基于三角剖分的小脑模型在增强学习中的应用[J].计算机应用,2009,29(3):871-873.
作者姓名:孙方义  郑志强
作者单位:国防科学技术大学,机电工程与自动化学院,长沙,410073
摘    要:研究了一种基于三角剖分的小脑模型的增强学习控制器设计方法,并应用于机器人足球中单机器人截球的学习控制中。该方法通过在Markov决策过程状态空间中引入基于单纯形的库恩三角化,实现基于三角剖分的线性值函数逼近,从而有效提高了增强学习控制器对连续状态空间马氏决策问题的泛化性能。针对机器人截球学习控制的仿真研究表明,采用基于三角剖分的小脑模型进行值函数逼近的增强学习控制器能够获得优于已有基于均匀编码的小脑模型方法的学习效率和泛化性能。

关 键 词:增强学习  小脑模型关节控制器  库恩三角化  Markov决策过程
收稿时间:2008-09-09
修稿时间:2008-10-22

CMAC application using triangulation in reinforcement learning
SUN Fang-yi,ZHENG Zhi-qiang.CMAC application using triangulation in reinforcement learning[J].journal of Computer Applications,2009,29(3):871-873.
Authors:SUN Fang-yi  ZHENG Zhi-qiang
Affiliation:College of Mechatronics and Automation;National University of Defense Technology;Changsha Hunan 410073;China
Abstract:A reinforcement learning controller based on CMAC neural networks using triangulation was studied and applied to the learning control of intercepting a ball in the RoboCup.By utilizing Kuhn triangulation based on simplex interpolation in the continuous state space of Markov Decision Processes(MDPs),the value functions of MDPs were approximated with linear triangulation so that the generalization ability of the CMAC-based reinforcement learning controller could be improved.Simulation results on the learning ...
Keywords:reinforcement learning  Cerebellar Model Articulation Controller(CMAC)  Kuhn triangulation  Markov decision process
本文献已被 CNKI 维普 万方数据 等数据库收录!
点击此处可从《计算机应用》浏览原始摘要信息
点击此处可从《计算机应用》下载全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号