基于云推理模型的深度强化学习探索策略研究

强化学习通过与环境的交互学得任务的决策策略,具有自学习与在线学习的特点。但交互试错的机制也往往导致了算法的运行效率较低、收敛速度较慢。知识包含了人类经验和对事物的认知规律,利用知识引导智能体(agent)的学习,是解决上述问题的一种有效方法。该文尝试将定性规则知识引入到强化学习中,通过云推理模型对定性规则进行表示,将其作为探索策略引导智能体的动作选择,以减少智能体在状态-动作空间探索的盲目性。该文选用OpenAI Gym作为测试环境,通过在自定义的CartPole-v2中的实验,验证了提出的基于云推理模型探索策略的有效性,可以提高强化学习的学习效率,加快收敛速度。     

磁性羟基磷灰石制备的研究进展

羟基磷灰石(HAP)是一种典型的生物活性材料,已在骨外科、牙科临床等方面得到了广泛的应用。由于HAP比表面积大,吸附能力强,HAP在药物递送、污水处理等领域也得到了广泛应用。磁性纳米颗粒具有良好的电磁性能、可回收性和电磁制热性能,已受到越来越多的关注。近年来,为了结合以上两种材料的优点,将磁性材料与羟基磷灰石相结合是上述领域研究应用的重点方向。此前,有综述报道过关于磁性羟基磷灰石复合材料的制备研究,但重点关注于与其他材料的复合,缺乏针对磁性羟基磷灰石制备方法的系统总结。本文以掺杂和包覆两种将磁性引入羟基磷灰石的方式为出发点,系统总结了磁性羟基磷灰石的经典制备方法及其优缺点,并讨论了其相关应用,特别是论述了进一步研究拓展的关键问题以及今后的研究趋势,以期为磁性羟基磷灰石的深入拓展提供参考。     

深度强化学习中的知识迁移方法研究综述

深度强化学习是人工智能研究中的热点问题，随着研究的深入，其中的短板也逐渐暴露出来，如数据利用率低、泛化能力弱、探索困难、缺乏推理和表征能力等，这些问题极大地制约着深度强化学习方法在现实问题中的应用。知识迁移是解决此问题的非常有效的方法，文中从深度强化学习的视角探讨了如何使用知识迁移加速智能体训练和跨领域迁移过程，对深度强化学习中知识的存在形式及作用方式进行了分析，并按照强化学习的基本构成要素对深度强化学习中的知识迁移方法进行了分类总结，最后总结了目前深度强化学习中的知识迁移在算法、理论和应用方面存在的问题和发展方向。