基于值分解的多智能体深度强化学习综述

基于值分解的多智能体深度强化学习是众多多智能体深度强化学习算法中的一类,也是多智能体深度强化学习领域的一个研究热点。它利用某种约束将多智能体系统的联合动作值函数分解为个体动作值函数的某种特定组合,能够有效解决多智能体系统中的环境非稳定性和动作空间指数爆炸等问题。文中首先说明了进行值函数分解的原因;其次,介绍了多智能体深度强化学习的基本理论;接着根据是否引入其他机制以及引入机制的不同将基于值分解的多智能体深度强化学习算法分为3类：简单因子分解型、基于IGM(个体-全局-最大)原则型以及基于注意力机制型;然后按分类重点介绍了几种典型算法并对算法的优缺点进行对比分析;最后简要阐述了所提算法的应用和发展前景。     

富马酸双十二酯的合成

以富马酸和十二醇为原料,对甲苯磺酸为催化剂,合成了富马酸双十二酯。运用正交实验法考察了反应时间、反应温度、原料配比及催化剂用量对酯化的影响。     

添加表面活性剂对糠醛精制油收率的影响

在润滑油馏分糠醛精制过程中,分别微量十二烷基磺酸钠、聚醚、脂肪醇聚氧乙烯醚等表面活性剂,改善液－液界面性质,使精制油收率比未加表面活性剂时提高１．８－２．７％。     

不同干预方法对输卵管通而不畅者１８６例的疗效分析

目的 探讨不同干预方法对输卵管通而不畅者的疗效。方法 选择２００８年１月－ ２０１０年１０月经子宫输卵管造影证实为输卵管通而不畅１８６例患者。根据患者同意选择的治疗方法的不同分为Ａ、Ｂ两组,Ａ组（非介入治疗组）７８例,干预方法包括通水、灌肠、中药、理疗、腹腔镜等;Ｂ组（选择性输卵管插管疏通治疗组）１０８例。观察两组患者治疗后６个月内受孕率及６个月后复查输卵管堵塞情况。逐一记录追踪结果,并进行统计学处理,计数资料采用卡方检验。结果 ６个月后Ａ组受孕１０例,受孕率 １２．８２％,未孕者６个月复查造影２８例４８条输卵管不同程度堵塞,堵塞率３１．５８％;Ｂ组６个月后受孕６３例,受孕率５８．３３％,未孕者６个月后复查造影１例１条输卵管间质部堵塞,堵塞率０．４７％。两组比较,受孕率及堵塞率差异有统计学意义（Ｐ ＜ ０．０５）。结论　　　治疗输卵管通而不畅,Ｂ组治疗效果明显优于Ａ组,Ｂ组干预方法,值得临床推广。输卵管通而不畅者需积极干预,合理治疗。