基于样本效率优化的深度强化学习方法综述

深度强化学习将深度学习的表示能力和强化学习的决策能力结合,因在复杂控制任务中效果显著而掀起研究热潮.以是否用Bellman方程为基准,将无模型深度强化学习方法分为Q值函数方法和策略梯度方法,并从模型构建方式、优化历程和方法评估等方面对两类方法分别进行了介绍.针对深度强化学习方法中样本效率低的问题进行讨论,根据两类方法的模型特性,说明了Q值函数方法过高估计问题和策略梯度方法采样无偏性约束分别是两类方法样本效率受限的主要原因.从增强探索效率和提高样本利用率两个角度,根据近年来的研究热点和趋势归纳出各类可行的优化方法,分析相关方法的优势和仍存在的问题,并对比其适用范围和优化效果.最后提出增强样本效率优化方法的通用性、探究两类方法间优化机制的迁移和提高理论完备性作为未来的研究方向.     

基于密度泛函理论的外电场下高能辐照XLPE分子结构特性研究

交联聚乙烯(XLPE)凭借其优越的电气性能、机械性能和耐热性被广泛运用于各电压等级的电力电缆中。但其故障率也在逐年提高,很大程度上影响了电力系统的安全稳定运行。交联聚乙烯的材料老化是其绝缘性能降低的主要原因,老化始于内部,分子空间电荷的改变最终影响分子结构的变化。低电场强度下,分子整体构型改变不大。对比无电场在突加电场时XLPE分子交联点处碳的原子所带正电荷,且电荷量上升。但随着场强的增加,分子体系总能量下降,ΔE_LUMO-HOMO差值也随之下降。当场强达到Field=X+200时出现拐点,交联点所带电荷突然升高,ΔE_LUMO-HOMO能隙差骤降,分子构型也扭曲变形。此时XLPE可能发生电树枝老化。当场强达到Field=X+400时,分子发生首次碳氢断键,XLPE分子可能被绝缘击穿。若场强再次增加到Field=X+800时,XLPE将会发生解裂,伴随着大量H离子及自由基的形成。此拐点对于XLPE电缆的状态评估和剩余寿命的预测有重要意义。     

输电线路电晕特性影响因素研究现状

根据气体放电理论阐述了电晕放电的机理,系统的分析了气压、湿度、温度对导线电晕起始特性的影响。     

110kV线路绝缘子串电压与电场计算分析

输电线路绝缘子的电压和电场分布对绝缘子的相关设计和运行维护非常重要.根据绝缘子串电压分布曲线和线路绝缘子实测结果可判断出绝缘子串的劣化程度、绝缘子串的绝缘性能等电气特征.主要研究玻璃绝缘子串的电压与电场的分布.在总结静电场计算方法的基础上,根据绝缘子串计算模型的特点,选择了ANSYS有限元方法进行求解.     

急倾斜“三软”不稳定厚煤层切眼掘进技术初探

通过对急倾斜“三软”不稳定厚煤层沿底掘进切眼两种施工工艺的分析比较,选取了合理的施工方法,确保了矿井安全生产。