Practical Issues in Temporal Difference Learning

This paper examines whether temporal difference methods for training connectionist networks, such as Sutton's TD() algorithm, can be successfully applied to complex real-world problems. A number of important practical issues are identified and discussed from a general theoretical perspective. These practical issues are then examined in the context of a case study in which TD() is applied to learning the game of backgammon from the outcome of self-play. This is apparently the first application of this algorithm to a complex non-trivial task. It is found that, with zero knowledge built in, the network is able to learn from scratch to play the entire game at a fairly strong intermediate level of performance, which is clearly better than conventional commercial programs, and which in fact surpasses comparable networks trained on a massive human expert data set. This indicates that TD learning may work better in practice than one would expect based on current theory, and it suggests that further analysis of TD methods, as well as applications in other complex domains, may be worth investigating.     

一种简化的三维模糊制器

针对三维模糊控制器规则多,结构复杂,难以实现的问题,提出了一种简化的三维模糊控制器。该方法是把三个输入量分别为偏差、偏差变化、偏差的偏差变化的一维模糊控制器加权融合实现简化的三维模糊控制器。并提出了根据不同类型的被控对象设置三个加权系数。加权系数具有粗调、细调和微调的作用,类似于传统PID调节器的比例、积分和微分,实现对系统静差的消除。     

Weber定律下尺度空间的自适应构建

在Weber定律的启发下提出一种基于"恰可识别差异"的尺度空间自适应构建方法。Weber定律认为人类感知模式不仅与刺激的变化有关,而且与原刺激强度有关。基于此观点,在图像尺度空间的构建过程中,首先以Marr视觉理论的屋脊型边缘和阶梯型边缘的特征之和计算图像的信息量,再通过实验获得人类视觉能感知到"恰可识别差异"时的图像信息量变化,最后通过曲线拟合自适应构建图像的尺度空间。实验结果表明,该方法充分体现了人类视觉感知特性,与其他尺度空间构建方法相比,在目标匹配实验中,匹配数目提升了25%以上;在去噪实验中,本算法的去噪效果良好。     

人群头发元素分布及某些特征研究

本文介绍用堆中子活化分析法测定人群头发中I、Br、Mg、Mn、Cu、Na、V、Cl、Al、Ca、S等11种元素。研究人发中元素分布特征、相关性特征、性别年令分布特征。方法学中还从法庭科学应用角度介绍同一性识别中差异率和重合几率的双判据方法。     

两种Ni-Cr-Co基高温合金的凝固偏析及其对Rayleigh数的影响

利用SEM和EDAX研究了2种Ni-Cr-Co基高温合金GH742和GH738凝固过程中组织、液相成分变化,用图像分析软件测定了各温度下的液相分数,并计算了2种合金凝固过程中液相密度差和相对Rayleigh数变化。结果表明,GH742凝固过程中主要是Cr、Co和Nb的偏析,GH738合金凝固过程中主要是Cr、Co和Ti的偏析;GH742和GH738合金凝固过程中都存在着液相密度反转,后者密度差的绝对值较大;GH738合金相对Rayleigh数绝对值的最大值是GH742的3.5倍,凝固时更易形成黑斑。     

3Cr2MnNiMo钢大型模块的预硬化处理

本文试验研究了八种淬火冷却方式和四种回火工艺对3Cr2MnNiMo钢预硬化处理后的硬度的影响，在所得的试验数据的基础上，分析估计了3Cr2MnNiMo钢大模块硬化后的表心硬度差，该差值与工业生产结果大致相吻合。     

一种消除小直径管道焊接应力技术的数值分析

小直径管道的应力腐蚀问题一直是工程界较难解决的问题，作者针对这一难题，提出了一种新型的消除应力方法——温差形变处理技术。利用MSC．Marc大型通用非线性有限元分析软件，对小直径管道环缝焊接接头的原始残余应力及温差形变法消除残余应力进行了有限元模拟，得到了一系列关于加热位置、加热宽度和加热持续时间的数据和规律。结果表明，采用温差形变处理技术，在内外表面的焊缝处都可以得到零值左右的残余应力，从而为进一步的试验分析工作和工程应用奠定了基础。     

中亚国家电解铝厂总图布置的特点

通过对中亚国家电解铝厂的设计,并与国内同类项目进行比较,指出因社会、自然环境、人文环境和管理体制的不同,而致使总图设计方案有较大的差异,针对这些差异,提出了改进的措施及应注意的问题,可供国内同行参考。     

钛合金断裂韧性与屈强差的关系初探

研究了近α型TA15，α β型Ti6Al4V及亚稳定β型TB83种钛合金断裂韧性与屈服强度、强度极限的关系，提出了屈强差的概念。结果表明：屈强差增大，断裂韧性增加，且对Ti6Al4V和TB8两者之间有线性关系；β热变形或β热处理是提高屈强差和断裂韧性的有效方法。     

基于有限差分网格的发动机缸体铸件热应力模拟

对发动机气缸体铸件从浇注完到开箱落砂后的铸造过程应力场进行计算机数值模拟.为了实现形状复杂铸件的热应力分析,应用了有限差分网格向有限元网格的转换方法,得到缸体的有限元模型,并将该模型与经过大量简化后直接剖分得到的有限元模型进行了比较.在此有限元模型的基础上,采用FDM/FEM集成铸件热应力分析系统实现了对发动机缸体铸件热应力分析,模拟结果和实际生产情况相吻合.