基于强化学习的多Agent协作研究

强化学习为多Agent之间的协作提供了鲁棒的学习方法．本文首先介绍了强化学习的原理和组成要素，其次描述了多Agent马尔可夫决策过程MMDP，并给出了Agent强化学习模型．在此基础上，对多Agent协作过程中存在的两种强化学习方式：IL(独立学习)和JAL(联合动作学习)进行了比较．最后分析了在有多个最优策略存在的情况下，协作多Agent系统常用的几种协调机制．     

二进神经网络中笛卡尔球的研究

根据两类线性可分结构笛卡尔积的概念,定义了布尔空间中笛卡尔球的概念,证明了笛卡尔球是一类线性可分结构系.此外,还对以布尔空间中任意样本Xc为中心,与Xc之间Hamming距离为1的任意个样本与Xc组成的集合进行了研究,证明了这是一类笛卡尔球.为了对笛卡尔球进行规则提取,文中还分析了笛卡尔球的逻辑意义,建立了二进神经网络中判别笛卡尔球的一般方法,描述了这种判别方法的具体步骤,并通过一个实例说明了在二进神经网络中判别笛卡尔球的过程.     

基于Submerge Frame方法的CAN-以太网网关

针对应用中对CAN-以太网网关的性能要求,提出基于隧道技术的嵌入式网关构建方案。在对以太网帧和CAN帧的结构进行分析的基础上,在不改变操作系统、网络协议,且不增加硬件成本的前提下,提出一种Submerge Frame方法对网关进行优化。通过对改变后的帧格式和服务时间的分析,证明Submerge Frame方法可以提高网络利用效率,增强系统稳定性。     

煤矿井下机车无人驾驶系统关键技术

煤矿井下机车无人驾驶系统的研发和运行,有助于降低因调度、操作失误而发生运输事故的概率并且能够减少井下作业人员的数量。与技术日趋成熟的地面汽车无人驾驶、铁路无人驾驶不同,在井下环境实施机车无人驾驶存在诸多新的挑战:例如运输大巷人车共用、巷道狭窄、光照条件不均匀,无法利用卫星定位系统,缺乏有效的通信手段等。从实现井下无人驾驶机车系统的关键问题分析入手,综述了其技术研究进展。①提出了基于信息网络与控制网络无缝结合的井下无人驾驶机车系统架构,以确保列车调度智能化、机车操控与状态采集自动化、运输监控中心与调度中心一体化,并且兼容远程遥控、自主运行等无人驾驶模式;②给出智能调度的概念,即无人驾驶系统应当在运输调度智能化的基础上实现,有效促进两个系统间的资源共享、功能协同;③详细比较分析了井下封闭环境定位技术,指出超宽带(UWB)能够有效应对亚米级的机车高精度无线定位且鲁棒性和稳定性方面性能优良,能够满足井下机车无人驾驶对定位精度的要求;④阐述了适用于井下无人驾驶的数据通信网络覆盖,重点根据实际的工程经验给出接入WLAN网络需要满足的性能指标,分析了5G新型通信网络即将带来的井下无人驾驶应用突破;⑤在机器视觉用于路况分析方面,探讨了基于轨道模型和基于图像特征的轨道线检测算法、基于深度学习神经网络的目标检测算法、基于双目测量和单目测量的目标距离估计算法、深度学习网络的轻量化技术。最后,展望了该领域的技术发展与应用前景。     

软件质量的综合评价

针对软件产品和软件开发的特点,提出了软件质量全面综合评价体系和软件质量指标评价体系以及软件质量的评价方法－三地、达标法、评分析、评级法和模糊评判法。着重论述了模糊评判法所用的指标体系、理论基础、系统模型、系统的结构和功能、指标权重的赋值过程以及实际应用等。     

基于移动Agent的多机调度方法的研究

通过将一个产品的加工过程，在多台机床中的工艺路线看作是一个Agent在多机系统中的移动过程，由移动Agent的基本特性，使得这一分布式系统的调度问题能够得到更好的解决。采用合同网协议的方式，提出单工件在多机竞争中的参数模型和单机对多工件加工中的选择参数模型，从而在网络制造中用移动Agent的来提供一种有效的调度方法。     

基于文件操作阻断的系统安全加固技术

根据监狱信息系统功能模块多、用户数量大、人员调动频繁、信息机密性高的特点,提出了一种综合访问控制模型,给出了模型的形式化描述.该模型把MAC, RBAC, TRBAC有机地结合在一起,有可控性强和授权管理方便的特点.利用该模型,设计了权限管理子系统,给出了系统中权限管理的具体实现,解决了监狱系统中复杂的访问控制问题.     

分布式控制系统的在线编程技术研究

针对目前适合分布式系统在线升级的工具非常少的问题，提出一种基于控制器局域总线的在线编程系统方案。首先，介绍方案的总体结构及工作原理，对各功能模块进行详细分析，讨论方案实现过程中的关键问题并给出解决思路。然后，重点介绍系统中对错误的检测和处理。     

基于多层复用的工控软件设计

本文根据领域的不同层次,通过领域分析,提出了基于多层复用的工控软件设计方法。首先,我们研究了工业控制系统的领域特点,从工控软件要解决的功能和算法入手,建立工控软件的标准构件库;再结合特定应用领域,提炼抽象出面向某领域的应用功能构件库;然后在此基础上抽象出某一应用领域的构架库,并以轧钢领域为例作简要说明。最后给出了基于多层复用的工控软件设计过程。     

信息家电发展概况及前景展望

1 概述1．1 信息家电起源的经济技术背景 由于电脑升温速度的趋缓,家电市场的逐步饱和,IT行业的各种厂商都在苦苦寻觅新的市场出路。1999年3月8日,比尔·盖茨在深圳宣布了“维纳斯”计划。接着,中科院北京软件工程研制中心针对微软的“维纳斯”推出了一个“女娲”计划,用中国上古传说中的女神挑战希腊女神。一时间,信息家电风起云涌,成为当今世界上最响亮的声音之一,使众多厂商寄托了无限希望。1．2 信息家电的基本概念 信息家电也叫Internet ApplianceIA,即Internet设备,将来一切和Internet联接的家电都可叫信息家电。简…