基于二阶时序差分误差的双网络DQN算法

针对深度Q网络(DQN)算法因过估计导致收敛稳定性差的问题,在传统时序差分(TD)的基础上提出N阶TD误差的概念,设计基于二阶TD误差的双网络DQN算法。构造基于二阶TD误差的值函数更新公式,同时结合DQN算法建立双网络模型,得到两个同构的值函数网络分别用于表示先后两轮的值函数,协同更新网络参数,以提高DQN算法中值函数估计的稳定性。基于Open AI Gym平台的实验结果表明,在解决Mountain Car和Cart Pole问题方面,该算法较经典DQN算法具有更好的收敛稳定性。     

基于边缘计算的建筑设备状态感知模型与应用

随着智能化建筑数量的剧增与智能化水平的提高,建筑智能设备状态感知成为了关系到社会公共安全方面重要问题之一。目前,建筑设备感知系统大多基于服务器集中计算架构,存在存储数据量大、通信带宽要求高、节点自主性不够等问题,往往容易造成建筑设备感知实时性不足、网络成本高的问题。由此,提出一种基于边缘计算的建筑设备状态感知模型,设计了边缘状态感知与缓存算法,建立了一组边缘通信与状态感知协议,形成了边缘隐私数据信任与安全机制,同时,引入基于边缘数据的智能决策技术,从而不仅缓解了中心服务器的计算与存储压力,而且有效提升了整个系统的自主感知能力、安全性与健壮性。最后,依托该模型实现了一个运维示范系统,在S城市管理中进行了应用。     

基于GPRS的水产养殖水质监控系统的设计

本文结合实例介绍了基于PIC18 F452的GPRS终端的软硬件设计方法，以及在嵌入式系统中引入实时操作系统μC／OSⅡ的方法。通过该GPRS终端，利用GPRS网和Internet，实现在控制范围较广、工作环境较为恶劣的条件下的远程数据采集与控制。     

工科电类专业毕业设计教学环节的改革探讨

章阐述了毕业设计的重要作用,对当前在毕业设计教学环节中存在的主要问题进行分析,提出了改革毕业设计教学环节的新思路,并给出具体的操作方法。最后,对其实施效果进行了简单评述。     

汽修MIS(网络)生产管理系统的设计与实现

本文针对汽车修理生产管理的特点，具体阐述了生产管理系统的设计与实现方法。     

μC／OSⅡ在Microchip MCU上的移植

μC／OSⅡ是一个完整的，可移植、固化、裁减的抢占式实时多任务内核。本文着重介绍了μC／OSⅡ嵌入式操作系统内核在Microchip PIC18F452单片机上的移植方法和实时应用程序的设计方法。     

用SVG技术实现动态图形输出的嵌入式Web服务

本文结合控制系统对嵌入式Web服务器的要求,分析了嵌入式Web服务器的基本原理、动态内容实现方法,并结合实例着重介绍了基于SVG技术实现动态图形输出的方法.     

建筑电气与智能化专业多校联合毕业设计实践与研究

毕业设计对培养建筑电气与智能化专业学生综合运用所学基础理论、基本知识、基本技能解决实际问题具有十分重要的作用。联合毕业设计不仅能促进高校之间的交流，而且能夯实专业建设，扩大专业影响力。通过对建筑电气与智能化专业联合毕业设计8年实践教学模式进行分析，探讨高校与高校、高校与企业等主体与各协同体互动式实践教学模式，针对存在的问题提出相应的建议，以落实教育资源共享共用理念，推动教学相长，实现多方互惠共赢，推进协同育人多维度实践教学模式的创新。