基于SAC的多智能体深度强化学习算法

由于多智能体所处环境动态变化,并且单个智能体的决策也会影响其他智能体,这使得单智能体深度强化学习算法难以在多智能体环境中保持稳定.为了适应多智能体环境,本文利用集中训练和分散执行框架Cen-tralized Training with Decentralized Execution(CTDE),对单智能体深度强化学习算法Soft Actor-Critic(SAC)进行了改进,引入智能体通信机制,构建Multi-Agent Soft Actor-Critic(MASAC)算法.MASAC中智能体共享观察信息和历史经验,有效减少了环境不稳定性对算法造成的影响.最后,本文在协同以及协同竞争混合的任务中,对MASAC算法性能进行了实验分析,结果表明MASAC相对于SAC在多智能体环境中具有更好的稳定性.     

协作OFDMA网络中公平的中继资源分配

在协作中继OFDMA(OFDMA/Relay)系统中,应用最大化最小(max-min)准则提出一种公平的OFDMA/Re-lay子载波和功率联合分配算法。该算法以最大化网络中当前速率最小用户的数据速率为目标,能够为尽力而为(besteffort)用户业务提供一致的数据速率(并满足用户业务对误码率的需求),有效地避免了饥饿现象,即与基站、中继站信道条件较差的用户业务出现数据传输速率接近于0的现象的发生。     

Ti(C,N)基金属陶瓷的组织结构与合金化

Ti(C,N)基金属陶瓷的高温红硬性、耐磨性和抗氧化性好,与金属材料间的摩擦系数低,是制作工模具和耐磨零部件的理想材料.简要介绍了合金化成分对Ti(C,N)基金属陶瓷组织结构和力学性能的影响以及多元(Ti,M)(C,N)固溶体粉末制备和金属陶瓷烧结技术的研究现状.     

基于EMSIW结构和QMSIW结构的紧凑型滤波器设计

为有效减小S波段基片集成波导SIW( Substrate Integrated Waveguide)滤波器的尺寸和插入损耗，提出了一种基于 1/4模基片集成波导QMSIW(Quarter Mode Substrate Integrated Waveguide)和1/8模基片集成波导EMSIW(Eighth Mode Substrate Integrated Waveguide)的紧凑型带通滤波器，利用EMSIW与QMSIW谐振腔体结构互补的特点，减少电磁泄露，改善插入损耗，通过设计交叉耦合，实现传输零点的引入，以改善其选择性和带外抑制水平，分别设计了四腔体EMSIW小型化带通滤波器以及EMSIW-QMSIW结构的小型化带通滤波器，其中心频率均为3.8ＧＨｚ，两滤波器的相对带宽为13.8％和8.4％，测试插入损耗均小于1.05ｄＢ，带外抑制高于60ｄＢ，传输零点数均为3，且标准化尺寸仅分别为0.24λ０×0.11λ０和0.35λ０× 0.12λ０。?     

水厂蜡样芽孢杆菌的灭活工艺研究

基于水厂芽孢杆菌及芽孢具有强耐氯性,饮用水的安全性问题存在隐患,研究了不同氧化剂、氧化剂和紫外线联用及氧化剂和陶瓷膜联用工艺对水厂原水和出水中芽孢杆菌及芽孢的灭活工艺。结果表明:NaClO、臭氧、单过硫酸氢钾复合盐均能完全灭活芽孢杆菌及芽孢,其中5mg/L的臭氧在1min的反应接触时间即可使芽孢浓度降为0,可以考虑作为水厂处理芽孢渗漏时的应急措施;此外,H_2O_2能在较短的时间内有效地灭活芽孢杆菌及芽孢,当紫外线与H_2O_2联用时,紫外线能提升H_2O_2对芽孢的灭活效果,使芽孢完全灭活;单独使用陶瓷膜时能完全滤除芽孢,当氧化剂(NaClO,H_2O_2)与陶瓷膜工艺相结合时,可以灭活并完全滤除出水中芽孢,同时降低陶瓷膜的使用负荷并延长陶瓷膜的使用寿命。     

Zr、Sc对Al-Cu-Mg-Ag-Ti合金耐蚀性能的影响

通过晶间腐蚀、慢拉伸试验和电化学测试,研究了Zr、Sc对Al-Cu-Mg-Ag-Ti多元合金耐蚀性能的影响。结果表明,添加Zr能够提高合金的耐蚀性,含Zr合金的应力腐蚀敏感因子(I_(scc))都小于不含Zr的,但Zr、Sc复合添加并没有进一步提高合金的耐蚀性。Zr能够抑制合金的再结晶,使无沉淀析出带变窄,大大提高了合金的耐蚀性能。Zr含量为0.19%时合金的综合性能最佳,晶间腐蚀深度最浅,I_(scc)最小,抗拉强度最高,其屈服强度和抗拉强度分别为466 MPa和518 MPa。     

智能控制全自动沏茶机的设计与制作

采用机电一体化的设计思路与方法，选用科学合理的机构，使该智能控制全自动沏茶机具备较高的自动化水平与模块化功能。从入水到出茶水一键解决，不但安全可靠，而且富有茶艺的美感。它顺应家电智能化的发展，适合现代人需求。     

报告基因系统HSV1-sr39tk/FIAU监测治疗基因表达的体外研究

构建HSV1-sr39tk为报告基因,以VEGF165为治疗基因的重组腺病毒载体Ad5-sr39tk-IRES-VEGF165(Ad5-SIV),将其以不同感染复数(MOI=0、10、25、50、75、100)感染大鼠骨髓间充质干细胞,用免疫激光共聚焦技术检测HSV1-sr39tk与VEGF165的表达。用酶联免疫吸附试验(ELISA)监测感染病毒后细胞培养上清中VEGF165蛋白分泌量;细胞摄取131I-FIAU实验监测HSV1-sr39tk报告基因的表达情况,以腺病毒包装增强型绿色荧光蛋白(Ad5-EGFP)为对照。结果显示:免疫共聚焦显微镜可观察到HSV1-sr39tk蛋白与VEGF165蛋白在细胞内成功表达;VEGF165蛋白分泌情况与MOI间呈线性正相关(P0.05);感染Ad5-SIV后细胞对131I-FIAU摄取率增高与MOI间呈线性正相关(P0.05)。不同时间摄取实验结果显示:30-150min间细胞摄取率迅速增高,之后增高减慢,进入平台期。MOI相关摄取结果与MOI相关ELLISA结果具有较好相关性(P0.05)。Ad5-SIV经感染后可在大鼠骨髓间充质细胞中成功表达,并且治疗基因VEGF与报告基因HSV1-sr39tk的表达呈正相关,说明可通过报告基因HSV1-sr39tk监测治疗基因VEGF165的表达,为动物水平报告基因显像提供理论支持。     

基于STM32单片机的三相交流电的相序保护的设计

针对电机保护的工作,通过对三相电相位检测技术的探索,提出了将STM32单片机控制检测的方式应用到三相交流电相序检测中,确保了三相电机安全可靠地运行。