面向DNS日志的MapReduce性能优化技术研究

DNS日志是互联网中重要的访问日志,数量巨大且承载着大量信息,需要借助大数据技术进行处理和分析.现网DNS日志数据量大,且数据倾斜现象严重,对MapReduce的性能有较为严重的影响.基于上述问题,采用小文件合并方法优化分片,缓解Map端的数据倾斜问题,并实现动态设置分片大小,提高MapReduce作业执行效率.该方法有效均衡了Map任务的负载,从而提高了数据倾斜情况下的MapReduce作业的执行效率和资源利用率.实验表明,使用该方法可以有效缩短MapReduce作业的执行时间.     

基于社区发现的多主体信任评估

为了解决多主体系统(MAS)的开放性、动态性和不确定性所带来的主体信任问题,提出一种基于社区发现的信任评估方法。首先使用G-N算法(GIRVAN M, NEWMAN M E J. Community structure in social and biological networks. Proceedings of the National Academy of Sciences of the United States of America, 2002, 99(12):7821-7826)发现系统中的社区结构;然后根据推荐主体的推荐信任分别计算被评估主体的社区内部、外部声誉,进而结合直接信任形成主体的综合信任度;最后根据协作反馈实现主体信任度的动态调整。仿真实验结果表明,基于社区发现的信任评估方法能有效评估主体信任度,通过引入反馈机制能进一步提高交互成功率。     

2.4米跨声速风洞FSS控制系统研制

为了解决原FSS机构存在的可靠性不高、响应慢、异步电机驱动力不够等问题,在消化、吸收原有机构特点的基础上,研制了新的FSS机构.其中,控制系统采用上、下位机的形式,构建了基于DP总线的运动控制系统,使用PLCopen技术控制伺服电机.应用结果表明:改造后的控制系统设计合理,系统稳定可靠,能够较好地控制模型姿态,控制规律与改造前基本一致,控制效果优于原控制系统,取得了满意的效果.     

基于机器学习的僵尸网络DGA域名检测系统设计与实现

僵尸网络广泛采用域名生成算法（Domain Generation Algorithm,DGA）生成大量的随机域名来躲避检测。针对僵尸网络DGA域名问题,本文设计实现了一种DGA域名检测系统。首先使用基于随机森林算法的轻量级分类分析检测模块,通过分析域名字符特征区分正常域名与疑似恶意域名,满足现网实际应用中快速检测的要求;然后使用基于X-means算法的聚类分析检测模块,在分类分析检测的基础上,根据DGA域名的字符相似性和查询行为相似性,通过聚类和集合分析方法对疑似恶意域名进一步检测,降低系统误检率。通过部署基于Spark的检测系统对某运营商现网真实DNS日志数据进行连续20天的处理和分析,检测系统平均每天挖掘出约250万DGA域名,经过正则匹配分析,其中约55%属于5类已知的DGA;在前两个实验日,共发现13,000个已知DGA域名分属于3个DGA类别。实验结果表明检测系统可有效检测出多种DGA域名,此外,检测系统也可满足现网实际应用中快速检测的要求。     

广东省“九五”电力发展的目标和措施

广东省“九五”电力发展的目标和措施太原市技术经济研究中心杨兴华广东省为了加快电力工业的发展，进一步推动电力体制的改革，最近制定并公布了《＂九五＂期间广东省电力发展目标与措施》。＂九五＂期间，广东省电力体制改革以适应经济发展为原则。按照国家电力体制改革...     

采用无桥拓扑的部分有源PFC的分析与实现

传统的单相有源功率因数校正器(PFC),使用的功率器件较多,因此具有效率较低和成本较高等不足。鉴于此,提出了一种采用无桥PFC功率模块和部分PFC技术的新型单相PFC方案,在分析部分PFC的原理基础上,通过MCU软件编程给予实现。实验结果表明,该新型单相PFC方案具有校正效果良好,控制简单,成本低等优点,同时EMI得到了抑制,效率提高了2~3%。     

Fe_2O_3、Al_2O_3加入物对镁钙砂抗水化性的影响

以菱镁矿、白云石为原料,采用一步法合成了镁钙砂。合成砂的MgO为78％,CaO＞18％。重点讨论了添加Fe2O3、Al2O3对合成砂抗水化性的影响。结果表明,这两种添加剂均可以促进MgO、CaO的晶体发育,改善烧结体的显微结构,提高MgO－CaO系材料的抗水化性。     

石碌铁矿露天转地下协同开采的实践

为了解决石碌铁矿露天转地下开采过程中稳定生产、采场地压管理、采场防汛抗洪等问题,矿山采用自然崩落和回填覆盖岩层来管理地压、采取“截、疏、挡、排、防”的措施治理矿井涌水,实施露天与地下协同开采,有效地防止了涌水对采矿生产的影响、保证了原矿产量的平稳过渡。     

双溢流管旋流器分离性能的数值模拟与试验研究

针对普通溢流管旋流器难以得到细粒径、窄粒级产品等难题,提出一种双溢流管旋流器,利用CFD数值模拟软件,对比分析普通旋流器和双溢流管旋流器内部流场和分离性能。模拟结果表明:双溢流管旋流器内流体的切向速度增大,轴向速度和径向速度减小,分离得到的内溢流产品明显细于普通溢流。试验结果表明,对中位粒径为39.8μm的进料,经双溢流管旋流器一次分级后得到中位粒径分别为61μm、16μm和24μm的3种窄粒级产品,针对-45μm颗粒,双溢流管旋流器的综合分级效率较普通旋流器提高了1.26%,分级效果更好。     

三氧化二钒废水处理设计

三氧化二钒酸性废水中总钒 10 0～ 12 0mg/L ,Cr6 +10 0～ 2 5 0mg/L ,Na2 SO4 42～ 5 7g/L ,pH值 1 8～ 2 5。采用硫酸亚铁还原 石灰中和法处理三氧化二钒废水 ,处理后水质达到国家《污水综合排放标准》(GB8978- 96 )中一级排放标准