海量信息下的文本分类研究与优化

针对传统的文本分类方法费时且占用大量资源、效率低等问题,提出了结合大数据处理平台Hadoop和中文文本分类,实现支持向量机(SVM)算法的并行化的模型。通过试验数据分析表明,对比采用传统的单机SVM对样本数据进行训练这个方式,基于Hadoop平台而实现的SVM并行化算法能够改善在对大量样本训练时训练时间长的缺陷,并且分类的准确率也有所提高,尤其是对大量文本进行分类时,Hadoop平台下的并行SVM算法较单机SVM算法具有更大的优势。     

大数据处理统一引擎Apache Spark研究

Apache Spark是当前流行的大数据处理统一引擎,具有通用、高效、易用等特点。Apache Spark是针对Map Reduce在交互式数据挖掘、迭代式算法、机器学习等应用的低效率而提出的一种可同时进行批处理、交互式计算、流式计算的内存式计算框架。本文介绍了Map Reduce的基本概念与设计思想,并与Spark进行对比分析,着重介绍了Spark的核心技术DAG和RDD,最后给出相关的编程示例。     

基于MapReduce和多目标蚁群算法的制造云服务动态选择算法

基于云计算技术和云服务技术研究了云服务的动态选择问题,给出了云制造服务层次化模型,提出了一种基于MapReduce和多目标蚁群算法的制造云服务动态选择算法(CSSMA)。依据CSSMA设计了多目标蚁群算法、Map函数、Reduce函数和优化策略等,并将其分布式并行运行于制造云平台中。仿真实验结果表明:CSSMA具备良好的处理大规模问题的能力,适用于制造云服务动态选择问题的求解。     

SOL-MapReduce获专利 大数据进入新时代

专注于数据仓库，大数据分析和整合营销管理解决方案的厂商Teradata天睿公司（Teradata Corporation）的子公司Aster Data日前宣布，其SQL Map Reduce技术获得了美国第7966340号专利。     

基于云存储的教学资源共享平台的设计与实现

为解决传统平台资源存储的瓶颈和提升用户在海量信息中检索所需教学资源的速度,对云平台中教学资源的存储结构、融合Hbase和My SQL两类数据库优势的混合式数据库系统以及基于J2EE中主流SSH2框架的WEB系统进行设计,使用Hadoop的分布式文件系统来存储教学资源,实现了一个基于Hadoop的云教学资源平台。     

串、并行设计对硬件产品设计缺陷的影响分析

串、并行设计模式下硬件产品的设计缺陷形成机理存在差异,对串、并行设计模式与设计缺陷之间的关系进行系统地分析、比较,有助于在产品设计过程中预防、控制设计缺陷。采用过程方法,分别构建了从输入、输出、资源、环境和监测评价活动五个方面系统反映串、并行设计各阶段缺陷影响因素的结构要素模型,进而迭代获得描述串、并行设计过程各设计阶段、各类设计缺陷和可能存在的缺陷因素三者之间的结构关系模型。在此基础上,利用区间层次分析法定量地表达了串、并行设计的设计缺陷与其影响因素之间的关系。最后,从设计缺陷预防和控制的角度,对串、并行设计模式下设计缺陷结构关系进行比较与分析,研究成果对设计过程中预防和控制设计缺陷具有理论和实际指导意义。     

基于遗传算法并行迭代模型任务执行阶段数的寻优

针对二阶段并行迭代模型存在阶段数较少、任务分布方式单一的缺陷,通过对二阶段并行迭代时间模型进行扩展,确定多阶段并行迭代总时间模型,运用遗传算法研究多阶段并行迭代模型中任务执行的最优阶段数,使产品开发总执行时间最短。以某电动汽车的开发过程为例,验证了该方法的有效性,为产品开发提供了理论参考。     

基于Hadoop的窃电预测平台研究

讨论了基于Hadoop的窃电预测平台及模型构建的过程,利用Hadoop开源工具建立整套电力大数据预测解决方案,着重研究大数据对窃电行为预测的效果。基于自主搭建的Hadoop大数据平台收集电力企业内部客户用电行为模式相关数据,研究客户用电行为与窃电行为之间的关系。用2014—2015年查处的窃电案例作为资料在Hadoop平台上运用神经网络算法进行训练建模,用2016年的最新案例做效果检验,结果证明,对比随机抽样该方法可以获得较为明显的窃电查处提升率,且自主搭建的Hadoop大数据平台能很好地解决实际问题。     

基于 CAD的加工中心在线检测编程系统

从并行工作的角度，在产品设计阶段考虑在线检测的规划，开发了基于CAD的加工中心在线检测编程系统。系统采用AutoCAD作为集成开发平台，以ObjectARX作为二次开发工具，利用表面建模的方法，自动生成检测程序。     

基于Hadoop平台的并行化数据分类算法研究

随着云数据规模的急剧增长,传统的基于统计学和机器学习方法的数据分类算法在处理海量、异构和复杂的Web数据时面临系统扩展性的瓶颈。在云计算平台Hadoop上,实现数据分类中特征提取、特征分析和特征分类的MapReduce化处理。通过知识推理并行化特征构造,建立概念层次结构的特征度量,与分类算法的并行化处理进行融合,在真实数据集上进行验证,与传统算法组合在精度和时间开销上进行比较,实验表明该分类算法能获得更好的准确性和加速比,是一种有效的海量数据分类方法。     

改进YOLOv5的镜头固定槽表面缺陷检测

针对手机镜头固定槽表面缺陷过小导致自动化质检平台难以检测的问题，提出改进YOLOv5的镜头固定槽表面缺陷检测算法实现。在图片预处理阶段使用有效的数据增强策略来平衡不同类别样本的分布；在FPN中添加融合因子控制特征图融合时深层传递到浅层的信息，得到含有更多小目标信息的多尺度特征图；使用K-means算法得到更适合本数据集的先验框数量和大小。通过采集的镜头固定槽表面缺陷数据集评估本算法的性能，并和基线算法YOLOv5进行对比分析。实验结果表明，改进的算法对小目标缺陷拥有更好的检测效果，并且对各类缺陷均能实现准确分类定位，平均精度均值（mAP）达到92.70%，满足智能制造自动化生产的需求。     

管道缺陷的超声导波检测研究

针对管道缺陷与超声导波交互的特点,为解决在管道超声导波检测中的缺陷定位困难、轴向尺寸无法量化等繁琐和耗时严重等问题,设计了自发自收和一发一收两种管道缺陷的超声导波检测平台,对特定环形缺陷进行管道超声导波检测进行了研究,探究了环形缺陷的轴向长度和径向深度对超声导波检测的影响。结果表明:采用自设计的超声导波检测平台可实现管道缺陷的定位检测及轴向尺寸定量检测,缺陷的轴向长度主要影响缺陷回波的形态,缺陷的径向深度主要影响回波的能量。     

基于机器视觉石英晶片外观的缺陷检测方法

针对石英晶片的外观缺陷检测技术的不足,提出一种基于机器视觉开发软件对石英晶片外观缺陷检测方法,对石英晶片生产过程中出现的外观缺陷进行了分析,提出了缺陷检测的流程,建立了基于几何特征的模板定位算法和基于Blob算法的缺陷分析算法,实现了对图像的获取、边缘检测、定位、识别和斑点分析,在C#环境下对其图像处理技术利用机器视觉软件进行了开发,搭建了石英晶片的外观缺陷检测实验平台,通过摄像机实现了石英晶片的外观图像的捕获,利用视觉软件获得石英晶片的外观质量,最后对此系统进行了测试。实验表明:该石英晶片外观缺陷检测方法具有检测速度快、精确度达到99.7%、匹配误差小于0.3等优点,可满足现场使用的要求。     

基于改进YOLOv5的酒瓶缺陷检测方法研究

由于酒瓶产品缺陷多样以及产品缺陷较小,使用了YOLOv5作为基础框架来设计算法。对YOLOv5进行了深入研究,发现虽然空间池化金字塔（Spatial Pyramid Pooling,SPP）在多尺度检测中优化了计算量和减少了数据量。但是,在某些情况下,空间金字塔池化会出现信息丢失的问题,影响了检测精度。为此,提出一种将空间池化金字塔改进为空洞空间池化金字塔（Atrous Spatial Pyramid Pooling,ASPP）。ASPP可以对不同尺度的特征图进行并行池化,从而综合多尺度特征信息,获得更全面、更准确的特征表示。将SPP算法改进为ASPP算法后,在酒瓶缺陷数据集上进行了实验。实验结果证明改进后的YOLOv5算法在酒瓶缺陷检测精度上提升4%,mAP@0.5提升了2%,mAP@0.5:0.95提升了1.5%。     

基于贪婪算法的汽轮机叶轮相控阵信号压缩感知

超声相控阵是核电站组件无损检测中广泛采用的手段之一。针对低压汽轮机叶轮轮缘缺陷检测中存在的数据量大的问题,提出一种基于贪婪算法的超声相控阵信号压缩感知方法。利用CIVA平台建立了超声相控阵缺陷检测仿真模型,使用四种贪婪算法对仿真信号进行压缩感知并重构,计算不同采样率和不同压缩率下的百分比均方误差,根据结果选取最优算法;使用上述算法对汽轮机叶轮模型电火花加工缺陷回波信号进行压缩重构;通过与小波压缩重构精度的对比,验证该算法在超声相控阵汽轮机叶轮缺陷检测中的适用性。结果表明,使用仿真数据可以用低于奈奎斯特极限的测量点数精确重构信号;在压缩率为60%时,使用试验信号的平均重构误差仅为4.815 2%,与小波压缩的重构精度相当。     

虚拟环境中基于二级2D投影图的动态碰撞检测机制

一种良好的动态碰撞检测机制应该遵循实时性、用户透明性、用户空间认知度等准则。基于这些准则，提出了一种基于二级2D平面投影图的水平动态碰撞检测机制TMBHDCD，阐述了其具体实现及体系结构。二级平面投影图Free Space Map和Detail Projection Map在不同阶段提供化身的空间信息；该机制将碰撞检测处理分为碰撞判定、碰撞避免和路径修复三个阶段，提出动态障碍物碰撞预警域、碰撞互斥域及碰撞互斥带的概念，结合Detail Proiection Map进行碰撞判定、避免和修正。     

Hadoop在数据挖掘中的应用研究

随着互联网和计算机技术越来越广泛的应用,数据量也在迅速增长,如何在海量数据中快速挖掘到有价值的信息成为数据挖掘研究的重点。本文分析了Hadoop云计算平台,设计了基于Hadoop的数据分析系统,提出了基于MapReduce的K-均值空间聚类算法。     

现代自动武器数字化设计制造流程研究

探讨了现代自动武器数字化设计制造的工作模式和流程,为实现数字化产品设计、仿真分析、工艺设计、工装设计、产品装配、检验检测等在自动武器数字化协同平台下的并行与协同提供了参考。对自动武器数字化设计制造协同平台集成关系进行分析,从各阶段的工作内容、参与人员和输入输出等方面与自动武器传统模式进行对比,分析了数字化设计制造对工作模式、组织结构等产生的革命性变化,举例说明了自动武器数字化设计制造协同平台的主要运行过程,为自动武器数字化设计制造的实施与推动提供了参考。     

玻璃纤维布的机器视觉缺陷检测系统设计

针对目前国内玻璃纤维布生产企业的布匹缺陷检测方式仍采用人工检测的状况,设计了一种基于机器视觉的玻璃纤维布缺陷检测系统,该系统包括图像采集模块、人机交互模块、图像处理模块和缺陷数据统计模块四个部分,详细阐述了各模块的实现方法和技术。在VS2010平台下基于C#、Halcon和SQL Sever数据库的研制出了玻璃纤维织布缺陷检测软件系统,并在实验平台上进行了相关的调试和实验验证。结果表明该系统稳定可靠、实时性好,满足了预期的研发要求。     

扰动磁场检测笔式探头的研制及试验分析

根据扰动磁场检测原理,设计了一个扰动磁场检测笔式探头,用于辅助常规探头,扫查常规探头难以检测处。利用搭建的简易试验平台,对探头定位缺陷的能力及探头的有效检测范围进行了分析,对缺陷的检测灵敏度进行了研究。经试验验证,该探头具有较强的缺陷定位能力、较高的检测灵敏度及较宽的有效检测范围。