基于.NET Core架构的PLC数据采集和监控系统

为了解决工厂设备品牌多样化、通讯协议各不相同、采集难度大等问题,研究了基于.NET Core架构的远程数据采集和监控系统.该系统借鉴了异构的数据存储方式、分布式网络模型和数据分析模型,使用.NET Core框架开发完成.首先将嵌入式工控机和PLC设备通过工业以太网连到同一局域网并进行通信,对可编程逻辑控制器(PLC)设...     

大数据时代基于国密算法的银行数据安全存储研究

近年来,各行各业数据呈现急速上升的趋势,大数据技术在银行业应用也越来越广。云存储的出现在很大程度解决了数据存储问题,但数据存储安全问题却一直存在。该文主要从大数据时代银行数据安全性方面进行探究,该文的方案使用国密算法SM2、SM3和SM4的混合加密方式来保障银行数据的存储安全。使用Java语言实现国密算法,搭建Hadoop完全分布式集群做存储,采用B/S架构的方式设计并实现云存储加密系统,通过实验验证该方案的正确性和合理性。通过实验结果可得知,该方案效果良好。     

试论现代网络存储技术

伴随着计算机网络的发展,资源的共享问题、数据的存储问题成为网络发展的重要问题.采用何种方式完成数据的网络存储,如何提高网络存储的安全性、稳定性,如何提高网络存储的效率是现代网络存储最关心的问题.     

计量检测管理系统的分布式数据处理方案

文章通过对计量检测机构数据分布特征的分析,得出计量检测管理系统分布式数据存储的形式,提出了一种解决分布式数据的处理方法,并对数据同步和数据存储的一致性设计以及并行查询的实现方法作了分析,最后给出了数据库级的安全设计.     

基于HDFS存储服务系统的研究和应用

本文研究对象是云计算的分布式存储技术,通过构建基于HDFS的云存储服务系统来解决海量数据的存储难题,降低实施分布式存储系统的成本。     

大型企业分布式数据存储模式

以某大型飞机企业工时软件为基础提出分布式数据存储模式。工时软件采取分布式部署,对数据按机型划分并部署在相对独立的数据库中,采用机型影射表进行数据访问请求的判断和转发,实现数据的并行处理,解决多数据库协同和一致问题,实现任务分摊和负载均衡,缩短响应时间,提高数据处理效率。     

分布式本体库存储模型的设计与优化

针对如何高效地构建用于语义交互的分布式本体库展开了研究。首先,分析了基于本体的语义交互平台的通用体系结构,进而明确分布式本体库在平台中的作用,提出了一种分布式本体库存储模型。围绕该模型,详细讨论了网络本体库与本地本体库的映射方法,语义数据的编码方法,然后详细分析了该模型中指令分发和数据演化组件的工作机制,最后通过实验验证了:在集群存储模式下,对于大数据量查询,网络数据传输对查询时间开销的影响远远小于查询本身,从而为分布式本体库存储效率的优化奠定了基础,即在本体库中采用分布式集群存储可以达到优化检索效率的目的。该存储模型已经在STASIS平台中得到应用。     

基于Fabric区块链的国家质量基础设施协同服务系统设计

本文从跨部门数据共享视角出发,结合跨部门协作理论和Fabric区块链技术,设计"制度-业务-系统"多层次协同服务系统,充分利用区块链技术去中心化、不可篡改、共识机制等特征,实现国家质量基础设施协同服务。首先,结合传统中心化存储技术和区块链去中心化存储技术,将与四要素相关部门的核心业务数据信息存储在区块链分布式账本中,而将不重要的数据存储在传统数据库中,解决数据存储信任和安全问题,其次,通过超级账本联盟链技术提供的智能合约机制实现联盟办公,加强国家质量基础设施体系的协调,推动核心要素融合发展,实现协同服务升级。     

基于iSCSI的软件RAID的小型企业网络解决方案

iSCSI作为SCSI的网络解决方案,通常利用硬件RAID卡将多块磁盘按不同的方式组合成一个磁盘组,提供数据冗余的存储方案,现广泛用于大型企业和高等院校等的信息系统,但此方案的成本较高.本文使用iSCSI的软件RAID,将几个独立计算机通过局域网连接,充分利用网络和磁盘资源,组成一个GB级的分布式存储,实现低成本分布式存储解决方案,对此系统进行了性能测试,并对此方案应用于小型企业的可行性进行了分析.分析表明,此方案完全可用于小型企业,同时可推广到中小学校和家庭用户.     

基于分布式部署的高校贫困生评定系统的设计与实现

通过基于分布式部署的贫困生评定系统的设计与实现,解决高校中学生和学校对贫困生评定难题。学校可以根据国家政策数据因子、学生在学校的表现因子等重要参数通过系统自动评定出真正的贫困生。系统采用分布式技术和模糊数学技术,对系统的数据显示、数据采集、数据存储、数据智能分析进行了有效部署,增加了系统的健壮性、效率和准确性。     

BW-RAID系统的分布式异步版本识别机制

为解决BW-RAID系统中数据冗余模式从镜像向RAID4转换时的节点间缓存数据版本识别问题,提出了一种分布式异步版本识别机制。该版本识别机制在镜像卷中的一个逻辑块被更新时,为其生成一个新版本;在冗余模式转换时,通过比较镜像节点间的版本判定某一逻辑块在两个镜像节点缓存的数据是否一致,如果数据一致将其迁移到数据存储卷,否则暂存入镜像节点各自的磁盘缓存以保证系统的冗余一致性。实验表明,该机制在系统正常、降级、故障恢复状态下均能准确、有效识别一致数据;顺序写评测中存储负载小于1%,平均带宽提升最高达25.43%;Open-mail负载重播评测中存储负载低于40%,应用重播结束时写更新数据均完成冗余模式转换,实现了提高空间利用率的目标。     

基于Web Service构建分布式虚拟地理环境系统

在研究了分布式虚拟地理环境系统的特征和基于Web Service、GI Web Service实现分布式虚拟地理环境系统的优势的基础上,建立了基于Web Service的分布式虚拟地理环境系统的体系结构,最后开展了原型系统试验.结果证明,系统实现了在异构环境下的资源共享和协同工作,基本解决了以往C/S、B/S结构的系统中共享资源只能集中存储在服务器端等难点问题.     

云存储中的数据迁移分析

数据迁移问题是企业选择云存储方式最为重要的环节,从多个方面分析云存储中如何有效的进行数据迁移并提出一些自己的看法。旨在共同研究数据迁移的实施方案。     

基于无线组网技术的爆炸冲击波压力存储测试系统

为了解决爆炸后试验人员无法进入试验现场、传统的有线电测法布线繁琐等问题,提出了一种基于无线组网技术与存储测试技术相结合的测试方法,解决了传统存储测试出现的问题.系统在FPGA控制下完成数据采集,在STM32控制下基于Lora,WIFI通信方式完成远程监测控制及数据传输.运用上述原理设计的无线采集存储装置能够适应爆炸场测试环境,各节点能独立完成对冲击波超压数据的采集,并通过与有线存储测试系统采集数据进行对比分析,得到该测试系统数据采集相对误差小于4%.因此,研究结果可为实际的特殊工况下爆炸场冲击波压力存储测试提供一种有效的手段.     

基于NAS的实验室气象数据存储解决方案

通过分析网络附加存储(NAS)的特点及其相对直接连接存储(DAS)的优点,提出将NAS的存储方案应用于实验室的网络数据存储中,有效解决传统数据存储及共享中存在的问题。     

远程故障诊断系统中的VXI总线高速数据采集系统研究

远程分布式在线机械设备状态监测与故障诊断正在步入快速发展时期,这类系统具有既可以保证监测实时性、又能实现信息共享的优点,同时还可在总体上节约监测诊断系统的成本。远程分布式在线监测与故障诊断系统中一个核心的技术问题就是:在高速采集数据时,数据的流量非常庞大,如何能真正做到对这些数据的实时处理与分析,并将数据和分析结果及时地传送到网络上的数据库以供诊断之用,这对于整个远程分布式在线监测与故障诊断系统具有重要的意义。介绍了一个解决该问题的方案,即基于VXI总线的高速数据采集系统。     

基于云计算的分布式数据挖掘算法研究

数据挖掘是对海量数据进行分析和总结,得到有用信息的知识发现的过程。作为数据挖掘的一个分支,成熟的分布式数据挖掘已经应用到社会生活许多领域。对海量数据的存储和挖掘,云计算提供廉价和有效的解决方案,能解决分布式数据挖掘的瓶颈。因此,基于云计算平台的分布式数据挖掘是目前的热门研究。给出数据挖掘算法的分类,重点针对不同的数据类型,给出适用的基于云计算的分布式挖掘算法。     

非负矩阵分解的分布式算法

提出一种解决大规模非负矩阵分解的分布式算法.非负矩阵分解一直是矩阵分解领域中的热点问题之一,已有一些相关的算法.但是,对于大规模的非负矩阵,至今尚无高效的方法.本文采用近来解决大数据的分布式思想和并行式计算方法,并将它们与传统的矩阵分解算法相结合,提出一种基于并行式计算的分布式网络算法,以此实现大规模的非负矩阵分解问题.实验结果表明,所提出的算法较一般的分布式算法与集中式矩阵分解的算法更加有效和快速.     

Web的财务查询系统的性能优化与实现

在数据库和应用程序设计等方面探讨了信息查询的性能问题,研究了基于Web方式数据查询的优化方法.在高校财务信息查询系统的设计中,通过物理数据库的优化设计、使用优化的SQL语句、使用存储过程和基于存储过程的分页显示技术等优化信息查询性能,并给出了具体的代码实现,从而在软件方面解决了信息查询系统的性能问题.     

基于风电场SCADA系统的云平台设计

为充分利用风电场集控中心采集爆炸式增长的海量数据,解决风电场SCADA系统数据存储和处理能力不足的问题,设计基于SCADA系统的云计算平台,实现数据的高效分布式存储以及处理。传统LS-SVM适用于小样本数据,对风电场海量数据的处理比较乏力,针对此问题,采用MapReduce云计算平台实现算法并行化,并用遗传算法对其进行参数寻优。最后利用某实际风电场SCADA系统的历史数据,实现短期风功率预测功能。在数据不断增加的情况下,采用MapReduce云计算平台实现LS-SVM算法并行化训练比单机LS-SVM训练缩短的时间十分显著,可增强SCADA系统的实时性;当数据增加到1.2 GB时,时间缩短一半,而准确度相差0.1%。