大数据场景下基于HDFS的云存储服务系统设计

本文通过构建大数据场景下基于HDFS的云存储服务系统,能够有效地存储海量数据,实现用户的文件数据进行分布式存储,并达到降低分布式文件系统成本的目的。     

基于HBase的分布式海量小型文件存储系统

随着互联网公司的业务不断发展,企业的大量数据以非结构化的形式存在,非结构化数据常常以小型文件为主,不仅体量大,而且分散性高,因此海量小型文件存储面临着存储性能和访问效率较低等问题。分布式小型文件存储系统是指在集群服务器的硬件存储资源环境下,对小型文件保存、读取和修改进行统一管理的系统。文章基于HBase实现了一个分布式小型文件存储系统,该文件系统有超强的处理海量小型文件的能力,同时有着良好的扩展性、容错性和稳定性,可以更好地支撑互联网企业的业务发展。     

基于星际文件系统的分布式存储系统设计

为了构建更为安全和高效的分布式存储系统，本文结合了分布式存储技术和星际文件系统(IPFS)。加密后的数据被存储在IPFS中，使用Merkle DAG构建数据之间的逻辑结构。单一的IPFS文件存储系统安全性并不高，用户存储的数据信息有可能会受到IPFS本地节点管理者的修改，利用分布式存储的一致性原则使该系统实现了数据可溯源、防篡改等功能，并有效保护了用户的数据安全。同时，结合负载均衡技术使本系统拥有处理大用户访问量的能力，可以更好地分配数据请求和存储，从而提高了系统的读写文件速度，增加了系统的稳定性和可靠性。采用分布式存储技术与IPFS构建的新型分布式存储系统，可以实现数据的安全存储和高效读取。未来，IPFS有望超越HTTP协议，为构建更好的互联网生态提供支持。     

铁路通信数据HBase分布式查询系统设计

目前设计的铁路通信数据分布式查询系统响应时间存在较大延迟,不具备实时性。为了解决上述问题,基于HBase设计了一种新的铁路通信数据分布式查询系统。配备三台主机,构建分布式查询模式,通过Linux组件和HDFS目录构建集群,同时建立数据存储模块和数据查询模块。利用HBase存储算法设定存储模型,得到逻辑片段集合,通过分析逻辑关系实现存储调度。实验结果表明,设计的基于HBase的铁路通信数据分布式查询系统数据写入性能响应延迟时间低于0.2 ms,缓冲性能写入延迟时间低于0.1 ms,能够很好地保证查询实时性。     

一种分布式对象存储在巡检系统中的研究应用

随着通信技术的快速发展和智能设备的普及,网络规模和网元数量的不断增长,通信设备巡检任务成倍增加,给巡检系统的存储带来了巨大挑战,传统文件存储方式已无法满足要求.本文通过研究分布式对象存储,基于MinIO设计实现了一种新的巡检系统存储方案,可有效提升系统存储效率和可扩展性.该方案已经实际应用,支撑常态化巡检工作,对于网络...     

云存储技术在铁路综合视频中的应用研究

传统的铁路综合视频监控系统一般采用固定硬盘存储模式对视频数据进行存储和管理。本文通过分析云存储的关键技术和基本架构,文章提出了基于存储虚拟化和分布式存储技术的标准云存储方案、互联云存储方案及分散云存储方案,并通过对实际项目应用分析,确定了云存储技术在铁路综合视频监控应用的可行性。视频云存储方案具有可弹性扩展、读写速度快、数据安全、容灾性能高、易于维护管理的特点,良好适应铁路综合视频监控系统大容量高清化的数据存储要求。     

Redis分布式缓存实现与解析

近年来,中国的互联网产业正在以前所未有的速度迅猛发展。在此背景下涌现出一些亿级数据量规模的网站。为了保证用户体验,以及系统的高并发,在架构方面会使用缓存机制来降低请求对后台DB的访问。为了解决系统的高可用性以及可扩展性,在系统架构方面采用分布式的方式。因此要求缓存的也必须是分布式部署。Redis作为高性能KV存储系统,基于内存存储的特点使得Redis与传统的关系型数据库相比,拥有极高的吞吐量和相应性能。并且具备跨服务器的水平拆分、复制的分布式特性。很多系统都采用此数据库来解决高并发的问题,作者通过Redis的分布式实现,来具体探讨下其实现原理。     

基于Android手机的可靠云存储系统的架构设计

本系统研究一种基于Android手机的可靠云存储服务器架构。文件在内部存储机制上采用分布式存储,文件采用冗余切片,数据加密,数据校验,分布式类文件系统等方法,分散存储到云存储服务器中,保证数据的高可靠性。     

电信运营商“互联网+”业务中的分布式存储技术研究

随着互联网技术的成熟,各种类型的"互联网+"业务应用得到快速发展。种类多、数量大是互联网数据的显著特点。传统存储由于其在元数据管理、访问性能、存储容量、横向扩展等方面的局限性,在进行海量小文件处理时已显吃力。为满足井喷式互联网数据存储的需求,形式各样的分布式存储系统应运而生。文章对分布式存储技术进行研究分析,对比各类分布式存储系统的优劣,结合一些典型的电信业务简要论述哪些应用适合传统存储方式,哪些应用适合分布式存储方式。希望能对电信运营商"互联网+"业务系统建设起到抛砖引玉的作用。     

基于开源软件搭建高校分布式存储系统探讨与分析

随着我国高校信息化建设工作的逐步推进,高校各类网站建设数量和信息化数据与日俱增,如何实现数据的高效存储和安全备份,成为高校普遍面临的一个问题。分布式存储作为一种横向存储架构,成为主流存储技术之一,并且存在巨大的市场潜力。商业集群NAS虽然表现良好,然而其不菲的建设成本也让很多高校面临资金方面的巨大压力。文章通过比较分析当前各大主流开源软件的系统架构、访问接口、文件分布存储机制等内容,总结各开源软件的优缺点和适用的生产环境,提出针对高校利用现有开源软件进行分布式系统搭建的可行性建议,在有效减少系统建设成本投入的同时,能够获得较高的系统性能。     

ExPro-an expert system based process management system

The design, development and preliminary testing of ExPro, an expert-system-based process management system, is reported. This system is designed to provide process setup, monitoring, and supervisory control capabilities for applications in a real-time semiconductor manufacturing environment. ExPro is a rule-based system developed using the OPS-83 expert system language in a personal computer environment. It features a modular structure and includes an integrated analytical process simulator. The simulator is used to predict process parameters prior to processing and provide wafer state information from real-time (measured) process information when direct measurement of the state is impractical. The process selected for development and demonstration purposes was rapid thermal oxidation (RTO). Testing revealed that the accuracy of the system was within 1% of goal for the case of Si(100) wafers, but the less accurate Si(111) simulation led to much larger errors     

替代LUC系统的一种新公钥系统

新公钥系统是利用Dickson的另外两类多项式,替代生成LUC系统的Lucas序列,利用一个新的算法构造的公钥系统。与LUC系统相比,新公钥系统具有相同的安全性,但是计算量减少,效率相对提高,比LUC系统实用性更强。     

广播电视与NR系统的共存分析

由于无线频谱资源的稀缺性,5G NR系统需要在同一区域内与广播电视系统共用700 MHz频段,此时需要评估两个系统之间的互干扰情况.本文首先分析了广播电视与NR系统共存的干扰场景;其次根据邻信道干扰比(ACIR)模型计算了系统间干扰,给出了两系统共存所需最大隔离距离在同频、邻频、次邻频和频率隔离20 MHz时的建议取值...     

系统集成与集成自动化系统的研究

系统集成与计算机操作系统、网络通信技术、数据库技术等联系紧密,旨在使系统整体最优化,以降低系统成本、提高系统效率,实现扩充、维护系统、提高服务质量。文章围绕"系统集成与集成自动化系统"展开讨论,分析了系统集成、集成自动化系统的优势、集成自动化系统的结构、数据集成体系结构,希望能够为研究系统集成与集成自动化系统的相关人士提供帮助。     

RFID系统与EMV系统中的中继攻击

中继攻击是RFID系统和EMV系统中常见的攻击方式之一。现详细介绍了中继攻击的基本原理和实施方法,并提出了相应的防护措施。介绍了最早的中继攻击案例:早在1976年,就有数学家提出了中继攻击在对弈游戏中的应用。通过门禁系统和NFC芯片信用卡中的中继攻击案例,详细分析了中继攻击的基本原理,总结了现实中实施中继攻击必需的设备:中继读卡器、伪造智能卡和高速信道。进一步指出中继攻击不仅仅局限于非接触式的系统。通过EMV系统中的中继攻击案例,分析了接触式交易系统中的中继攻击。最后提出了抵御中继攻击的安全措施:法拉第笼法、设定密码法、时间测定法和距离边界法(DBP),并分析了各个安全措施优缺点。     

面向电力系统数据接口的消息队列系统

在智能电网的背景下,大量异构电力信息系统之间需要进行高频率、高可靠、大数据量和可拓展的数据交换,为此文中提出一种面向事件的消息传递解决方案。该解决方案着眼于电力系统的双向信息流的有效传递,采用消息中间件方式为电力信息系统提供能够屏蔽底层消息传递具体细节的编程接口函数,同时通过消息数据的分类与分区提高消息并行写入与读取,提高消息处理系统的性能。测试结果表明,所提出的基于消息传递的、数据交互解决方案能够在性能和拓展两个方面满足电力信息系统日益苛刻的数据交互需求。     

配电自动化系统中的通信系统研究

通信系统是配电自动化系统工程的基础,是整个系统安全可靠运行的保证。本文分析了配电自动化系统通信的特点及对通信系统的要求,并介绍了几种主要的配电自动化系统通信方式,最后给出了一个综合了多种通信方式的典型配电自动化系统的通信系统模型。     

基于ICA的电力系统稳定器系统设计

传统电力系统稳定器由于缺乏协调功能,使得其控制能力较弱,难以在互联电力系统中得到有效应用。为提升电力系统稳定器整定与控制功能的性能,文中设计分数阶PID控制器进行反馈控制,开发基于帝国竞争算法电力系统稳定器系统,并在励磁控制系统中对所设计的系统性能进行验证。仿真结果表明,基于ICA的电力系统稳定器系统能够较好地对电力系统的低频振荡进行抑制;同时,对目标进行控制时具有较好的灵敏度,控制低频振荡的控制效果与鲁棒性良好。     

气压式光缆系统

气压式光缆系统是解决光纤接入最用户的方案之一,本文介绍了构成该系统的传送理论及主要部件的结构,并对其机械特性、压送特性、传输特性等进行了比较全面的分析与评估。     

基于专家系统的导弹异常实时监控系统

针对人工判读导弹遥测关键参数安控异常的特点,提出了一种基于专家系统的导弹遥测的关键参数的异常实时监控系统,实现导弹安控异常的实时自动判别、监控,该系统的研制将对导弹试验的自动化和信息化作战产生深远影响。