基于Hadoop的电子通信数据快速存储系统设计

在Hadoop云平台进行数据云存储系统的优化设计,提高大容量数据快速存取能力,构建基于Hadoop的大容量数据快速存储系统,采用负载均衡调度和云存储优化方法进行存储系统构架,进行Hadoop云平台的海量大数据进行信息融合处理,对Hadoop云平台大容量数据信息流进行非线性时间序列重组,采用特征空间降维方法降低存储开销,优化存储结构,提高存储和调度的速度。仿真结果表明,采用该方法进行Hadoop大容量云存储系统设计,提高了数据存储的吞吐性能和快速存取性能。     

一种面向视频监控的云存储系统设计与实现

提出一种面向视频监控大容量存储的分布式云存储系统,系统包括元数据节点集群、存储节点集群、客户端;元数据负责管理所有的存储服务器,存储所有的文件基本信息,负责客户端连接请求等,是存储系统的核心;存储节点集群是实际数据存储的节点,负责存储数据;客户端负责连接云存储系统,与客户端上的应用交付,进行数据的存储和读取。整套系统可以实现存储容量的动态增加、多客户端并发读写、存储节点的动态扩容等,非常符合视频监控大规模存储的需求。     

浅谈云存储技术的特点及其应用

云存储系统是一种基于云计算基础上发展而来的新兴的存储技术,随着云端数据越来丰富、用户数量越来越庞大,云存储技术的发展越来越受到重视,云存储成为信息存储领域的一个研究热点。本文分析了云存储技术的特点,阐述了云存储的应用。     

云存储安全模型研究

针对云存储服务对传统存储技术在数据安全性、可靠性、易管理性等方面提出的新挑战,在分析云存储的基本概念、结构和特点的基础上,研究了云存储的安全性;同时,针对云存储系统各个结构层次的特点,讨论了云存储的安全技术,并构建了云存储安全模型,保证了云存储系统的安全性和可靠性.     

面向智能家居大数据云存储系统设计与实现

为了使传统家居设备可以进行远程遥控,开发了在家具传统设备上引入无线组网技术,使其达到访问和远程控制的效果。针对在数据存储中,传统云存储系统缺少灵活性,不透明,鲁棒性不强,无法有效存储、管理和维护大数据的问题,设计并实现了面向大数据的云存储系统,通过逻辑控制模块对家居系统各业务请求进行智能处理,利用用户访问模块为用户提供底层实现的各项功能,采用存储模块为家居系统提供透明的数据存取功能,利用文件读/写模块将上层逻辑处理和底层存储进行隔离,使所设计系统更加健壮。软件设计过程中,给出数据云存储程序代码,实现大数据云存储。实验结果表明,新一代智能家居云存储系统具有很高的可行性和实用性。     

面向视频监控系统的云存储运维系统的设计与实现

随着数字化安防技术的不断提高,存储已经成为其核心技术之一,云存储应运而生。现阶段云存储的服务器,安全性和稳定性方面都得到了充分的提升,因此就需要进行云存储系统的研究,从而实现对数据的信息交互。文章首先对视频监控的存储现状进行了概述;其次对多媒体数据的特点进行了分析;最后在实现视频监控的基础上,设计和实现了云存储运维系统。     

云存储环境下的混合存储算法研究与实现

随着大数据的发展,数据运算、数据读写均对存储环境和存储系统提出了更高的要求。存储系统中所运行的任务具有高并发度特征,也就是要对其存储的数据实现随机读写的性能。固态盘(简称SSD)是一种云储存环境下的新型存储设备,具有随机读写数据的功能,但是价格比较昂贵,而且对于写入的次数有限制,所以应该把固态盘存储技术和磁盘存储(HDD)结合起来,形成云存储环境下的混合存储系统。文章在分析三种基本存储设备特点的基础上,重点阐述在云存储环境下,混合存储算法的研究与实现。     

一种基于云存储的安全存储方法

随着大数据时代的来临,分布式存储系统和云存储系统得到广泛应用,越来越多的个人和企业将自己的数据存储在云端。本文提出一种基于云存储的安全存储方法,保证用户数据的可靠性和私密性,对用户数据进行加密和冗余编码,分布式存储于多个云端,当用户数据被窃取时,加密技术保证数据的私密性;当用户数据发生丢失时,能够从其他可用的云存储中恢复数据,保证数据的可靠性。     

面向云存储的归档方法

针对目前云存储系统主要提供文件备份的现状,提出了一种面向云存储的归档方法,该方法将不活跃的文件数据以归档的形式存放在云端存储系统,并在客户端保留其存根信息以供读取时使用,从而不仅大大节约了客户端存储空间,改善了客户端性能,而且实现了对用户透明的归档数据访问.     

面向两级数据中心的软件定义存储研究

随着数据量的爆炸性增长和数据的重要性不断增加,对数据快速准确存储的要求越来越高,存储逐渐成为数据中心云平台发展的瓶颈。文章针对现有存储系统通用缺陷,如软硬件紧耦合,无法满足移动互联网和大数据对存储系统快速、多变的需求等,介绍软件定义存储的优势和定义,分析软件定义存储技术和系统需求,并认识到面向两级数据中心的软件定义存储技术架构,存储系统的软硬件紧耦合设计严重地限制了存储技术的发展,也越来越无法满足移动互联网和大数据时代下,对存储系统快速、多变的需求。文章提出软件定义存储可以非常巧妙地发挥X86服务器的廉价优势,对数据中心的数据进行存储、组织和管理,向上层应用提供安全可靠的、可扩展的、可动态管控的、高效的数据存储服务,并与虚拟化资源池很好地融合,可以极大地提高云平台存储的安全可靠性能。文章认为软件定义存储(SDS)作为一种新的存储系统架构,更适合下一代数据中心的发展。     

云存储系统可问责机制研究

目前,很多厂商开发了云存储系统供企业和个人使用,但在实际应用中,大部分用户仍然不能完全信任云存储,其核心担忧仍然是云存储的安全,即用户存储在云端的数据被泄露、恶意攻击、窃取的可能性;另外,用户也很关心云存储系统出现问题时,事故责任怎么划分。针对上述问题,本文首先对云存储的安全问题进行了综述,在此基础上研究了云存储可问责机制,从问责的视角提出了解决云存储安全问题的方案。     

一种基于PoW的安全云存储数据去重方案

数据去重技术虽能提高云存储效率和节约网络通信带宽,但其安全问题备受学术界和产业界关注,成为研究热点。在用户对数据隐私性、机密性和完整性等的强烈需求下,安全云存储数据去重技术应运而生。文章给出云存储系统数据去重的系统模型和威胁模型,分析云存储系统数据去重的安全需求,介绍云存储系统数据去重方案的设计思路,提出云存储系统数据去重方案系统设置、数据上传、文件级所有权管理、数据块级所有权管理和数据下载的关键算法。     

基于优化加密的云存储安全数据检索方法研究

针对传统检索方法在云存储加密数据中的检索效率过低的问题,提出属性基加密技术的安全数据检索方案。通过使用属性基加密技术的索引词表达能力,提高数据的安全系数,再通过较为完善综合的云服务提供商所提供的运行开销以及参与云存储信息索引的其他用户的信息检索服务,让穷尽的搜索转变为加密运算,让整个云存储系统的搜索过程与存储管理系统机制更加完善。通过对云存储数据检索方案中属性基加密技术的研究,将属性基加密技术与其他几种新方案进行比较,属性基加密方案在访问控制和快速搜索中具有十分优异的性能,而且在数据检索过程中可以有效保护数据的安全,保障用户的隐私安全,十分符合拥有大量数据的云存储系统。     

云存储数据安全性分析

云存储是随着云计算的发展应运而生的一种网络存储技术,加上云存储的开放性和复杂性,所以其安全性面临着严峻的挑战.本文基于云存储的概念,对云存储系统的数据安全性进行了深入的分析.     

云存储安全分析

文章认为云存储是社会发展、技术发展的必然趋势,但其安全问题是云存储普及最大的障碍。基于云存储系统架构、安全分析及安全保护机制,文章给出了一种云存储服务应用支撑系统架构。该架构应用于云存储服务系统,是基于互联网应用的新型服务化存储模式,分为业务应用层、应用接口层、平台软件层和基础设备层,提供信息服务管理、运营统计分析和多种安全措施。     

云存储系统架构与关键技术研究

研究云存储结构模型及优势的基础上,分析云存储系统设计时应考虑的基本目标和扩展目标,提出满足设计目标的集群架构和系统结构,对实现云存储系统文件同步及重复数据删除等关键技术进行分析,对云存储系统的设计实现有一定借鉴意义。     

光伏发电系统密集型大数据云存储系统设计

目前设计的光伏发电大数据云存储系统存在响应时间过长,存储过程稳定性较差的问题,针对上述问题,设计了一种新的光伏发电系统密集型大数据云存储系统。系统硬件框架由光伏发电数据采集层、传输层、处理层、存储层以及应用层组成,云存储数据服务器同时设置了主服务器和从服务器,设计节点完成信息传输;通过两个子线程完成信息迁移,存储器内部引入DSP主控芯片,实现信息存储。实验结果表明,所设计的光伏发电系统密集型大数据云存储系统响应时间较短,能够更稳定地完成数据存储工作。     

面向智慧城市的多云协同存储设计及实现

针对传统的单一云存储平台难以满足智慧城市领域中数据激增及其对数据高可靠性的要求,本文提出了多云协同存储系统方案,给出了实现海量数据高可靠的动态数据副本放置方法,旨在整合利用现有云存储平台实现面向智慧城市领域的大规模数据的协同存储,具有可扩展性、高效和低开销等优点。     

面向云存储安全的可自愈拜占庭Quorum系统

针对云存储系统中的数据安全问题,提出了一种面向云存储安全的可自愈拜占庭Quorum系统.该系统以虚拟机作为后端存储设备构建虚拟存储节点,利用虚拟机多样化操作系统,以及动态迁移、快速部署等机制构建动态异构的存储系统架构.在拜占庭容错门限的基础上,提出自愈门限的概念,并设计相应系统安全协议,实现存储节点的自动化异常检测和状态复原.实验结果表明,提出的云存储系统具有较高的鲁棒性,能有效提高存储数据的安全性.     

大数据时代下云存储技术在消防信息化系统中应用

经过多年的发展,消防部门建立了各类信息化应用平台,这些平台在应用过程中产生大量的数据存储。由于业务应用的不同,消防部门现有的各类数据存储系统相对独立,无法做到数据共享。文章从消防部门现有存储系统的现状进行分析,通过云存储系统来模拟建立一个火灾数据挖掘服务为例,展示了云存储系统为消防信息化建设带来的变革。