大数据中心云存储系统安全数据去重问题

在大数据中心云存储系统中,数据去重可以大大节省平台存储空间,降低服务商硬件采购成本,并减少对网络带宽的占用,进而提高访问和检索效率。文章对大数据中心云存储系统可能面临的外部和内部攻击威胁进行分析,并从系统架构、数据去重位置、重复检查边界和数据粒度四个方面提出数据去重方案的设计标准。最后,基于安全目标实现的关键理念和设计决策,将现有安全数据去重方案分为PoW(所有权证明)、消息相关加密和流量混淆3种类型。     

内蒙古广播电视台融媒体云平台存储系统扩容分析

本文通过分析内蒙古广播电视台融媒体云平台存储资源的现状及需求、存储系统扩容方案和关键技术点,说明存储系统扩容的必要性。并就如何实现各类数据的存储与共享,最终使融媒体云平台存储系统扩展升级为高可靠性、高安全性、高并发访问吞吐量、可在线弹性扩展的云存储系统进行探讨。     

面向智能家居大数据云存储系统设计与实现

为了使传统家居设备可以进行远程遥控,开发了在家具传统设备上引入无线组网技术,使其达到访问和远程控制的效果。针对在数据存储中,传统云存储系统缺少灵活性,不透明,鲁棒性不强,无法有效存储、管理和维护大数据的问题,设计并实现了面向大数据的云存储系统,通过逻辑控制模块对家居系统各业务请求进行智能处理,利用用户访问模块为用户提供底层实现的各项功能,采用存储模块为家居系统提供透明的数据存取功能,利用文件读/写模块将上层逻辑处理和底层存储进行隔离,使所设计系统更加健壮。软件设计过程中,给出数据云存储程序代码,实现大数据云存储。实验结果表明,新一代智能家居云存储系统具有很高的可行性和实用性。     

一种基于PoW的安全云存储数据去重方案

数据去重技术虽能提高云存储效率和节约网络通信带宽,但其安全问题备受学术界和产业界关注,成为研究热点。在用户对数据隐私性、机密性和完整性等的强烈需求下,安全云存储数据去重技术应运而生。文章给出云存储系统数据去重的系统模型和威胁模型,分析云存储系统数据去重的安全需求,介绍云存储系统数据去重方案的设计思路,提出云存储系统数据去重方案系统设置、数据上传、文件级所有权管理、数据块级所有权管理和数据下载的关键算法。     

面向视频监控系统的云存储运维系统的设计与实现

随着数字化安防技术的不断提高,存储已经成为其核心技术之一,云存储应运而生。现阶段云存储的服务器,安全性和稳定性方面都得到了充分的提升,因此就需要进行云存储系统的研究,从而实现对数据的信息交互。文章首先对视频监控的存储现状进行了概述;其次对多媒体数据的特点进行了分析;最后在实现视频监控的基础上,设计和实现了云存储运维系统。     

云存储与云灾备的原理与短板分析

通过资源的整合和虚拟化技术的应用,云计算可以对用户提供按需的资源分配和服务,以充分提高资源的利用率。文章认为将该理念拓展到云存储和云灾备,则由于海量数据的高度聚集将会对系统带来一系列的挑战,是云存储与云灾备的短板。实现海量存储系统从传统的纵向扩展向横向扩展转化,实现系统的性能和规模线性可扩展,处理海量存储系统的高度聚集带来的能耗和冷却等问题是在进行云存储和云灾备系统设计时必须要考虑的重要因素。     

光伏发电系统密集型大数据云存储系统设计

目前设计的光伏发电大数据云存储系统存在响应时间过长,存储过程稳定性较差的问题,针对上述问题,设计了一种新的光伏发电系统密集型大数据云存储系统。系统硬件框架由光伏发电数据采集层、传输层、处理层、存储层以及应用层组成,云存储数据服务器同时设置了主服务器和从服务器,设计节点完成信息传输;通过两个子线程完成信息迁移,存储器内部引入DSP主控芯片,实现信息存储。实验结果表明,所设计的光伏发电系统密集型大数据云存储系统响应时间较短,能够更稳定地完成数据存储工作。     

云存储系统的分析与应用

本文首先详细的介绍了云存储的概念,和云存储系统的分析.详细介绍了云存储系统的四个组成部分：存储层、基础管理层、应用接口层、访问层及其功能.并且对于云存储系统的应用进行了举例分析.当前,云存储系统发展得到了广泛的应用和发展,也存在一定的问题.本文对于云存储系统的主要问题安全性问题进行了阐述,及其应对的策略进行了简单的介绍.     

面向云存储安全的可自愈拜占庭Quorum系统

针对云存储系统中的数据安全问题,提出了一种面向云存储安全的可自愈拜占庭Quorum系统.该系统以虚拟机作为后端存储设备构建虚拟存储节点,利用虚拟机多样化操作系统,以及动态迁移、快速部署等机制构建动态异构的存储系统架构.在拜占庭容错门限的基础上,提出自愈门限的概念,并设计相应系统安全协议,实现存储节点的自动化异常检测和状态复原.实验结果表明,提出的云存储系统具有较高的鲁棒性,能有效提高存储数据的安全性.     

一种云存储目录元数据管理系统

目前在云存储系统的实现中,一致性哈希算法及其改进算法是常用的技术之一。但是,基于一致性哈希算法实现的云存储往往表现为键值对系统,本身不具备层次的树形目录结构,因此不适用于传统的文件系统应用。针对上述技术缺陷,本文提出一种云存储目录元数据管理方案,在一致性哈希数据分布基础上构建层次目录,不需要专门的元数据服务器即可实现键值对和分布式存储系统相结合的层次目录管理。基于该方案实现的云存储系统已经大规模部署,很好的兼容了传统的文件系统应用,具有较好的可扩展性和灵活性。     

应用云计算技术的视频系统实现分析

首先论述了视频服务的发展现状，其次分析了视频云系统的特点和优势，最后讨论了云存储系统的实现方案。     

云存储系统中数据副本服务的可靠性保障研究

以数据节点与网络链路的可靠性因素分析为基础,提出了云存储系统的数据副本服务可靠性模型。根据访问可靠性与数据副本数量、用户访问量之间的关系,设计数据服务可靠性、副本生成时机、存储节点选择的确定方法,实现了副本分布、删除算法,并在云存储系统ERS-Cloud上进行一系列实验,结果表明该方法能够有效保障数据服务的可靠性,进一步降低副本的冗余存储数量。     

基于云平台的海量通用数据分级存储系统构建与实现

中国蓝云分布式数据中心通用数据分级存储系统项目目前已经建成，并经过各种功能和性能测试，达到了项目建设目的和使用要求。本文简要分析了广播电视媒体行业近线存储模式及存储介质选择的问题，主要阐述了中国蓝云平台海量通用数据分级存储系统基本架构、功能及设计亮点。     

云存储环境下的混合存储算法研究与实现

随着大数据的发展,数据运算、数据读写均对存储环境和存储系统提出了更高的要求。存储系统中所运行的任务具有高并发度特征,也就是要对其存储的数据实现随机读写的性能。固态盘(简称SSD)是一种云储存环境下的新型存储设备,具有随机读写数据的功能,但是价格比较昂贵,而且对于写入的次数有限制,所以应该把固态盘存储技术和磁盘存储(HDD)结合起来,形成云存储环境下的混合存储系统。文章在分析三种基本存储设备特点的基础上,重点阐述在云存储环境下,混合存储算法的研究与实现。     

云存储安全模型研究

针对云存储服务对传统存储技术在数据安全性、可靠性、易管理性等方面提出的新挑战,在分析云存储的基本概念、结构和特点的基础上,研究了云存储的安全性;同时,针对云存储系统各个结构层次的特点,讨论了云存储的安全技术,并构建了云存储安全模型,保证了云存储系统的安全性和可靠性.     

一种适于云存储的数据确定性删除方法

 为保护云存储模式下数据的机密性,本文提出了一种适于云存储系统的数据确定性删除方法.该方法通过密钥派生树组织管理密钥,将密钥经秘密共享方案处理后分发到DHT网络中,利用DHT网络的动态特性实现密钥的定期删除,使得在非授权时间内密文数据不能被解密和访问,从而实现云存储系统中数据的确定性删除.实验结果表明,该方法能够有效地删除密钥,且性能开销低,满足云存储系统中过期数据或备份文件的确定性删除要求.     

基于MongoDB的数据密集型云存储系统设计

针对密集型数据设计的云存储系统多是利用Sqlite技术,因云数据复杂性,导致存储性能和查询性能较差.MongoDB是NoSQL数据库的一种,具有容错性高、性能灵活的特点,基于MongoDB设计了一种新的数据密集型云存储系统,系统硬件由3个层次构成,分别是数据层、业务层和表现层,选择MongoDB—Hadoop作为适配器...     

云存储系统技术综述

近年来,随着云计算的发展,在此基础上延伸和发展出来一个新的概念云存储系统.云存储系统通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统.国内外各大厂商也纷纷推出自己的云存储系统,本文中主要介绍各类云存储系统所使用的主流技术以及云存储在安全方面所存在的一些问题,最后指出云存储系统在未来的发展方向.     

基于Ceph对象存储的云网盘设计与实现

针对基于传统NAS存储实现云网盘存在扩展性差,响应性能低、数据不可靠性、安全性低等问题,提出一种基于Ceph分布式对象存储系统构建高性能、高可靠、可扩展的云网盘设计与实现方案,底层基于X86服务器作为Ceph存储集群池,通过设计多对象网关发布对象存储服务,采用软负载均衡,提升云网盘请求响应吞吐能力,并集成基于Token认证系统实现对象数据的隔离与安全。经实验测试表明,该设计实现方案可满足现实应用需求。     

云存储系统的分析与应用探讨

目前社会越来越向信息化的方向发展,随之出现了一个新的概念一云存储的概念。云存储系统指的是通过集群应用、网格技术或分布式文件系统等功能,将网络中大量的、类型不同的存储设备通过应用软件集合起来一起工作,共同对外提供数据存储和业务访问功能的一个系统。云存储可以看作具有更大存储空间的云计算系统。因此,可以说云存储系统比云计算系统具有更优的性能。基于此,云存储系统目前有着非常广泛的应用,主要可以为企业或者个人提供足够的空间来存储数据。笔者通过结合自己工作中有关云存储的一些经验,对云存储系统进行了一定的分析,并且对于其目前的应用情况进行了探讨。