通信运营商大数据量系统数据存储云化浅谈

基于上海电信实现无线网管系统数据存储云化的实践经验,简要介绍了该类系统当前特征和问题,详细论述了数据存储云化框架和动态扩容、map/reduce数据处理、重复数据删除、差分增量备份等关键技术。     

正确选择重复数据删除

重复数据删除（Data deduplication）无疑是存储行业近年来最热闹的技术,甚至有分析师认为重复数据删除是“10年来最重要的存储技术创新”。重复数据删除之所以在短时间内窜红,主要原因在于其诉求点非常简单——消除传统备份技术衍生出的重复存储数据问题,进而为企业节省成本,而这些诉求又恰巧符合了现今IT行业大力提倡的节能环保理念。     

公共云存储中私密数据的去重删除研究

为了降低公共云存储系统的空间开销,对公共云存储中私密数据的重复数据进行归并和删除处理,提高云存储容量,提出一种基于语义本体特征匹配检测的公共云存储中私密数据的去重删除技术。采用交叉分布方法进行公共云存储中私密数据的特征分解,根据数据的属性类别进行存储空间区域划分,提取私密数据的语义本体结构信息特征量,根据提取的特征量进行匹配检测,根据语义属性实现对重复数据的自适应筛选,对筛选出来的重复数据采用矩阵分解方法进行特征压缩和删减,实现去重删除。仿真结果表明,采用该算法进行公共云存储中私密数据的去重删除处理,提高了存储空间的容量,降低了数据存储的维数,实现了私密数据的优化存储。     

BakBone发布NetVault Backup8．5

近日，BakBone在北京发布其旗舰产品NetVault Backup 8．5版本以及提供了基于磁盘备份和重复数据删除选项的NetVault SmartDisk。NetVault SmartDisk是基于BakBone最近发布的开放数据保护平台的第一款产品。BakBone市场副总裁Jeff Drescher表示：“我们对未来的规划是：BakBone开放数据保护平台利用同一个重复数据删除方案帮助用户整合他们已有的数据保护方案，允许用户存储来自其他数据保护方案提供商的数据并对其进行重复数据删除，从而降低花费并为用户提供更具灵活性的选择。”     

监控机房桌面云数据备份方案

集中存储是桌面云系统的重要组成可靠性、连将桌面云技景,作者对行了分析,部分,可保证业务数据续性的备份技术。针对术应用于监控机房的场已存的多种备份方案进并通过对比,选择了合适的备份方案。     

基于密文采样分片的云端数据确定性删除方法

“确定性删除”技术旨在保障云服务器内过期或备份数据的确定性删除,使数据被彻底删除或者是永远不可解密和访问的,以保护用户的数据隐私性。但现有方案仅仅只删除了密钥,云端密文依旧完整,一旦密钥被窃取,会威胁数据隐私性,因此未实现“真正”意义上的确定性删除。针对上述问题,提出了一种基于密文采样分片的方案,来实现云端数据的确定性删除。利用密文采样分片思想,使云端存储不完整的密文,即使在密钥被泄露的情况下,也能保证数据的高机密性。而对采样密文的销毁,也实现了云端数据的即时确定性删除。理论分析以及实验结果表明,所提方法能够满足云存储系统中机密数据的确定性删除要求,并且在性能开销低的同时能提供比现有方案更高的安全性。     

云灾备关键技术

信息系统的容灾备份是灾难发生时确保业务连续性和数据可用性的重要手段。云灾备是客户付费使用灾备服务提供商提供的灾备服务的一种灾备模式。客户可以利用服务提供商的优势技术资源和成熟的运维管理流程,快速实现灾备,降低灾备系统的总体拥有成本。文章介绍云灾备的3个关键技术：重复数据删除技术、云存储安全技术和操作系统虚拟化。前两者解决数据级云灾备中的效率和安全性问题,后者解决系统级云灾备的灵活性问题。云存储安全技术的发展是云灾备能否得到广泛应用的一个决定因素。     

云存储(3)

云存储是随着云计算的产生而发展,并逐渐成为研究热点。云存储是云计算的存储部分,并且可以作为一种服务提供给用户,任何经过授权的合法用户都可以通过网络访问云存储,享受云存储带来的便利。本讲座将分3期对云存储进行讨论:第1期介绍云存储的定义、与传统存储的区别、种类、结构模型及相关标准;第2期介绍云存储的关键技术,包括存储虚拟化技术、分布式存储技术、对等存储技术、存储加密技术、重复数据删除技术、内容分发技术、数据备份技术;第3期探讨目前云存储的成功案例以及云存储的发展趋势。     

云存储(1)

云存储是随着云计算的产生而发展,并逐渐成为研究热点。云存储是云计算的存储部分,并且可以作为一种服务提供给用户,任何经过授权的合法用户都可以通过网络访问云存储,享受云存储带来的便利。本讲座将分3期对云存储进行讨论:第1期介绍云存储的定义、与传统存储的区别、种类、结构模型及相关标准;第2期介绍云存储的关键技术,包括存储虚拟化技术、分布式存储技术、对等存储技术、存储加密技术、重复数据删除技术、内容分发技术、数据备份技术;第3期探讨目前云存储的成功案例以及云存储的发展趋势。     

云存储(2)

云存储是随着云计算的产生而发展,并逐渐成为研究热点。云存储是云计算的存储部分,并且可以作为一种服务提供给用户,任何经过授权的合法用户都可以通过网络访问云存储,享受云存储带来的便利。本讲座将分3期对云存储进行讨论:第1期介绍云存储的定义、与传统存储的区别、种类、结构模型及相关标准;第2期介绍云存储的关键技术,包括存储虚拟化技术、分布式存储技术、对等存储技术、存储加密技术、重复数据删除技术、内容分发技术、数据备份技术;第3期探讨目前云存储的成功案例以及云存储的发展趋势。     

基于索引的文件备份方案

针对数据备份服务器上存在大量相同文件冗余的问题,提出了一种新的基于索引的文件备份方案,其核心是用二维链表形式对备份文件建立索引,并对相同的文件只存储一个副本,从而消除重复文件的冗余,达到节省存储空间的目的。该方案包括以下几个部分:相同文件的识别、文件的存储、文件夹的处理、文件备份过程和备份的更新.理论分析和实验表明,该方案较传统方法节省了存储空间,但备份过程中的系统负载和时间消耗有所增加.     

一种基于单片机的多用途数据采集系统设计

介绍了一种低成本、高稳定性、多用途的数据采集系统的设计方法。该系统以51系列单片机为控制核心，具备转发指令、数据备份及传输、操作提示等功能，适应性较广，特别适合于对计算机外围设备进行数据采集和备份。     

面向企业文档安全存储的分布式文件系统

业界普遍认为解决企业文档安全存储问题应包括集中存储、权限控制以及流程管控3个方面。集中存储是基础,在实现数据统一管理的同时,也带来了新的安全风险和需求,如容量扩充、灾难恢复、访问受控等。采用私有云存储解决企业文档的安全存储已为业界普遍看好,但是目前建立私有云存储方案的高昂成本以及由此而导致现有IT设施的浪费却难以为众多企业所承受。文中描述了广州国迈科技的魅云分布式文件系统的设计原理,它结合了目前商用云存储系统的核心技术思想,强化了面向企业文件操作和管理的安全性特征,在企业现有的IT设施基础上实现了文件存储的海量支持、弹性扩容、冗余备份、故障恢复、异地备份、透明使用、安全可靠等重要功能。     

ECC-CRT: An Elliptical Curve Cryptographic Encryption and Chinese Remainder Theorem based Deduplication in Cloud

Wireless Personal Communications - Cloud computing provides the data storage facility for the maintenance, management and remote backup of the data. The storage cost and data retrieving time has...     

浅谈RAID磁盘阵列功能及组网

在社会信息高速发展的今天，数据存储容量也在与日俱增。如何能有有效、安全的存储数据信息，这是我们急切需要面对的问题。该文引入了存储系统RAID磁盘阵列的常用技术及组网方式，可以有效地解决数据存储的可恢复性、扩展备份及容灾性，满足各种数据存储的要求。     

一种基于 DHT 的分布式云灾备模型研究

云存储服务,作为云计算的衍生产物,目的是为网络海量数据的存储提供有效的解决方案,节约存储成本和系统资源,提供一个完善的备份、容灾的数据中心,并能够保证数据安全性、容错性。现阶段云灾备模型局限于有限的网络位置,使用虚拟化技术,依托本地服务器实现,与传统云灾备模型不同,介绍了一种基于DHT的云灾备模型,可适用于广域网的、普适的数据级灾备解决方案。     

一种基于OPM200和IBBS50L的极简基站

在5G网络、大数据中心、边缘计算等新基建快速推进的大背景下,受限于存量天面空间、存量供备电系统、机房空间容量不足以及站址租金居高不下等问题,5G网络的大规模建设给通信公司运营成本方面带来巨大挑战。文章从引入背景、改造方案及成效等方面入手,探讨基于华为刀片电源OPM200作为主电、IBBS50L锂电作为备电的极简基站如何破解5G发展遇到的难题。     

块备份数据多版本融合方法

在多版本备份数据存储系统中,版本链的长度直接影响着历史版本的检索效率。针对该问题提出了一种块备份数据多版本融合方法,通过增量备份数据版本序列之间的融合产生任意时间点的全量快照备份数据。理论分析表明:该方法可以有效提高版本链中目标版本的检索效率。进一步根据块备份数据的分布特点,提出变长数据块版本融合算法,降低快照版本融合的计算复杂度。最后给出了版本融合技术在多版本备份数据管理中的具体应用和性能分析。模拟实验结果表明:使用版本融合技术在相同版本链长度下,可以大量减少冗余版本备份数据量,有效提高多版本条件下全量数据的恢复效率。     

Personal Cloud P2P

Small and medium sized businesses have lacked of good and automate backup system. Data storages are unreliable and tend to fail without any warning. Whereas, personal computers are already equipped with terabytes of hard drives. This is enormous space for personal or business use. Under normal working conditions, more than half of total storage space is not being used. It is scattered in all connected devices. This paper proposes pooling unused storage resources to create a personal private cloud. The process will be transparent to the users by having a reliable drive with an auto backup built in. The proposed system solution uses a replica-based model in which three sets of the same information would distribute and keep in three different nodes. All the participated nodes are peer-to-peer (P2P) and are decentralized. Therefore, private cloud system can support small or medium businesses as backup system or business sharing drives without adding any cost.

     

企业数据库备份与恢复技术研究

当今社会已经是一个信息化的社会,存储介质已经从纸质变成了移动存储设备、服务器端等电子存储介质,数据库的备份和恢复变得极其重要,在各个行业中都占据了一席之地.数据的安全关系到企业工作的正常进行,如果出现数据丢失、数据库系统崩溃,将对企业造成毁灭性的灾难.如何确保数据的安全存储引起了各个企业的重视.各个企业一般采取对企业数据库进行备份和恢复,来确保企业数据库的安全,本文首先介绍了数据库备份和恢复的基本概念,之后分别对企业数据库的备份技术和恢复技术进行了展开介绍.