CSFS：云存储服务支撑的文件系统设计与实现

云存储服务性能开发是云端数据技术的重要课题。提出了一种基于云存储服务的文件系统数据存储架构,描述了一个基于该架构的云存储文件系统( CSFS)设计及实现。通过利用免费邮件服务降低了开发和部署成本,通过数据与元数据分离管理、分布式存储、云端数据预取等技术提高了系统的高效性和可扩展性。测试结果表明：相关优化技术有效提高了系统的读写性能。     

基于Fabric区块链的智能合约协同开发系统

针对传统协同开发系统普遍采用"中心化"存储架构带来的单点故障、数据不可信、故障难以追责等安全问题,以及传统协同办公系统仅支持单一企业内部办公的问题,本文借助超级账本Fabric区块链技术以及业务流程管理和服务组合技术实现了一款基于Fabric区块链的智能合约协同开发系统.系统架构中首先结合传统中心化存储技术和区块链去中心化存储技术,通过将系统核心业务数据信息存储在区块链分布式账本中而把业务流程管理等不重要的数据存储在传统数据库中解决了"中心化"存储管理带来的安全信任问题.其次系统通过结合超级账本联盟链技术提供的企业联盟的特点使得系统可以应用于企业联盟办公中,解决了单一办公的问题.     

一种面向车辆位置信息的异构数据实时云存储及可视化

随着各种机动车数量连年持续不断的增长,如何对其进行实时有效的管理就成为有关部门面临的迫切需要解决的实际问题.利用基于物联网技术所发展起来的车联网方案来解决此类问题成为了一个必然的方向.本文提出一种基于移动终端的异构数据获取并远程实时的云存储及相关数据融合并可视化的系统架构.开发移动终端应用程序用于实时获取文本、图片、视频三种具有不同数据结构特点的异构数据,在远程通信的基础上实现三种数据的分类云存储,并在云存储的基础上实现数据融合等相关应用.测试表明,整个系统工作稳定有效,效率较高,可以满足相关部门对于车辆管理的需求.     

云服务中数据完整性验证技术综述

随着业务量的不断增长,越来越多的企业接受了云计算,数据也从本地迁移到了云端.这种新的数据存储模式也引发了众多安全问题,而如何确保云服务器中数据的完整性是其中的关键问题.数据拥有者亟需一个稳定、安全、可信的完整性审计方案,用于审核云服务器中数据的完整性和可用性.阐述了云计算环境下数据完整性系统模型和安全模型,以及云存储数据完整性审计的研究现状,并重点分析了部分经典方案,通过方案对比,指出当前方案存在的优点、缺陷,以及云服务中数据完整性验证当前仍然面临的安全与隐私挑战,并探讨了该领域未来的研究趋势.     

基于改进跳表的云端数据完整性验证协议

在云存储应用中,用户数据的完整性是用户最关心的问题之一,用户提交到云存储服务提供商处进行在线存储的文件面临着丢失以及被篡改的风险,因此用户需要通过使用某种技术手段对从云端取回的数据进行完整性的验证,以确定正在访问的数据是完整和正确的。考虑到在云存储系统的应用环境中用户计算资源受限的特点和云存储的安全需求,基于改进的跳表和短签名技术,该文提出一种能够对云端数据的动态操作提供良好支持的完整性验证协议。在跳表中引入可达范围计数以便高效地支持数据块在任意位置的插入或者删除操作,有效减少了执行动态操作时产生的计算开销。通过性能分析与实验比较,证明该协议是高效的。     

基于Flash存储的具有图像压缩功能文件系统的设计

按照嵌入式操作系统对图像数据存储的要求,基于Flash存储和嵌入式图像编码算法EZW开发了一个嵌入式文件系统.同时分析了文件系统的各个层次的功能,特别对文件系统应用程序接口的实现过程,应用可靠性进行了深入的研究,并提出了具体的设计方法.     

基于对等网络的面向小文件的云存储系统

针对目前主从结构的云存储系统在存储小文件延迟过大的问题,提出基于对等网络(P2P)的分布式云存储系统.通过改进Chord路由算法提高了资源的查询效率,在系统中引入中心路由节点,中心路由节点上存储系统中所有节点的路由和状态信息,使资源查询时间复杂度缩短到O(l),客户端预取中心路由节点数据,从而减少数据操作时的时间开销;系统通过备份的策略来保证数据的可靠性,实现中数据备份数为3;系统实现了文件存储、读取、删除及列目录等基本操作功能.实验结果表明,与Hadoop HDFS文件系统相比,该系统的小文件操作时间减少了一个数量级.     

基于区块链的医疗数据云存储共享方案

云服务可提供大量的存储空间,但是单一的云环境无法提供安全的数据存储和共享.而医疗数据的安全存储和共享是保证医疗数据安全的重要内容.公开审计技术保护存储在云中的数据不被篡改,从而实现医疗数据的安全存储.区块链的可公开访问及其上数据不可篡改,实现了医疗数据的安全共享.本文使用公开审计技术,提出基于区块链的医疗数据云存储共享方案,为医疗数据提供安全有效的存储和共享服务.     

纯XML数据库存储性能的研究

针对XML数据存储在文件系统、Native XML数据库和XML-enabled数据库中性能的差异,基于3种XML数据存储方式的基本原理,提出了以查询响应时间为性能指标,以XMark为基准测试工具的性能评价方法.设计并完成了文件系统和X ind ice系统的对比实验,并根据实验结果明确了不同应用系统适用的XML存储方式.     

皮纳卫星数据存储系统设计与在轨验证

为提高皮纳卫星数据存储系统性能和可靠性,提出了一种基于3种介质的"三级数据存储+三模容错架构"存储系统策略.首先,基于对星载存储介质的现状和故障特性分析,选择存储器件;然后对文件系统操作流程进行详细研究,提出错误来源;由此提出了采用ECC纠错、冗余备份和电流保护的方法提高系统可靠性;提前预分配文件空间,建立环形数据存储结构,以减少FS操作复杂性,降低错误率;结合RAM、FRAM、SD卡(secure digital card,SDC)三者的优点,采用三级数据存储策略来提高存储速度和故障容错能力;最后,通过地面实验测试,在1 MB总数量时,数据写入速度提高约4.7倍,任一SDC异常或者系统突然断电均不影响系统正常工作,数据丢失≤1帧,故障切换时间≤10 ms.卫星在轨运行过程中,FS、文件和介质均工作正常,且未影响其他系统工作.地面实验和在轨验证结果表明,数据存储系统方案有效可行,系统可靠性和读写性能均能满足卫星系统的任务需求.     

基于Swiftstack的云存储关键技术研究

云计算的发展虽然使用户可以便捷的访问数据,但系统的高并发性访问和数据处理等问题影响着云存储的使用。文章针对开源云计算、云存储发展中系统架构设计和负载均衡问题提出了改进方案。本文首先对系统架构进行设计,提出了适合大、中规模部署情况下负载均衡的设置策略。采用一致性哈希、误删除恢复及节点间互备等技术保证云数据的完整性。最后通过实验对云存储进行大、小文件非结构化数据的写入性能测试,实验结果表明Swiftstack云存储能够满足用户的对云存储的使用要求。     

具有马尔科夫特性的云存储改进优化算法

为了提高传统移动端云存储系统的存储效率,文中提出了一种基于马尔科夫链的安全云存储优化算法,将云系统中任意两节点的存储过程近似为马尔科夫过程,通过分阶段采用稳态马尔科夫策略对云系统中数据的安全存储进行预测,在计算各节点的存储代价的基础上采用再加密技术及优化技术,构建移动端云存储系统的安全优化模型,实现云存储的安全优化,保证移动端云存储访问。在存储过程将高级加密标准(AES)和公钥加密(RSA)加密算法结合并再次加密用于云存储的安全设计,以实现移动端云存储策略的安全性。仿真实验表明:存储优化算法能根据数据大小不同选择存储代价最小的节点,保证云系统数据的安全存储,提高了移动端云系统的存储效率,验证了基于马尔科夫链的云存储优化算法具有较高的可靠性。     

传感云中基于边缘计算的差分数据保护方法

为了改进存储机制,以提供一个通用的隐私保护服务,提出了一种基于边缘的数据保护模型,将无线传感器网络收集的原始数据交由边缘服务器,并利用隐私计算算法进行差分处理.少量核心数据存储在边缘服务器和本地服务器上,其他数据传输到云端存储.基于该模型,即使存储在云中的数据被泄露,原始数据也无法被恢复,数据的隐私权得以保证;采用差分存储方法,减少了发送到云端的数据,降低了通信成本和存储成本.理论分析和大量实验结果证实了该方法有效.     

云架构语音督察系统

为解决传统集中式语音监听系统带宽占用大、存储效率低从而不易扩展的弊端,提出了采用云计算架构的语音督察系统.云架构语音督察系统采用分布式架构,通过逻辑统一、物理分离的方法将计算和存储等压力分布到区域服务器,设计网络调度算法将网络流量集中在区域内,避免核心网络的负载压力过大;通过调度算法对各服务器的压力进行调度,实现全系统的负载均衡和冗余备份,保障系统的稳定性和可靠性;结合云计算架构特点构建了10个音频服务以实现语音督察系统的实时监听、音频存储与备份、历史音频查询与回放及问题督察等功能.实验验证传统集中式语音监听系统随着规模扩展中心网络的吞吐也不断扩展,而云架构语音督察系统却增长很小,证明了云架构语音督察系统的易扩展性.     

海量下的分布式文件系统测试平台设计与实现

为了对海量存储中的分布式文件系统的容错能力进行测试,设计并实现了基于海量存储下的自动化分布式文件系统测试平台,采用从服务层和目录文件层进行故障注入的技术,其中包括服务器失效和目录文件操作失败等多种故障.该平台集成了注入故障工具、系统监测工具和工作负载工具,工作人员可通过平台的主控端进行评测.通过实验数据表明,该测试平台能够有效评测不同文件系统的容错性能,并对不同存储系统的各项技术指标进行比较.     

云计算及云存储的管理技术

给出了云计算的定义,提出了云计算的架构,描述了云计算的特点.以Google GFS云存储和数据管理技术(B igtab le)为例,系统地阐述了云存储与管理关键技术,并就云存储的安全问题进行了讨论.     

基于ADO.Net2.0实现数据库系统中BLOB数据的处理

数据库系统中可以存储图像、文档、音频、视频等BLOB数据。基于ADO.Net 2.0所提供的数据访问接口和文件流技术,可以对数据库系统中所存储的BLOB数据进行有效处理。提出数据库系统中BLOB数据的两种存储策略：数据表方式和＂数据表＋文件系统＂方式,并对两者进行了分析和比较,在此基础上基于ADO.Net 2.0对两种策略下BLOB数据处理的关键操作进行了阐述。所提出的对于两种存储策略下BLOB数据的处理方法已成功运用于实际项目开发。     

ZFS在基于Hadoop的视频存储系统中的应用

随着视频点播技术的不断发展,视频数据呈现出爆炸式增长,对文件存储及其扩容性方面提出了苛刻的要求。该文首先简单地描述了数据存储服务集群及该集群主要采用分布式平台Ha-doop,使用ZFS动态文件系统作为后端存储文件系统。接着简单介绍了ZFS的特性,其次着重介绍ZFS在HDFS上的集成设计,最后通过相应的实现和ZFS性能比较测试,证明ZFS文件系统在视频文件存储中具有很好的应用价值。     

敏感数据自主可控的云存储平台元数据管理

针对传统云存储平台的敏感数据的安全问题,将元数据管理分成客户端元数据管理与云端元数据管理两部分,元数据子服务器自主提取、维护、读写和存储敏感信息的元数据,在映射关系方面采用基于文件与数据块之间冗余随机映射算法提高文件存储的安全性,同时采用按需询问同步策略保障元数据子服务器与云端元数据服务器之间的数据块到数据存储中心映射关系的一致性,确保整个存储系统的稳定性与可靠性.在多用户并发访问下,对不同规模数据集的读、写性能的实验测试表明,该存储系统在自主管理敏感信息元数据的前提下,与HDFS、GFS相比仍具有较好读写性能和稳定的数据持久化能力.