H Base 下时态信息索引策略研究

针对海量非结构化时态信息存储与快速检索的需求,提出使用Hadoop 平台下的分布式、非结构化数据库HBase对海量时态数据进行存储,构造以时态集合为时态存储单元的时态数据存储模型;设计了多级分布式哈希索引表算法（ tDHT）,实现对时态列族的时态属性值的高效、快速的检索。通过将时态属性值向二维空间映射,实现时态数据向空间对象的转化,采用对空间数据的处理方法对时态数据区域进行划分,生成多级时态数据子区域,利用分布式哈希表思想设计HBase存储的多级索引表目录。实验结果表明,该索引策略具有较高的性能,可以在一定程度上加快对HBase中时态信息的检索速度。     

基于NoSQL的PDM零件非几何信息存储策略

MBD技术在制造业上的应用,使现有PDM系统中存在着大量RDB难以处理的非结构化数据。提出了一种PDM混合数据存储策略,用RDB存储零件的描述信息,而其实际内容则用NoSQL数据库存储。该方案不仅可以利用RDB的结构化特点来方便查询与统计,还能充分利用No SQL灵活的存储结构较快处理非结构化数据。实验结果表明,该策略可以有效的提升查询速度,降低数据的存储空间。     

基于HBase的输电线路综合数据存储方案设计

输电线路综合数据具有复杂性、体量巨大及多源异构等特点。针对当前关系数据库对于视频图像、图片等非结构化数据处理能力不足的问题,结合大数据的相关理论,提出基于Hadoop和HBase的输电线路综合数据的存储方案,将结构化数据和非结构化数据均转化为Bytes数组存入HBase数据库,并阐明具体的存储原理和工作方式,有效地解决了原有数据信息共享性差、非结构化数据难以存储等难题,弥补了关系数据库的不足,为大数据时代下智能电网的信息化建设提供思路。     

基于云存储的网络文档共享系统

针对非结构化的海量文档获取困难的问题,设计和开发了基于云存储的网络文档共享系统。该系统采用了Hadoop和Lucene以及Mahout来实现对文档存储、全文检索和推荐。通过测试证明,网络文档共享系统可以使用户更快速高效地获取文档。     

基于Swiftstack的云存储关键技术研究

云计算的发展虽然使用户可以便捷的访问数据,但系统的高并发性访问和数据处理等问题影响着云存储的使用。文章针对开源云计算、云存储发展中系统架构设计和负载均衡问题提出了改进方案。本文首先对系统架构进行设计,提出了适合大、中规模部署情况下负载均衡的设置策略。采用一致性哈希、误删除恢复及节点间互备等技术保证云数据的完整性。最后通过实验对云存储进行大、小文件非结构化数据的写入性能测试,实验结果表明Swiftstack云存储能够满足用户的对云存储的使用要求。     

基于云存储的数据安全性分析及措施

云存储随着云计算的发展应运而生,然而针对上传到云存储里的数据,数据的安全性又是当今云存储的瓶颈,本文针对数据安全采用了传输加密和文件碎片存储加密两种措施,实现了基于云存储中的数据的机密性、完整性、可用性等安全特性.     

基于XML的Web半结构化信息抽取

Web信息抽取是信息抽取技术在B/S体系中的新发展,在增量信息存储与搜索中有着广泛的应用。本文阐述的基于XML的Web半结构化信息抽取,是将Web表示层作为信息源,基于XML、JTidy数据清洗及Xquare-bridge等技术及开源项目,实现Web中半结构化的隐式信息点抽取,生成结构化、语义更清晰的表示及存储形式。     

基于云数据库的公共自行车管理软件平台

针对公共自行车租、还不便,信息未及时反馈给工作人员以及用户等问题,提出了基于云数据库的公共自行车管理软件平台. 该平台包括管控终端,中心控制网关、数据监控服务以及公共自行车管理系统四大模块. 公共自行车管理系统采用J2EE、Struts、Spring、Hibernate等框架来设计,并在数据库层采用云数据库存储的技术来管理和处理数据. 云数据库将底层的关系型数据库抽象成一系列的服务节点,并给予定制的结构化查询语言进行数据库访问,同时云数据库对外提供一个有效的统一资源定位符（URL）,用户通过这个URL可以很方便的访问云数据库,进而实现租、还自行车的操作. 研究表明将各个自行车站点的信息部署在云数据库中来进行统一的管理,可以有效地提高信息的访问效率,方便用户租、还自行车,满足系统的应用需求.     

信任实体与ABE密码体制相结合的云存储加密模型

为了实现云存储加密数据快速检索及确保数据存储和传送的安全,提出了一种云计算环境下基于信任实体与ABE密钥体制相结合的云存储加密模型.在分析现有云存储加密技术面临问题的基础上,将ABE密钥体制中非对称公私密钥对模型,结合介于数据提供者、云服务器和云用户三者都信任的第三方机构来实现云存储加密设计,给出了云中数据在存储和传送中的访问控制流程.该模型对云存储密钥由谁控制、在哪儿管理进行了重新界定,保证了云存储环境下数据的安全性和可靠性,并且具有较好的灵活性.     

基于云存储技术的数据安全策略研究

当今,在互联网和云计算技术背景下,企业海量的数据通过网络被放置在云存储系统中,云存储平台服务主要通过网络环境来实现,数据的安全性是用户非常关注的问题。在探讨云存储系统基本概念和优势的基础上,分析了云存储面临的安全隐患,并研究了云存储系统下数据的安全防范措施,以求进一步保证云存储数据的安全。     

基于层级设计的输变电工程数据存储架构

针对输变电工程数据来源多样、类型复杂、数据量大导致数据存储压力大的问题,提出了一种基于层级设计的输变电工程数据存储架构.将输变电工程数据划分为结构化数据和非结构化数据,使用不同的存储方式以优化配置存储资源;使用基于遗传算法的数据迁移方法实现海量数据的迁移,使用不同配置的数据存储中心进行仿真与测试.结果表明,所提出的存储架构和数据迁移方法能有效解决海量输变电工程数据存储的问题,提升输变电工程数据存储系统的性能.     

大数据基元的HBase数据库存储模型与实现

大数据将在未来经济、社会和生活等领域产生深远影响,而大数据的整合存储研究为促进和深化其应用范围有重要的理论和实践意义。本文利用分布式文件系统HBase的数据存储结构特征,采用可拓学基元对异构数据集进行整合处理并存储在HBase数据库。通过提取数据特别是半结构化和非结构化数据的典型特征和属性取值并转换为基元后生成一个新的数据集,不但为数据分析和数据解释提供一种新的实现方式,而且为领域问题的策略生成提供大数据的研究思路和解决方案。     

分布式存储在数字集群移动通信系统中的应用

当传统数字集群移动通信系统中加入大数据量的新业务时,原有的数据存储查询方案将严重影响系统的可靠性,该文提出了一种使用分布式存储系统进行数据存储查询的方案。方案中的分布式存储系统采用结构化P2P网络结构,使用了一种基于分布式哈希表的chord算法来实现资源的分布与定位。     

基于NoSQL数据库的地学大数据高效存储方法

为解决传统的关系型数据库在海量数据的存储和访问效率中存在的瓶颈问题,提出了一种基于非关系型（NoSQL：NotonlySQL）数据库的地学大数据高效存储方法。同时以MongoDB为代表,通过C#语言编写测试程序,与SQLServer在地学大数据的存储、查询等方面进行了性能对比。结果表明,与传统关系型数据库相比,NoSQL数据库的增、删和查询耗时明显降低,尤其是针对海量的非结构化、半结构化数据,其性能优势更加明显。     

C/SiC复合材料数据库的逻辑结构设计

C／SiC复合材料数据库对在材料研究过程中获得的全部信息实现可靠、高效的存储和访问。在遵守关系数据库第3范式的基础上，基于Oracle的支持，采用了非第1范式的对象数据类型——嵌套表，建立了对象一关系数据库，并利用UML语言完成数据库逻辑建模。根据应用需求定义了用户视图，制定了数据规范、约束、触发器等以保证数据的完整性和一致性。数据库保证了研究信息的可追溯性，为数据的管理和规范提供了有力的工具。     

Phoenix+HBase存储仓库在流动人口统计中的应用

利用Phoenix+HBase存储仓库对流动人口统计数据库进行读写和查询。在Spark计算框架下将不同类型的数据以结构化的方式存入分布式数据库中,测试该存储仓库的读写及查询性能。对比实验结果表明,Phoenix+HBase既可以操作非结构化数据又可以操作结构化数据,并且查询效率比Hive有明显提升,满足流动人口统计对数据库存储的需求。     

基于Bloom Filtering检测的安全重复数据删除技术分析

数据的不断增长推动了云计算、云存储的发展,大量数据被存储到云端,数据的不断积累占据了太多存储空间.为了节省空间,重复数据删除技术被提出并广泛使用.在原始信息锁加密的基础上进行改进,引入布隆过滤器来实现重复检测,继而完成安全存储.对方案性能进行分析后发现,可以实现基本的安全机密性,并降低了计算开销.     

时空二维雷达信号处理中的复杂可编程逻辑器件

多通道时－空二维自适应滤波技术和时域－频域二维恒虚警检测技术,是机载相控阵雷达中的先进信号处理技术,在时－空二维雷达信号处理机中实时时,电路复杂,运算量大,特别是时－空二维自适应滤波中的数据缓存储电路,存取格式繁杂,因此,在实现时－空二维二自适应滤波和时域－频域二维恒虚警检测技术时,充分利用可谐和逻辑器件,不仅可以提高设计的灵活性、可靠性,也可以缩小体积。     

储油罐虚拟环境建模方法研究与发展现状

储油罐虚拟环境模型的创建,有利于解决油罐内摄像头失效情况下真实清洗机器人运动状态未知的问题,是进行储油罐清洗机器人遥操作过程的关键.基于此,从结构化环境方向详细介绍了基于OpenGL、VRP、VRML、WTK虚拟环境建模研究以及基于逆向工程三维激光扫描技术研究,从非结构化环境方向描述了基于点云信息和SFM三维场景建模方法及应用;分析了储油罐虚拟环境建模的研究现状、基本步骤以及储油罐虚拟环境建模过程中待解决问题,最终提出了利用实时交互的基于点云信息三维场景建模方法进行储油罐虚拟环境建模的发展趋势.     

我国云存储研究现状及趋势——基于CNKI的期刊论文计量分析

借助文献计量学和内容分析方法,使用Citespace V对375篇期刊文献进行可视化分析,依照所得的科学知识图谱,分析近几来我国云存储研究的现状、热点和前沿,并据此推测云存储未来研究趋势。结果显示,国内云存储研究起步于2010年,此后云存储研究发文数量总体呈上升趋势。我国云存储的研究主要涉及数据存储、云存储服务访问控制、数据完整性以及私有云等研究领域。最后,提出未来云存储研究建议:加大对云存储的推广,推进云存储用户信息行为和安全风险研究;加强参与云存储研究机构和学者之间的合作与交流;加大数字图书馆、云存储系统和私有云存储等方面的研究。