首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到20条相似文献,搜索用时 109 毫秒
1.
基于分布式的RDF数据分割方法能够解决大规模RDF数据的分割和存储问题。为保证RDF数据的分布式存储和解决数据分割效率提出了一种基于贪婪策略的分割方法。先通过启发式贪心策略根据子图的负载均衡,依次选择度数最高的节点或者度数相对较高的节点,将其放入同一个子图中,后进行相邻顶点的优化。然后通过分区策略将子图分配到对应节点,存储到neo4j数据库并建立相应的索引将数据保存到Redis数据库。实验对比了几种数据分割算法以及图形数据库与关系型数据库的RDF数据存储方案,并验证了RDF图数据的存储方案和分割算法的有效性。  相似文献   

2.
为解决SaaS(Software as a Service)应用中多租户重复定制造成的数据冗余存储问题,提出一种基于元数据的差异数据存储方法。该方案研究传统元数据驱动的存储模式,通过对元数据的分类定义,给出差异存储方案的形式化语义和数据存储策略。最后分别对增删改查操作提出该方案的数据访问算法。计算表明,差异存储方法在冗余减少的概率分析下显示出较高的存储空间利用效率,有效地减少了租户的冗余存储。同时性能测试结果还反映出该方案具有较好的数据访问性能。  相似文献   

3.
针对基于纠删码的分布式存储方法中信息分割算法IDA在运算中涉及构造拆分矩阵,计算开销大,且单纯基于纠删码的方案无法确保所存储数据的完整性、机密性等特性,只能够容忍系统中存在的良性故障,无法容忍入侵者的恶意入侵。提出了分布式系统中一种基于Tornado码的浏览器-服务器工作模式的数据存储方案。在数据写入过程中通过构造编码后数据分块的Hash值级联(即数字指纹),并与每个数据分块一起分布在存储服务器集中的不同服务器中,当需要读出时对分块及数据指纹进行验证,然后利用Tornado译码方法恢复原始文件,即可实现Byzantine环境数据的完整性保护,并提高了系统的容错能力。  相似文献   

4.
张云亮 《信息与电脑》2023,(6):203-205+209
基于异构网络的多媒体分布式数据库存储设计能够提升互联网通信效率,实现不同类型数据的汇集和存储,从而满足数据急剧增长和类型多变的要求,进一步达到存储异构网络汇总的海量数据目标。文章主要对多媒体分布式数据库存储方案的设计和实现过程进行分析,并通过结构化数据压缩算法测试和存储方案测试得出系统的使用性能,以期更好地进行实际推广应用。  相似文献   

5.
分布式存储方案的设计与研究   总被引:1,自引:0,他引:1  
针对基于纠删码的分布式存储方法中信息分割算法IDA在运算中涉及构造拆分矩阵,计算开销大,且单纯基于纠删码的方案无法确保所存储数据的完整性、机密性等特性,只能够容忍系统中存在的良性故障,无法容忍入侵者的恶意入侵.提出了分布式系统中一种基于Tomado码的浏览器-服务器工作模式的数据存储方案.在数据写入过程中通过构造编码后数据分块的Hash值级联(即数字指纹),并与每个数据分块一起分布在存储服务器集中的不同服务器中,当需要读出时对分块及数据指纹进行验证,然后利用Tomado译码方法恢复原始文件,即可实现Byzantine环境数据的完整性保护,并提高了系统的容错能力.  相似文献   

6.
基于HLA仿真中的数据记录中间件的分析与设计   总被引:1,自引:0,他引:1  
分析、比较了基于HLA仿真中的数据记录方法、格式、内容及存储方式,设计并实现了RTI接口数据记录中间件,提出了二进制文件和数据库相结合的仿真数据存储方案,满足了不同类型仿真的性能需求,并支持仿真数据的进一步分析的开采。  相似文献   

7.
基于演化计算的XML数据的关系存储   总被引:5,自引:0,他引:5  
随着XML规范的制定和推广,XML数据管理技术受到数据库界广泛重视,XML数据的存储是XML数据管理的关键.研究了利用数据库技术和人工智能技术,为XML数据的关系存储提供一种灵活的策略.首次提出了代价驱动的基于遗传算法的关系存储策略CDGABRS,针对不同的用户和查询模型,产生不同的映射模型方案,引进遗传算法,计算对应的系统开销,从中求出使系统的存储代价和查询代价最优的关系存储方案.实验证明了CDGABRS方法的可行性和高效性.  相似文献   

8.
针对分布式数据存储中空间效率低、计算复杂度高等问题,基于 Jordan 矩阵和拉格朗日差值公式,提出了一种一般访问结构上高效的分布式数据存储方案。方案是计算安全的,空间利用率与理论安全的方案相比提高了 m2倍,每个存储服务器只需维护长度很短的秘密份额,就可以实现大数据的分布式存储。在数据存储过程中,存储服务器根据双线性对的性质计算并贡献影子份额,确保秘密份额的安全性。方案具有可公开验证性,有效防止了数据分发者与存储服务器的欺骗。最后对方案的正确性、安全性、拓展性、空间效率等进行分析,表明方案在分布式数据安全存储中具有很好的应用前景。  相似文献   

9.
在“互联网+”概念的影响下,越来越多的信息技术应用于体育产业。本文通过构建基于MEAN框架的体育竞赛实时数据管理系统,设计了一种结合本地存储与远端云数据库的分布式存储方案,既实现数据的实时分享,又保障数据的可靠性。并通过实验的方式比较了基于HTML5 Local Storage本地存储的两种方法与本地NoSQL数据库的性能差异,从而实现系统存储方案的优化。  相似文献   

10.
基于数据仓库的OLAP系统是当前海量多维数据分析的主要工具。随着信息技术的发展,海量多维数据的规模急剧增长,结构日益复杂,OLAP系统的性能严重下降,已经无法满足人们的数据分析需求。基于分布式计算系统Hadoop给出了新的海量多维数据的存储方法和查询方法。设计了HDFS上的列存储文件格式HCFile,基于HCFile给出了海量多维数据存储方案,该方案能够提高聚集计算效率,并有很好的可扩展性。同时,利用多维数据的层次性语义特征,设计了维层次索引,并给出了利用维层次索引和MapReduce进行聚集计算的方法。通过和Hive的对比实验,表明了数据存储方案和查询方法能够有效提高海量多维数据分析的性能。  相似文献   

11.
为了提高农业灌溉的效率,节省灌溉成本,进行农业节水灌溉智能监控系统设计,提出一种基于ZigBee多传感器分布式数据采集的监控系统设计方法,系统设计分为硬件和软件两部分,首先进行农业节水灌溉远程监控系统的总体设计构架,灌溉远程监控系统的硬件模块化设计包括农业节水灌溉传感信息采集模块、AD模块、集成控制模块和接口电路。基于FPGA嵌入式设计方法,构建ZigBee多传感器分布式阵列,进行远程多点灌溉控制和监控。软件开发建立在LabWindows/CVI工程开发环境中,通过程序加载控制,实现远程监控系统改进设计。测试结果表明,该系统进行农业节水灌溉远程监控具有较好的人机友好性,监控的覆盖度较高,性能较好。  相似文献   

12.
杜明芳  程红 《控制工程》2004,11(6):550-552,558
讨论了将第三方子系统集成进具有开放式体系结构的智能楼字控制系统的一种方法,即通过通用极强的Modbus串行通信协议实现主从系统间的通信。结合将第三方Modbus设备ABB公司的12台PLC集成进霍尼韦尔楼宇监控系统EBI的典型工程.从应用的角度分析了EBI与Modbus设备通讯的原理,给出了组态工程及HMI开发的过程和方法,最终实现了准确的实时监控、实时报警等功能,达到了节源增效的目的。该工程所涉及方法对于基于网络的智能控制系统具有普遍的适用性。  相似文献   

13.
基于内存映像文件的网络信息安全性存取的探讨   总被引:4,自引:1,他引:4  
分布工技术的广泛应用给网络信息的安全性带来了问题,网络信息的安全包括信息传递的安全以及存储和存取的安全,基于共享内存和内存映像文件进行信息共享和信息的动态存取,在一定程度上保证了数据的安全性和完整性。  相似文献   

14.
无线传感器网络中分布式小波压缩   总被引:1,自引:0,他引:1  
董辉  卢建刚  孙优贤 《传感技术学报》2007,20(11):2481-2486
无线传感器网络中传感节点的资源十分有限,为了减少无线传感器网络在数据通信时的能量消耗,提出了基于提升格式的分布式小波数据压缩算法及其简化算法.这种方法一方面把整个小波变换所需的计算量分布于各个节点之中,通过简化消除额外的计算和数据传输,而且对于每个节点来说,计算量都很小,易于实现.另一方面又能有效地消除无线传感器网络中节点内和节点间的信息冗余,大大节省了无线传输所消耗的能量.仿真结果表明,与经典的方法相比,在能耗和重构信号质量上都获得了良好的效果.  相似文献   

15.
网络中的数据蕴藏着大量有价值信息,在实际的项目需求中,为了实现能够自动的在网页上对大量数据的数据信息的收集、解析、格式化存储的过程,提出了基于分布式的网络爬虫技术。采用Nutch爬虫框架和Zookeeper分布式协调服务,配合高性能的Key-Value数据库Redis对数据进行存储,采用Solr引擎将抓取信息进行清晰地索引、展示。运用提取页面信息算法优化提取页面信息流程,通过关键词匹配优化算法根据指标从抓取的数据中获取指标相关数据。通过分布式集群的搭建,Nutch项目的实现,及大量数据的采集,验证了基于Nutch的分布式网络爬虫的可行性。通过页面解析流程实验分析,基于Nutch的分布式爬虫与其他爬虫多组实验数据对比结果表明,基于Nutch的分布式爬虫项目在性能和准确度方面都优于传统其他爬虫。  相似文献   

16.
针对图像软件系统工程项目中涉及的多源遥感数据的预处理问题,研究了当前几种典型卫星数据的不同存储格式,提出了对各种遥感数据进行解析的方法.通过对地理空间数据抽象库( GDAL)原有功能进行完善和扩展,并重新编辑发布动态链接库( DLL)版本,设计了多源遥感数据在GDAL框架体系下的统一解析模式,实现了遥感数据解析结果存储为项目中通用的统一数据格式(如Tiff格式),为后续的遥感数据处理和定量遥感数据产品的生产提供数据基础和技术支持.  相似文献   

17.
在全球软件开发中,由于时区、地理位置、文化和语言等各种因素,交流和协作变得非常困难,如果在进行任务调度的时候不考虑交流对整个项目所造成的影响,则有可能使整个项目开发的总成本增加,从而给项目带来很大的风险。通过采用基于交流成本的任务调度方法,在项目初期就考虑交流风险,并对任务进行调度,从而能有效减少该风险对项目可能造成的损失。通过一个示例项目将该方法与传统的基于阶段的方法进行对比,说明了交流成本对整个项目成本的确有很重要的影响,并且使用基于交流成本的任务调度方法能有效降低项目开发的总成本。  相似文献   

18.
动态精度飞行试验是雷达定型、鉴定和抽样试验的重点内容之一,通过对动态精度飞行试验中的误差统计分析方法进行分析,针对试验有效航次较少这一特点,将Bootstrap算法引入到雷达分组系统误差统计分析过程中,提出了一种改进的雷达动态精度试验误差统计分析方法,该方法能够充分利用有限航次数据信息,生成自助样本来模拟原始数据分布特性,提高误差估计精度,为减少试验航次、节约试验成本奠定了理论基础。  相似文献   

19.
数据库授权系统的研究与实现   总被引:2,自引:0,他引:2  
本文首先分析了在关系数据库环境下管理信息系统MIS的授权需求,借助于面向的数据模型(OODM)概念,对目前得到广泛使用的菜单调用功能方式进行了初步的研究和分析,提出了授权菜单树(AMT)和有关数据库授权中菜单对象授权和视图对象授权相结合的基本概念。  相似文献   

20.
研究表明,数据中心后备电池在削峰方面展现出了很大的潜力。使用电池进行削峰,可以使数据中心的电能使用效率大幅提升,从而节约大量的数据中心电力基础设施建设费用。但是,由于削峰会加速电池老化,在一个数据中心的寿命周期内往往需要更换数次电池,这使得电池费用成为数据中心成本的重要组成部分,在更为先进的分布式备电系统下电池成本所占比例更大。所以,如何更经济地使用电池成为节约成本的关键性问题。提出了一种预测电池可用性的收益模型,可以评价传统意义上的老化电池是否还具有实用价值,以及平衡老化电池使用中的性能降低和备电可靠性;并提出了一种优化的电池控制方式,实现了数据中心备电成本的降低。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号