云平台下的NoSQL分布式大数据存储技术与应用

随着移动互联网云计算、大数据的快速发展,以图片、视频等组成的数据存储急剧增加,目前已有存储方式无法满足系统需要,而No SQL分布式大数据存储技术因其具有可扩展、快速读取、海量处理等特点,其在云计算领域如雨后春笋般被广泛应用。采用基于Hadoop平台和No SQL的Mongo DB数据库技术设计非结构化数据云存储架构,证明云存储的非结构化数据存储技术可缓解当前非结构化数据存储面临的难题,提升非结构化数据存储服务质量。     

基于MongoDB的数据密集型云存储系统设计

针对密集型数据设计的云存储系统多是利用Sqlite技术,因云数据复杂性,导致存储性能和查询性能较差.MongoDB是NoSQL数据库的一种,具有容错性高、性能灵活的特点,基于MongoDB设计了一种新的数据密集型云存储系统,系统硬件由3个层次构成,分别是数据层、业务层和表现层,选择MongoDB—Hadoop作为适配器...     

以文档结构存储海量卫星遥测数据

通过对卫星遥测数据的分析与挖掘,可以有效地进行卫星故障诊断、卫星参数异常变化预测以及提升卫星运行的可靠性。针对无法在海量卫星遥测数据中进行高效储存、检索的问题,提出了利用No SQL数据库Mongo DB以文档的结构形式存储卫星遥测数据。实验结果表明,相对于传统的SQL数据库,此方法可以有效地减少数据冗余并提高查询效率。     

以混合存储模型实现云计算平台对电信海量数据的处理

利用云计算平台获取海量存储空间和弹性计算能力是当前学术界研究的重点和产业界应用的方向。文章提出的海量数据分布式处理模型,基于混合型数据存储,实现一种以数据为中心的、计算密集型的、高经济性云计算平台。实践证明,在海量数据处理方面,该模型可以很好发挥关系数据库和非关系数据库的优点,具有良好的参考示范价值。     

面向智能家居大数据云存储系统设计与实现

为了使传统家居设备可以进行远程遥控,开发了在家具传统设备上引入无线组网技术,使其达到访问和远程控制的效果。针对在数据存储中,传统云存储系统缺少灵活性,不透明,鲁棒性不强,无法有效存储、管理和维护大数据的问题,设计并实现了面向大数据的云存储系统,通过逻辑控制模块对家居系统各业务请求进行智能处理,利用用户访问模块为用户提供底层实现的各项功能,采用存储模块为家居系统提供透明的数据存取功能,利用文件读/写模块将上层逻辑处理和底层存储进行隔离,使所设计系统更加健壮。软件设计过程中,给出数据云存储程序代码,实现大数据云存储。实验结果表明,新一代智能家居云存储系统具有很高的可行性和实用性。     

关系型数据库异构数据同步系统研究与实现

本文设计了一种由数据捕获,数据转换,数据传输三个过程组成的数据同步方案,详细阐述了捕获数据、转换数据、到传输数据的全过程,并对其进行了实现。     

浅谈“互联网+”时代企业大数据存储架构建设思路

本文通过分析“互联网+”时代传统企业互联网化转型,企业大数据在“存”、“管”、“用”技术支撑上面临的问题,比较关系型数据库系统与大数据技术平台的应用特点,提出了企业大数据的存储混搭架构思路。     

基于PaaS云平台的数据存储方案设计与应用

当前的云平台数据存储方案忽略了数据的重复性,易产生大量冗余数据,为优化数据存储性能,基于PaaS云平台设计数据存储方案并实现应用.分区删减云平台冗余数据,计算各分区剩余数据权重因子,基于权重因子设计PaaS云平台数据存储顺序,动态生成数据存储方案,将Proxmox VE的虚拟环境模拟系统作为虚拟节点,通过底层服务器实现...     

MySQL数据库下存储过程的设计与应用

存储过程是一批被编译了的语句的集合,在数据库设计过程中,存储过程具有非常重要的作用,它具有一次创建可以多次调用的特点.在交互式系统前台界面,进行数据查询的时候,往往需要输入查询条件,然后得到查询结果,而后台对应的便是存储过程,故存储过程设计的是否精准,涉及前台查询结果的查询速度和正确率,本文主要论述存储过程在MySQL...     

基于存储过程的分段数据存储方式设计

随着社会对信息化重视程度的不断提高,存储在数据库中的数据规模正在不断的成倍增长,如何以一种有效的方式对数据进行存储,以便高效的对数据进行处理,分析就成为横亘在人们面前的一道难题.基于oracle11g数据库,设计了一种基于存储过程的分段式数据存储方式,有效解决了对于数据量随时间线性增长业务系统数据的存储问题,极大的提高了数据处理的效率.     

桥梁结构健康数据采集存储系统的设计与实现

随着互联网技术的发展,桥梁结构健康系统接入的传感器的增多,带来数据的急速增长。传统的数据库已经无法满足海量数据的存储及高效查询的要求。针对智能传感器数据量大、网络访问并发性高、数据输入持久等特点,设计了分布式存储模式和特定的数据存储格式,以满足在高并发下的传感器数据跨平台存储以及快速高效查询的要求。     

大数据存储管理系统面临挑战的探讨

日益发展的大数据研究和应用对大级别数据的存取、分析和再处理提出越来越高的要求,本文根据大数据存储的定义和特点,主要探讨了稳定可靠的传统存储管理模式在大数据应用中面临的挑战,并对传统存储管理模式能否满足大数据管理的需求进行了分析,同时介绍了业界较为知名的几个大数据存储管理系统的实际解决方案及其优缺点。     

基于XML—RPC的海量存储管理系统的设计与实现

海量存储系统是由管理节点、数据节点通过高速交换网络互联形成的分布式存储系统。它支持CIFS、NFS、WebDAV等多种访问协议,具有高性能、高可用、高扩展等特性,是设计和实现管理系统时面临的挑战。为了实现基于Web的管理系统,针对该系统的分布式结构和丰富特性,本文提出了基于AJAX和XML—RPC技术的海量存储管理系统架构,并描述了其管理系统的主要组成部分和工作过程。     

基于NoSQL的企业人力资源信息云平台存储方案设计

全球信息化时代的来临,带动了社交网络与电子商务的快速发展,使企业逐渐进入全球化市场,而人力资源管理已经成为制约企业发展的瓶颈问题。本文分析了企业在招聘人才时所遇到的困难,建议企业建立自己的人才资源数据库,重点分析了云平台的存储海量数据问题,以非关系型数据库HBase配合开源的分布式框架Hadoop来存储管理企业搜集的海量的各种类型的人才信息数据,适应每天剧增的数据资源。     

基于FPGA的高速图像数据采集存储系统设计

设计了一种针对具有高码流、数据量庞大特点的图像数据进行采集、存储以及长线回读的测试系统,接收的图像数据码流为30.72 Mbyte/s,测试系统在控制信号的作用下将大容量图像数据存储于三星公司的4 Gbyte K9WBG08U1M的Flash芯片中。图像数据存储完毕后,通过LVDS总线方式,将存储装置中的图像数据回读至控制计算机进行存盘、解码,以验证该系统的图像数据采集、存储功能。     

基于php技术交流平台的设计与实现

由Apache+php+MySQL组成的开发B/S架构的网络信息系统工具,因其具有安全、可靠、代码开放、完全免费,被网络信息系统开发者青睐.文中以使用该套工具开发技术交流平台为例,介绍了在Windows环境下的安装、配置和开发的技术难点及解决方法.     

云平台下CRM系统访问控制研究与设计

文章对比分析了主流的访问控制模型,以基于角色的访问控制模型为基础,设计了适合云平台下CRM系统的访问控制机制,该机制增加了用户组、部门、资源、操作等实体。在优先通过角色授权的基础上,允许对用户直接授权,在权限设计中增加了用户权限直接授权,用户角色权限的动态授权等。本文还介绍了云平台下CRM系统的访问流程,并实现了云平台下CRM系统的访问控制。     

一种可信移动存储介质管理系统的设计与实现

随着移动存储介质的广泛应用,由移动存储介质引发的信息泄漏的安全问题越来越受到关注。论文提出一种移动存储介质安全管理系统,从移动存储介质认证和文件加密方面人手,强化对移动存储介质的安全管理,防止通过移动存储介质引起的信息泄漏。     

基于android和云平台的智能家居系统设计与实现

为解决智能家居系统大规模数据的存储、管理及移动终端的可靠接入等问题,本文设计了一种基于嵌入式家庭网关、Android和云平台服务的智能家居系统。利用极光云推送服务及时将家庭的异常报警信息推送到手机客户端,系统还提供了视频监控功能,用户随时随地通过手机查看家庭动态。当监测异常时会自动拍照记录异常场景,并上传至yeelink物联网云平台,进行图像云存储。另外通过手机客户端可以查看所选时间范围内的报警图像,随时掌控家庭生活。     

基于Amazon S3兼容云存储平台的媒体文件存储与访问

首先介绍云计算和云存储的基本概念,对兼容Amazon S3的云存储平台的体系架构及其组成进行详细的分析,然后阐述在此平台上如何进行媒体文件的存储与访问,最后给出了系统构建所面临的挑战及其解决方案。