一种面向视频监控的云存储系统设计与实现

提出一种面向视频监控大容量存储的分布式云存储系统,系统包括元数据节点集群、存储节点集群、客户端;元数据负责管理所有的存储服务器,存储所有的文件基本信息,负责客户端连接请求等,是存储系统的核心;存储节点集群是实际数据存储的节点,负责存储数据;客户端负责连接云存储系统,与客户端上的应用交付,进行数据的存储和读取。整套系统可以实现存储容量的动态增加、多客户端并发读写、存储节点的动态扩容等,非常符合视频监控大规模存储的需求。     

基于半导体生产管理的数据仓库技术

描述了计算机集成制造(CIM)系统的体系结构及主要功能，提出了一种改进现有数据库管理系统的新型数据仓库设计技术。通过把在线事务处理数据库(OLTP)选择性地增量备份到一个临时的缓存(Cache)数据库，把Cache数据库中的数据增量提取到操作数据存储(ODS)数据仓库中，客户端通过水晶报表服务器或微软OLAP服务器，可直接访问ODS数据库中面向主题集成的各种事实型数据。通过Cache数据库，避免了OLTP数据库与ODS数据库的直接链接，减小了ODS数据仓库数据组合与计算对OLTP数据库的性能影响，最大限度地提升了OLTP数据库的效率，满足了生产线对OLTP数据库的高性能要求。     

RDS技术初探

目前,通常的Web Server数据处理都是在服务器上进行的。每次用户的查 询或更新数据请求需从客户端传送到服务器上,服务器运行该查询或更新数据操作后,将结果传给客户端显示。这样频繁地进行数据操作,效率较差。 RDS(Remote Data Service,远程数据服务)提供客户端数据缓存(Client-Side Data Cache)功能。用户用RDS将数据库的数据先下载到客户端,在客户端用户可使用浏览器直接进行数据操作,大部分时间无须与服务器连接,因而在数据库应用,尤其是在大型数据库系统应用中效率可大大提高。     

浅析硬盘播出系统的构建（下）

数据库服务器 播出系统的正常运转依赖于数据库服务器。数据库服务器在整个系统中起到了系统元数据管理的重要作用。一般播出系统采用客户机／服务器体系结构,采用数据库服务器对所有数据进行统一管理,客户端应用程序只负责系统的应用逻辑部分。用户根据不同的操作权限,可以在客户端进行相应操作。     

用VC实现监控系统数据回放和报表打印

为了对各种监控系统进行监测数据存储和回放,以Visual C++6.0为开发平台,建立了监控系统与PC机之间的串口通信,运用开放数据库互连技术将数据写入Access数据库.在显示终端,采用标准的SQL结构化查询语言完成数据查询,将存储的数据以动态图形的形式进行回放.引入水晶报表控件动态连接到监控系统的数据源,为所需要的数据表记录生成报表并实现了报表打印功能.     

一种基于虚拟数据仓库的查询优化方法

跨地区企业集团如何从分布在各地数据仓库的数据中获取信息以帮助他们决策是数据仓库研究的一个重要问题.本文提出了一种虚拟数据仓库三层模型及其查询优化方法,引入了虚拟元数据、查询快表等概念,通过查询快表可以快速得到查询方案,通过虚拟元数据与各结点元数据的映射,可形成查询方案,从而获得查询结果.分析表明,该方法能够有效地提高查询效率.     

基于C＋＋Builder实现炼镁炉监控系统的数据库管理

针对炼铁炉监控系统的数据管理要求,使用C＋＋Builder6．0开发平台,以SQLServer2000数据库管理系统为数据库基础,设计开发了一款炼镁炉监测数据管理系统。该系统利用ADO接口,实现了对SQLServer2000数据库的有效连接和访问,以及对炼镁炉监控系统的实时采集数据的存储和对数据库的动态查询。通过TChart组件用曲线图显示查询到的历史数据,并利用TDatesource和TDBGrid组件浏览数据库的数据,最后通过Excel．Application对象的属性和方法把历史采集数据传送给Excel报表。     

Hive大数据仓库构建与应用——以大陆在美上市股票数据为例

随着大数据技术的飞速发展,大数据技术为各行各业的数据存储和分析提供了有力的技术支撑,在Hadoop大数据集群平台构建Hive数据仓库,使用Hive SQL语句对数据进行查询、汇总和数据分析;Hive本身的数据存储依赖于HDFS分布式集群环境,Hive通过将Hive SQL转换成MapReduce程序,通过大数据集群完成并行计算。文章通过构建Hive数据仓库,通过爬虫获取到腾讯证券中大陆在美上市股票数据,数据处理后,存储到Hive数据仓库。并使用Hive SQL完成基本的数据分析、查询和数据汇总,完成DDL、DML、DQL的基本应用,并在Hive数据仓库完成表的简单查询、复杂查询、表的连接等应用。     

一种非结构化元数据的分级存储设计

针对各种数据呈几何级数爆炸式增长促使数据存储容量面对巨大压力的问题,本研究致力于开发设计一种面向非结构化元数据的分布式分级存储管理系统。通过在Client端和Server端分别组织Java jar和逻辑节点实现非结构化元数据管理平台的功能调用,并采用Mongodb数据库构建了自研元数据管理组件的文档数据库。将策略配置存放在Client端的Zookeeper中,并在Server端中实现非结构化元数据的分级存储。通过性能测试结果显示:相比传统的LRU存储方式,采用高低层Server端服务器对非结构化元数据分级存储过程中,平均响应时间下降了45.2%和36.7%,字节命中率分别提升了3.0%和2.6%。因此,本研究提出的分布式分级存储原理可以提升非结构化元数据存储效率。     

危险报警系统设计与实现

日常生活中,人们身边总会藏着各种各样的危险,遇到突发危险能及时报警很有必要,为此设计了一个能够迅速报警或求救的APP。该系统包含客户端、服务器和后台管理系统,客户端基于Android平台,管理后台基于EasyUI框架,并连接MySQL数据库进行数据存储。核心功能包括一键报警、一键录音、求助好友、查阅案例等功能。     

Compact Proofs of Retrievability

In a proof-of-retrievability system, a data storage center must prove to a verifier that he is actually storing all of a client’s data. The central challenge is to build systems that are both efficient and provably secure—that is, it should be possible to extract the client’s data from any prover that passes a verification check. In this paper, we give the first proof-of-retrievability schemes with full proofs of security against arbitrary adversaries in the strongest model, that of Juels and Kaliski. Our first scheme, built from BLS signatures and secure in the random oracle model, features a proof-of-retrievability protocol in which the client’s query and server’s response are both extremely short. This scheme allows public verifiability: anyone can act as a verifier, not just the file owner. Our second scheme, which builds on pseudorandom functions (PRFs) and is secure in the standard model, allows only private verification. It features a proof-of-retrievability protocol with an even shorter server’s response than our first scheme, but the client’s query is long. Both schemes rely on homomorphic properties to aggregate a proof into one small authenticator value.     

科学数据网格中数据访问中间件的研究

基于Globus的网格技术提供了数据访问的统一服务接口,但它本质上还是Client/Server模型,在发布和发现服务上采用集中式模式,所以可扩展性差,而且对海量数据访问比较低效.为此结合P2P一些特性,提出了一种数据访问中间件框架,具有可扩展性、数据访问高效性等特点,并实现了基于它的数据查询功能.     

Replication enabled distributed cache invalidation method: replication enabled distributed cache management system for wireless mobile networks

This work proposes a replication scheme that is implemented on top of a previously proposed system for MANETs that cache submitted queries in special nodes, called query directories, and uses them to locate the data (responses) that are stored in the nodes that first request them, called caching nodes. The system, which was named distributed cache invalidation method (DCIM), includes client‐based mechanisms for keeping the cached data consistent with the data source. In this work, we extend DCIM to handle cache replicas inside the MANET. For this purpose, we utilize a push‐based approach within the MANET to propagate the server updates to replicas inside the network. The result is a hybrid approach that utilizes the benefits of pull approaches for client server communication and those of push approaches inside the network between the replicas. The approach is analyzed analytically, and the appropriate number of replicas is obtained, where it was concluded that full replication of the indices of data items at the query directory and two‐partial replication of the data items themselves makes most sense. Simulation results based on ns2 demonstrate the ability of the added replication scheme to lower delays and improve hit ration at the cost of mild increases in overhead traffic. Copyright © 2013 John Wiley & Sons, Ltd.     

分析型CRM中客户数据仓库的设计与应用

讨论了分析型CRM中客户数据仓库的需求分析和逻辑设计方法:通过调研收集了与客户关系管理相关的多维查询,并将这些多维查询分成营销,销售和客户服务三类,每类查询与一个主题相对应。提出了客户数据仓库的总线架构和一个基本的事实星座模型。基于建立的客户数据仓库,介绍了查询与报表、OLAP分析和数据挖掘等客户数据分析方法。     

海军通信元数据可视化查询系统设计与实现

针对海军通信数据管理与应用需求,将数据可视化技术引入到元数据查询服务中,研究了海军通信元数据的可视化技术,研究了海军通信元数据可视化查询的实现流程,设计了海军通信元数据可视化查询系统的体系结构和功能模块,实现了海军通信元数据可视化查询系统并给出了查询实例.论文的研究成果,对改进海军通信元数据服务模式,实现海军通信数据资源与可视化技术的有效结合,提升海军数据可视化技术和装备水平具有重要意义.     

基于元数据的电力客户流量数据实时监测设计

为了提高电力客户流量数据实时监测能力,提出基于元数据的电力客户流量数据实时监测系统设计方法。构建电力客户流量数据的分布式采集和存储结构模型,采用多分布的传感器阵列进行电力客户流量数据采样,对采集的电力客户流量数据进行特征重组,提取电力客户流量数据的元数据结构特征,根据元数据的结构分布进行电力客户流量数据的模糊信息聚类处理,建立电力客户流量数据的多分布特征检测和属性聚类模型,采用模糊融合方法进行电力客户流量数据的多元信息重构,在重构的特征空间中实现电力客户流量数据实时监测。仿真结果表明,采用该方法进行电力客户流量数据监测的实时性较好,识别精度高,特征分辨能力较强,具有很好的电力客户流量信息检测和识别能力。     

一种基于虚拟应用的安全防泄漏系统

针对目前日益严重的信息资产泄露问题,在对比已有的信息泄露的防御技术基础上,提出一种＂基于虚拟应用的安全防泄漏系统＂,通过集中运算、虚拟应用技术,在服务器上为每一个用户的应用构建独立的计算环境;采用远程桌面、SSLVPN技术保证集中计算环境中数据与用户操作终端的安全隔离;同时基于信息在服务器集中存储和运算,实现终端无痕（用户终端没有数据计算痕迹）,防止数据在应用过程中泄露;最后采用统一认证和应用授权发布,管理用户对数据的访问和输出控制。     

基于LabVIEW的远程心电监护系统设计

基于LabVIEW平台开发出应用于远程心电监护系统监护中心的软件,包括服务器和医生客户端程序。服务器实现的功能有心电数据接收和存储、发送心电数据给医生客户端、反馈医生客户端诊断结果等;医生客户端实现的功能有接收服务器心电数据、心电数据显示、发送诊断结果、调用地图显示位置等。经过测试,软件操作平台界面友好,各个功能均得以实现,较好地完成了预期的设计需求。