一种分布式的舆情分析系统架构

随着互联网数据的快速增长,针对如何对互联网数据进行有效的收集和分析,提出一种基于分布式平台的系统架构。该架构包括爬虫模块、Web模块以及分布式平台三大模块,其中爬虫模块负责数据的收集,Web模块负责简单任务的处理以及分析结果的可视化展示,分布式平台提供数据的存储以及复杂任务的计算功能,3个模块的结合为网络上海量数据的爬取、存储与分析提供了一个很好的解决方案。最后,针对社交网站新浪微博的应用案例验证了该分布式舆情分析系统架构的可用性。     

云电子身份管理与认证系统中的关键技术优化改进

当前的身份管理认证技术存在风险高、数据库储存效率低、认证错误率高等弊端。因此,提出一种云电子身份管理认证系统,系统主要由认证服务器、系统服务器与云访问服务器组成。认证服务器中的控制代理模块截取用户对资源服务器请求认证的数据信息,并将数据信息发送到认证服务模块进行身份认证。用户进入到信息数据库中后,通过系统服务器中的RSA模块,对用户所需文件进行加密解密处理,依靠用户私钥和认证令牌实现身份认证,将数据信息上传到云访问服务器进行存储和传递,完成整个云电子身份管理与认证。给出RSA模块中的部分功能函数和文件加密解密流程图,以及RSA模块进行身份认证过程中的大数乘法和大数模幂运算过程。实验结果表明,提出身份管理和认证系统耗能低、认证效率高,具有较高的数据处理精度。     

面向频谱数据库的电磁频谱检测系统

频谱数据包含无线电信号的全息特征,针对频谱数据结构复杂、数据量大且利用率低的问题,提出一种基于频谱数据库的电磁信号检测系统。在实现通用的频谱检测功能的前提下,将频谱数据实时地保存到数据库中,用于后期有效信息的提取和分析。系统使用上位机向主控模块发送频谱检测的指令,由主控模块驱动信号采集模块进行数据采集并将其存储到数据库中。实例验证了系统的可行性以及数据的准确性,为实现对有限频谱资源的高效利用提供了一种新思路。     

基于安全等级的云存储信息安全保障架构设计

为了迎合实现云存储信息资源的数字化发展,并对云存储服务商改进存储服务提供合理建议,文中为云存储信息构建了可靠的安全保障架构,以此实现对云存储信息安全架构及部署模式的全面部署。对学术信息资源进行安全等级分类可将其分成一般、较高、很高共三个级别,随着安全等级的提升,云存储所需的成本也会随之提高。用户先由客户端登录到云存储信息系统中,完成安全访问授权后,用户再把学术信息资源上传到学术资源信息系统,再利用系统的内容安全模块来分析学术信息资源的内容安全。进一步对云存储信息的应用安全保障,虚拟化安全保障,数据安全保障和内容安全保障四个方面开展了深入探讨。     

数据库三层安全结构设计

数据库的安全的一项关键技术是数据库加密,加密粒度涉及到整个数据库、表、字段、记录,但是,不论采取何种加密粒度,都不可避免影响到数据库的访问效率。如何能兼而得之？对此,可以设计一种三层结构,它包括系统CA模块、授权登录模块、加解密模块共三层,系统CA模块负责身份认证,授权登录负责用户权限管理,加解密模块直接保证数据库本身的安全。三层结构在保证数据库安全的前提下,有效保证了用户访问数据库的效率。     

MySQL数据库在自动测试系统中的应用研究

MySQL数据库具有原子性、一致性、隔离性、持久性等基本特性,作为关系型数据库的代表被广泛应用于不同行业自动测试系统的设计与开发环节,在测试模块选择、测试系统创新等方面为用户提供工具支持。通过基于LabVIEW开发平台进行数据库访问流程的建构,聚焦数据存储与分类、数据备份与恢复、数据库处理与测试三个层面探讨自动测试系统的功能实现路径,并结合某自动测试系统的数据存储与管理需求进行数据库技术应用要点与实现路径的分析,以期为MySQL数据库与自动测试系统的融合应用提供参考。     

基于关系数据库的OWL本体存储工具的设计

本文介绍了存储工具设计的过程,包括模块设计,数据库设计,包和类的概要设计以及系统的详细设计。其中模块设计将该软系统计分为三个模块,分别是数据模块、控制模块和视图模块。这三个模块符合了常用的MVC模式,即将数据层、控制器和用户界面分开设计。     

基于Android的电视终端开机认证系统设计

提出基于智能电视一体机的开机认证系统设计,包括3个模块,分别是终端激活模块、终端登录模块以及用户自动登录模块。在终端激活模块和终端登录模块设计过程中,利用MD5算法计算出终端登录模块和用户登录模块访问网络服务器所需的终端令牌,进而获取认证信息。利用数据库技术将这些认证信息存储到相应的数据库中去,并通过基于该数据库jar包的形式为商店产品提供获取这些认证信息的API方法。系统测试表明,该设计实现了智能TV终端与网络服务器之间的信息认证交互,数据正确,实时可靠。同时,为第三方商店产品提供的API方法正确可行,测试效果良好。     

一种用于无线传感网络的故障预警系统设计

由于无线传感器网络故障种类较多,使得传统的无线传感网络故障预警系统无法对其进行有效预警,可靠性和准确性较低。因此,构建可靠性和准确性较高的无线传感网络故障预警系统,该系统由故障数据采集筛选模块、故障辩证模块、数据库和便携式通信设备组成。故障数据采集筛选模块对无线传感网络中各种故障数据进行采集和筛选,并将故障数据传输到故障辩证模块进行故障预警。当故障辩证模块无法自动进行故障预警时,维修人员将介入处理。数据库为系统提供故障数据的存储区域,并对其进行汇总、解析和输出,以供使用者管理无线传感网络。系统软件利用安卓技术,令使用者通过便携式通信设备实时获取故障预警信息,并给出故障数据采集过程的算法代码。实验结果表明,所设计的系统具有较高的可靠性和准确性。     

基于FPGA具有自适应功能的数据采集系统设计

为了满足工业上数据采集的自适应需要,本文采用FPGA设计实现了高速数据采集,整个系统分为高速数据采集模块、数据缓冲模块、数据存储模块。其中数据采集模块对滤波放大后的输入信号进行采样,采样率可调;数据缓冲模块负责对采样得到的数据进行缓存：数据存储模块负责将缓存后的数据传输至存储器进行存储。使用Quartus Ⅱ仿真工具对...     

基于数据字典的数据库索引技术研究

数据字典是指对数据的数据项、数据结构、数据流、数据存储、处理过程等进行定义和描述。数据字典是数据库的中心,对每个用户非常重要,是信息系统进行数据分析阶段的主要工具。结合数据字典设计原理,提出多种类型的数据字典规则,结合不同数据处理的需求,合理组合不同类型的数据字典可以在很大程度上提升信息处理过程中的检索效率,通过对索引策略和多数据字典对应关系的限制,增强数据库系统的健壮性,提高信息安全的强度。     

面向大数据的数据服务中心设计与应用研究

大数据管理对传统的基于关系数据库管理系统为核心的数据管理服务平台提出了挑战,研究开发支持结构化和非结构化数据统一管理的数据管理与服务中心成为一项非常迫切并且重要的任务,汇总分析出大数据服务中心四项关键技术,采用可配置泛化表模型等技术,设计了基于Hadoop平台的数据服务中心系统原型BIG-DMS和基于BIG-DMS的数据综合服务平台应用方案,支持结构化和非结构化数据的统一存储、管理和访问服务。     

基于集群架构的地海杂波数据存储系统

为了实现对海量地海杂波原始数据、特性分析数据、模型数据等管理,文中提出基于Oracle RAC的集群架构构建地海杂波数据存储系统,依据地海杂波数据以及研究分析的特点,从集群架构、逻辑架构、数据存储技术、数据检索等方面进行设计。对构建的数据库模拟产生1 000 000条记录进行了测试分析,验证了数据库的性能,为地海杂波特性分析提供高性能的数据服务奠定基础。     

Content-based retrieval of dynamic PET functional images

The recent information explosion has led to a massively increased demand for multimedia data storage in integrated database systems. Content-based retrieval is an important alternative and complement to traditional keyword-based searching for multimedia data and can greatly enhance information management. However, current content-based image retrieval techniques have some deficiencies when applied in the biomedical functional imaging domain. In this paper, we presented a prototype design for a content-based functional image retrieval database system for dynamic positron emission tomography (PET). The system supports efficient content-based retrieval based on physiological kinetic features and reduces image storage requirements. This design makes it possible to maintain a large number of patient data sets online and to rapidly retrieve dynamic functional image sequences for the interpretation and generation of physiological parametric images, and offers potential advantages in medical image data management and telemedicine, as well as providing possible opportunities in the statistical and comparative analysis of functional image data     

海上测控任务数据中心一体化管理平台设计

根据海上测控任务数据和信息分布的特点,设计了海上测控任务数据中心的一体化管理平台.首先,平台设计采用基于无共享存储的高性能集群模式数据库架构,具备统一的计算与存储系统能力以及良好的动态可扩展性;其次,平台采用层次化设计,包括数据采集与处理、数据存储、数据管理和数据应用4层,实现统一的数据中心管理和应用.根据应用需求,重点设计了航天器遥测故障预警与诊断、测控设备远程监控与故障诊断、外测数据精度分析与数据挖掘等典型数据应用模块,实现数据核心价值.     

Networking AT-class computers for image distribution

Using the prototype electronic document storage and retrieval (EDSR) system as a testbed, the Ethernet-based image transmission protocol is demonstrated to be a fast, reliable, and efficient mechanism for transmitting document image files among AT-class computers. The principal bottleneck in the server's performance, i.e. the rate at which data are read from the optical disk via the SCSI host adapter, has been identified and corrected. The transfer rate is expected to increase from approximately 60 kb/s to approximately 480 kb/s, and 800% improvement. A method is suggested for designing a network to support multiuser access to a document image database on optical disks. Depending on the final service rate and the rate at which actual users request images, a network with up to five servers should be able to support from five to ten users per server     

Hierarchical scalable storage architecture for massive electronic bill

The rise of e-commerce and other network services have greatly promoted the development of electronic bill service,while traditional data storage schemes can no longer satisfy the rapid access requirements of massive electronic bill data.To solve these problems,a hierarchical scalable storage architecture for massive electronic bill was proposed,which combined hash modular algorithm and consistent hash algorithm,and supported fast data locating.A horizontal expansion scheme based on hash modular algorithm was designed to reduce the amount of data that needed to migrate when adding or deleting data nodes.Besides,a data caching scheme based on hot data and a load balancing scheme based on access delay were designed and implemented,further improving the speed of data access.Finally,the experiments prove the effectiveness of proposed architecture and schemes.     

基于云计算的海量图片存储管理系统研究

随着网络信息容量的膨胀,如何高效地存储和管理海量图片数据,传统的数据管理技术难以满足这些应用所提出的对数据管理的需求。针对云计算应用的特点和需求,借鉴传统数据管理技术的理念,提出了一种基于CouchDB的高可扩展、高可靠的海量图片存储管理系统。系统采用分布式文件系统、分布式数据库等技术,支持海量数据存储、资源目录和交换体系以及并行程序处理,可提供从数据到处理功能的一体化服务。实验证明,本系统具有可行性,能满足空间信息服务的多种需求。     

基于存储过程的分段数据存储方式设计

随着社会对信息化重视程度的不断提高,存储在数据库中的数据规模正在不断的成倍增长,如何以一种有效的方式对数据进行存储,以便高效的对数据进行处理,分析就成为横亘在人们面前的一道难题.基于oracle11g数据库,设计了一种基于存储过程的分段式数据存储方式,有效解决了对于数据量随时间线性增长业务系统数据的存储问题,极大的提高了数据处理的效率.     

基于空间数据与流数据集成管理的交通实时监控系统设计与实现

实时交通数据以流的形式持续快速到达,智能交通系统在地理空间数据的基础上处理实时交通数据。从数据存储、数据查询等角度来看,传统关系数据库技术在同时处理空间数据和流数据方面具有不足。基于GIS的实时交通监控原型系统集成现有的空间数据和流数据管理技术,支持静态查询、连续查询和混合查询,为交通用户提供高质量的服务。