以文档结构存储海量卫星遥测数据

通过对卫星遥测数据的分析与挖掘,可以有效地进行卫星故障诊断、卫星参数异常变化预测以及提升卫星运行的可靠性。针对无法在海量卫星遥测数据中进行高效储存、检索的问题,提出了利用No SQL数据库Mongo DB以文档的结构形式存储卫星遥测数据。实验结果表明,相对于传统的SQL数据库,此方法可以有效地减少数据冗余并提高查询效率。     

基于MapReduce模式的多表联查算法

多表关联查询是进行数据挖掘与分析的有效技术手段。随着大数据时代的到来,当前的数据分析技术在进行海量数据多表联查操作时存在明显的性能瓶颈,为此提出一种基于Map Reduce计算模型的多表联查算法UGS用以提升多表关联查询效率。实验表明,在海量数据背景下,该算法的查询效率明显优于大数据领域的Spark SQL,Hive及关系型数据库的My SQL。     

云平台下的NoSQL分布式大数据存储技术与应用

随着移动互联网云计算、大数据的快速发展,以图片、视频等组成的数据存储急剧增加,目前已有存储方式无法满足系统需要,而No SQL分布式大数据存储技术因其具有可扩展、快速读取、海量处理等特点,其在云计算领域如雨后春笋般被广泛应用。采用基于Hadoop平台和No SQL的Mongo DB数据库技术设计非结构化数据云存储架构,证明云存储的非结构化数据存储技术可缓解当前非结构化数据存储面临的难题,提升非结构化数据存储服务质量。     

NoSQL数据库技术在军用通信产品质量信息存储中的应用研究

文章以Mongo DB数据库技术为例介绍了非机构化数据库(No SQL),以某企业军用通信产品质量信息为对象,在科学管理的基础上,设计了产品质量信息分析应用系统,对传统数据管理手段在可伸缩性、高效查询和访问、支持多结构数据方面的缺陷提供了一种快捷有效的管理方法,在军用通信产品质量问题上能准确、快速地完成分析、诊断、处理及回溯,有利于产品质量提升,并推进产品功能优化、技术工艺改进等进程。该项技术应用成熟,具有一定的推广价值。     

Hive大数据仓库构建与应用——以大陆在美上市股票数据为例

随着大数据技术的飞速发展,大数据技术为各行各业的数据存储和分析提供了有力的技术支撑,在Hadoop大数据集群平台构建Hive数据仓库,使用Hive SQL语句对数据进行查询、汇总和数据分析;Hive本身的数据存储依赖于HDFS分布式集群环境,Hive通过将Hive SQL转换成MapReduce程序,通过大数据集群完成并行计算。文章通过构建Hive数据仓库,通过爬虫获取到腾讯证券中大陆在美上市股票数据,数据处理后,存储到Hive数据仓库。并使用Hive SQL完成基本的数据分析、查询和数据汇总,完成DDL、DML、DQL的基本应用,并在Hive数据仓库完成表的简单查询、复杂查询、表的连接等应用。     

计算机数据库技术在信息管理中的应用价值

本文阐述了数据库技术特征,介绍了信息管理中数据库技术应用价值,利用数据库技术开展原始数据采集工作,对数据格式进行统一处理。之后借助SQL Server数据库,利用表格方法对完成处理的信息进行储存,最终通过数据库查询方法实现信息共享。本次研究有数据证实,该方法数据丢失率仅为0.33%,满足信息管理需求。     

基于Hadoop平台的海量数据高效抽取方法及应用

本文从数据抽取过程的本质出发,论述了传统数据抽取过程与大数据平台数据抽取过程的异同,以基于Hadoop的大数据平台为例,结合传统的关系型数据库和非关系型数据库(No SQL)的特点,提出了一种从关系型数据库到大数据平台的高效数据抽取方法,实现了对数据源系统资源占用的最小化,并在电力公司用电大数据抽取中得到广泛应用。     

分布式顺序表类SQL技术的实现和优化

针对DOT系统,设计实现并优化了类SQL的查询技术,首先分析了传统数据库在查询上的优化策略,比较了传统数据库和DOT系统在查询方面的异同。通过参考一般数据库的SQL语句的设计规范,为DOT设计了一套类SQL语句。后续对设计的类SQL语句进行词法语法分析,构建查询树。同时,借鉴传统数据库的查询优化策略,结合DOT系统的特点对查询进行优化。最后在开源的Apache HBase典型的DOT系统的基础上,实现了上述类SQL语句的所有解析和优化内容。     

基于SQL中的查询优化策略研究

查询是数据库中最基本、最常用、最复杂的操作,查询操作的优劣直接影响数据库应用程序的性能.为了提高数据库应用系统的执行效率,本文以关系数据库为基础,从分析关系数据库系统查询处理过程入手,结合自己的实践经验,从数据库设计和查询策略选择的角度来讨论查询优化技巧,指出关系数据库查询优化的一般原则.本文主要讨论了基于SQL查询重写技术的数据库查询优化策略,通过查询重写可以把用户所写的效率不高的SQL语句重新优化组合,使之成为效率较高的查询语句.     

SQL语言在C&C08交换机数据查询中的应用

介绍了SQL语言及其语句的执行,阐述了认识Bam数据库的方法和在C＆C08交换机数据查询中的实际应用.     

一种基于VB的足球联赛管理信息系统的研究与开发

针对足球比赛信息统计业务流程进行分析,对原有的管理方法进行改进,提出了一种全新的管理模式。利用Visual Basic和Access进行数据库建立和编程设计,应用SQL语言查询数据。在数据库设计的同时使用到数据控件和数据感知控件以及ADO数据对象访问技术。较大地提高了管理效率、优化了管理方法,是一种较实用的管理信息系统。     

民航空管的ORACLE RAC数据库实时可视化监控技术

本文在民航空管大数据存储背景下,提出了一种针对的Oracle RAC数据库的实时可视化监控技术。该方法支持任意Linux/Unix操作系统查询命令行指令以及SQL查询指令,通过这些指令的脚本实现了对于Oracle RAC数据库及其数据库服务器的全方位可视化监控。该方法得到的监控数据准确、实时性强、集成度高、安全性高、对二次开发具有良好的支持。该方法灵活支持各类告警,同时具有较强的数据统计分析功能,具有广泛的推广价值。     

SQL语言在C＆C08交换机数据查询中的应用

介绍了SQL语言及其语句的执行，阐述了认为Bam数据库的方法和在C＆C08交换机数据查询中的实际应用。     

海量数据装载工具SQL Loader技术分析

为了提高海量数据的装载速度,甲骨文(Oracle 8)数据库提供了一种将外部数据文件中的数据高速批量装载到数据库表中的结构化查询语言装载工具(SQL Loader)。对SQL Loader的工作机制进行了分析、组件进行了剖析、功能进行了解析,提出了改善SQL Loader性能的技术措施。运用实例说明了SQL Loader的操作过程及方法,并通过与常规装载方法的对比分析试验说明了该装载工具的优点。     

小议ORACLE和MYSQL的联合查询差异

随着计算机技术和数据处理技术的发展,数据库管理软件得到了越来越广泛的应用。其中Oracle和MySql都是现在广泛被应用的数据库管理软件,两者在SQL语法操作方面几乎相同,但是在语法的执行过程中实现的原理有所差别,最近笔者在一个项目中将数据库由Oracle变为了MySql,结果原来的几个联合查询语句的执行效率急剧下降,甚至有时导致内存溢出,这说明两个数据库在执行SQL的原理方面有所差异。本文仅就联合查询讨论两者差异。     

基于关系代数树的查询优化方法实例分析

在数据库操作中查询操作所占比重最大,而查询操作所基于的SELECT语句在SQL语言中又是代价最大的语句。结合实际课题应用,提出了基于关系代数树结构的SQL查询优化策略。利用改进查询计划的代数定律,分析基于关系代数树的关系代数式查询优化方法、研究关系代数表达式与SQL查询的等价变换准则、分析关系代数表达式等价变换前后的查询代价;通过实验、实例以及代价估计验证了利用关系代数树改进数据库查询优化操作的优势。     

使用AOP技术优化数据库应用性能的实践

在企业级应用中,数据库系统无疑是最重要的因素,提升数据库的响应性能是改善应用性能的关键。在本文中,通过对一个现有数据库应用的性能调优工作中所遇到的困难进行分析,提出了使用了AOP技术以一种非侵入的方式跟踪SQL语句的执行,确定受影响的记录数量,利用这些信息自动进行CBO数据统计计算的解决方案,从而改善了数据库的查询性能。     

小议0RACLE和MYSQL的联合查询差异

随着计算机技术和数据处理技术的发展，数据库管理软件得到了越来越广泛的应用。其中Oracle和MySql都是现在广泛被应用的数据库管理软件，两者在SQL语法操作方面几乎相同，但是在语法的执行过程中实现的原理有所差别，最近笔者在一个项目中将数据库由Oracle变为了MySql，结果原来的几个联合查询语句的执行效率急剧下降，甚至有时导致内存溢出，这说明两个数据库在执行SQL的原理方面有所差异。本文仅就联合查询讨论两者差异。     

浅谈SQL Server数据库查询性能的优化

随着数据库应用系统中数据量的急剧增大，对数据库系统性能的优化显得极为重要。本文讨论了影响基于SQL Server应用系统性能的几种因素，并对SQL Server的查询机制和查询优化进行了深入地探讨。     

基于SQL Server与Java的PC端的学生选课评分系统的开发与应用

本文论述了Java以及SQL Server的技术简介,分析了Java以及SQL Server的发展历程.针对应用需求,研究选择Java语言作为整个系统的开发语言,SQL Server 2008作为系统数据库,通过运用SQL语句对数据进行增、删、改、查,实现了按条件查询相对应信息、智能选课、人员信息的增、删、改、查.并通过JDBC接口链接数据库,使用Java语言实现所有的功能模块的界面,更为全面的实现了学生选课评分系统,其中全面包括教师对学生课程的增删改查,学生退选课的操作以及教师对学生的评分操作.