关于处理大型XML数据的NXD方法研究

XML作为SGML标记语言的一个子集,由于它能很好地表示结构化和半结构化数据,而逐渐成为Internet上或应用程序间数据交换和信息表示的标准。分析和处理XML文档的场合也越来越多,其方法和工具也有很多,然而,对于很大的文档,传统的处理方法存在着很多的缺点和不足之处。文中提出了一种新的分析处理XML文档的方法,即利用NativeXML Database(NXD),以提高分析处理的性能。     

数据集成中XML数据查询语义重写

查询重写是数据库研究的一个基本问题，它和查询优化，数据仓库，数据集成，语义缓存等数据库问题密切相关，为提高集成系统的查询效率，系统选择提交频率较高的XML查询物化为中间层视图，用户提交查询后，系统尽可能利用中间视图层中视图，而不是访问数据源来回答查询，这个问题实际可以归结为半结构化查询重写问题，考虑到中间视图层空间的有限性，已有视图应当尽可能回答更多的查询，传统查询重写方法有考虑半结构化数据之间的约束，而根据约束可以等价变换查询，从而提高中间视图层中的表达能力，提出了一种新的半结构化查询重写的方法，该方法在保证算法正确性和完备性的基础上，利用上半结构化数据中的约束，尤其是XML文件中的路径依赖，来增强中间层物化视图的表达能力，理论分析和初步原型实验证明方法的有效性。     

使用XML数据岛实现数据库查询

本文介绍了如何由ASP从数据库中将查询结果转换成XML文件，然后利用数据岛实现分页显示。     

基于XML的半结构数据的视图问题研究

1 引言数据库中的视图机制主要是根据用户或应用的需要对数据进行剪裁以增加数据库的灵活性。数据库的视图是适合某一特定用户或应用的数据库中部分数据的一种抽象。视图是依照视图声明语言(View Specification Language)来定义的,视图的声明是施加于源数据库(或等价的基数据库)上的。通常,数据库视图既可以是虚拟的(Virtual)、也可以是实际化的     

用XML对数据库查询的方法

本文讨论了用ＸＭＬ查询数据库的具体实现方法。首先,提出了用ＤＴＤ描述关系数据模式和利用ＡＳＰ技术转化数据库的数据成ＸＭＬ文档方法;然后,用ＸＭＬ的查询语言ＸＭＬ－ＱＬ完成Ｗｅｂ数据库上查询和数据集成等操作。     

XML数据查询的存储实现

XML正在迅速成为WWW上采用的信息交换、表示和存储手段之一，首先，本文基于OEM数据模型提出了离散的XML数据模式概念，并在此思想上发展出基于模式匹配的数据查询概念；接着探讨了保证高效查询的XML数据的存储方法；最后，给出了实验分析。本文的内容是我们的基于离散模式的XML数据库系(DISXDBS)的研发工作的查询存储部分。     

利用Oracle XML DB存储XML数据

随着大规模网络数据交换及电子商务应用的飞速发展，XML正快速成为数据交换的国际语言，基于XML的数据库也自然成为众人瞩目的焦点。作者介绍了Oraclegi数据库第2版中OracleXML DB的许多激动人心的功能和特点以及给开发者带来的好处，并以范例说明了加载XML文档数据的过程。     

基于XML的Web应用研究

分析了基于XML的Web应用所面临的典型问题，给出了解决方案和实例，并提出了XML数据库的设计方法。     

IDMEF的XML数据存储和查询研究

越来越多的应用使用XML作为一种通用数据交换格式，IDS也使用XML来定义入侵警报信息规范－IDMEF（Intrusion Detection Message Exchange Format).IDMEF是一种结构比较简单的XML，如果使用通用XML的存储和查询技术，系统会变得比较复杂，分析IDMEF的DTD，发现使用栈结构来存储的查询是十分方便的，把DTD文件经过语法分析，转化成栈结构的数据，再把栈结构的数据保存到关系数据库中，在此基础上可以很容易地实现入侵警报信息的存取，检索，这种方案只需要使用两个表，描述简单，容易实现。很容易把这种方案推广到其他格式简单的XML的存储和查询中，具有一定的通用性。     

基于XML的Web客户端数据粒状更新与分布式计算

本文以实例介绍了XML在粒状更新Web客户端数据和实现简单的分布工计算方面的应用，并介绍了DOM对象和XML数据岛技术及其应用。     

NXD存储系统索引技术研究

XML文档存储是NXD（Native XML Database）系统必须解决的问题．Internet中XML主要应用于信息交换过程的数据结构及语义描述，NXD系统也需要支持XQuery标准，提供高效率的XML文档访问接口．本文较完整地设计了NXD存储系统的体系结构，针对XML的路径查询特点，设计XML结点存储的数据结构及存储系统的索引．包括结构及其建立、维护的算法，索引采用一种HASH算BH（平衡HASH）算法实现．一通过试验系统测试，这些存储结构和算法可以保证NXD系统的访问效率及路径查询效率．     

一种利用并发提高数据处理吞吐率的模型

针对分布式组网终端集中式数据采集与处理系统实时性高、数据吞吐量大、周期性强等特点,引入了一种利用并发机制的大吞吐量实时数据处理模型,在讨论模型基本结构和原理的基础上,深入研究了决定模型数据吞吐效率和时效性能的并发缓存机制和算法设计。利用该模型实现的数据采集处理系统在基于GPRS组网的1500个自动气象站数据采集与处理业务应用中,性能稳定可靠,能够满足对周期性大批量实时＂浪涌＂数据进行实时快速处理的要求,大大提高了数据处理的吞吐效率。     

运用XML技术传输数据

随着企业的发展,企业的关键数据常常存储于不同异构源中,管理并充分利用这些数据是一件非常复杂的事情.数据表示的不统一成为数据应用的瓶颈.可扩展标记语言(XML)通过一种标准格式为不同应用程序间的数据交换和不同系统间的集成提供了强大的机制.XML擅长应对数据结构的变化,因而成为解决问题的关键.它能够保证在数据的交换过程中不改变数据的意义和结构,并适合于在多个平台环境中进行交换.     

运用XML技术传输数据

随着企业的发展，企业的关键数据常常存储于不同异构源中，管理并充分利用这些数据是一件非常复杂的事情。数据表示的不统一成为数据应用的瓶颈。可扩展标记语言（XML）通过一种标准格式为不同应用程序间的数据交换和不同系统问的集成提供了强大的机制。XML擅长应对数据结构的变化，因而成为解决问题的关键。它能够保证在数据的交换过程中不改变数据的意义和结构，并适合于在多个平台环境中进行交换。     

对加密的XML数据查询算法的研究与实现

对于XML加密数据的查询,文献[1]提出了一种"有查询意识的解密"方法,它只解密与查询结果有关联的部分。改进了关于XML加密数据的查询处理方法,利用哈希表、链接表来构建用户密钥索引。在XML文档加密过程中,将XML加密数据与加密的XML索引存储在一起,以便解密后的索引能提供查询结果在XML加密数据中的位置。并提出新的方案,其主要内容包括XML索引设计、用户密钥索引设计、算法设计。实验结果表明,本文方法提高了查询的效率,无需解密无关的加密数据,有效地解决了用户密钥交换次数多和安全的问题。     

大数据处理平台性能优化研究

信息数据已渗透人们的生活,运用大数据平台完成数据处理,提升加快了通信行业的效率,提高了信息材料的利用率。大数据平台可有效分析这些数据,对相关产品的维护、研发发挥促进作用,不断提升产品质量与工作效率,为公司增创收入。基于此,概述了大数据处理平台发展现状,阐述了大数据处理平台性能评估方法和存在的问题,介绍了大数据处理平台性能优化的具体措施。     

基于本体的XML数据集成的查询处理

数据集成在很长一段时间一直为人们所关注．随着XML逐渐成为Web上发布和交换数据的标准,研究人员提出了基于本体的XML数据的语义集成方案．此文对于这样的方案进行了形式化,提出的算法NaiveMaxQEP解决了最大查询计划的生成问题;并基于非完整性角色个数有限的假设,对于查询执行计划生成算法进行了优化,提出了0ptMaxQEP算法;为支持高效的分布式资源整合,文章还给出了网络代价优化算法NetoptQEP,基于网络代价对输出的执行计划进行了优化．     

面向交通大数据的智能处理平台建设研究

现阶段交通数据呈指数增长,并具有结构类型复杂、信息价值较大的特点,为更好地促进交通数据与现在服务业的结合,充分利用其价值为人类生活的便利创造条件,本文研究交通大数据与其它信息平台交互过程中遇到的问题。通过对交通大数据的采集、标准转换、数据流处理等多方面进行研究,建设了面向交通大数据的智能处理平台,提高了数据与其它信息系统的交互能力,为交通数据的深度挖掘做充分准备。