可扩展并行内存数据库系统:ScaMMDBⅡ

面对OLAP海量数据查询处理的请求与单机内存容量有限的矛盾,设计了ScaMMDBⅡ系统.ScaMMDBⅡ系统将在单一节点上进行的包含可分布式聚集函数的海量数据OLAP查询操作转换为在多个节点子CUBE上并行执行的OLAP查询以及查询结果的合并运算,以此达到简化系统复杂度和提高查询的并行执行能力的目的;除此之外, ScaMMDBⅡ通过迭代的中值计算方法还能够处理不可分布式计算的聚集函数Median.通过分而治之的思想, ScaMMDBⅡ有效地解决了容量与性能之间的矛盾,并且具有高可扩展性.     

基于供应链数据仓库的OLAP数据挖掘

现代企业的竞争已经转变为供应链之间的竞争, 供应链管理是经济全球化发展的产物.在供应链系统的数据库或数据仓库之中存储了大量的数据,如果在供应链数据仓库的基础之上开发OLAP数据挖掘系统,可以使供应链数据仓库更好地适应物流企业决策的需求.文中介绍了基于供应链数据仓库的OLAP数据挖掘应用技术,最后给出了应用实例,并讨论供应链数据仓库的OLAP数据挖掘系统的工作模式及其今后的研究方向.     

基于行存储模型的模拟列存储策略研究

列存储模型在只读的数据仓库应用中表现出非常好的性能,很多研究表明对于典型的OLAP查询,列存储数据库的性能大大优于行存储数据库.根据列存储模型的特性及数据处理特点,在传统的行存储模型关系数据库中模拟列存储的存储模式及数据处理过程,并通过优化的基于聚类的列存储模型、全索引模型与典型的行存储方式进行类比性能测试.实验结果显示,采用传统行存储模型模拟的列存储模型针对OLAP类查询具有很高的数据访问速度及查询性能,整体性能介于行存储数据库与列存储数据库之间.对于实际应用系统来说,该方案减少了整体系统部署代价,而且无需为提高OLAP查询的性能增加额外系统(列存储)投入,从而为OLAP应用提供了良好的性能支持.     

OLAP技术及其在SQL SERVER 2000中的实现

OLTP系统积累的大量数据如何为决策分析提供支持将成为下一阶段数据库应用的重点,OLAP技术通过数据立方体提供多维度的数据视图,并通过旋转切片等操作扩展查询语言的功能来满足这种需求.文中简要介绍了联机分析处理(On line Analysis Process)中的基本概念、OLAP与传统联机事务处理OLTP的差别、OLAP的相关实现技术,并给出了OLAP在SQL SERVER 2000中的具体实现.最后对OLAP的发展前景作出展望.     

基于实时数据仓库的OLAP研究

传统数据仓库及OLAP应用侧重对历史数据的分析.为了满足实时分析的要求,本文提出了一种实时数据仓库的分区结构.在分析了传统OLAP设计在实时性方面的缺陷后,我们提出了基于分区结构的实时OLAP的设计,使OLAP分析能够达到实时或准实时的要求.     

CRM系统中基于ASP.NET的OLAP的设计与实现

介绍了客户关系管理（customer relationship management,CRM）、数据仓库和联机分析处理（on-line analytical processing,OLAP）服务,分析了基于数据仓库的CRM系统中OLAP设计的系统架构.基于ASP.NET和SQL Server2000,并综合运用OWC（office web components）、可扩展标记语言（extensible markup language,XML）等相关技术,提出了拓宽OLAP服务域,实现OLAP报表在Web上显示的一个解决方案.说明了系统的部署配置方法和应用程序的构建过程,给出了实现通过内嵌OWC的Web客户端页面,调用XML Web Service,与OLAP服务器建立连接并进行访问的具体方法.     

基于MS Analysis Services 的OLAP分析系统模型设计及应用

首先对OLAP和MS Analysis Services技术进行了讨论,然后提出了一种基于MS Analysis Services的OLAP分析系统模型设计,模型具有通用性、实用性和开放性.最后给出了运用此模型构建的OLAP分析系统实例,阐述了系统开发的步骤.实践证明运用提出的模型构建OLAP分析系统,实现了良好的分析决策功能.     

一种数据仓库操作的优化方法

数据立方体在许多多维数据的数据仓库的高速OLAP操作中扮演着重要的角色.但是在许多高维的数据仓库的应用中,例如超过100维,大约106个元组,在这样高维下建立物化数据立方体是不可行的.利用最小方的方法可以在高维数据集上进行有效OLAP操作的方法.但每次进行OLAP操作所涉及的维大多有固定的分布,所以大量的查询都有重复计算.如果能部分物化与大多数OLAP操作相关维的立方体ID,就能在进行OLAP操作时可以大大的提高OLAP操作的效率.     

QCS:一种OLAP预防多维推理方法的研究

针对目前多数联机分析处理(OLAP)推理控制方法计算复杂性高、实用性不强的问题,在前人研究基础上,提出一种改进的基于查询单元集QCS(Query Cells Set)的OLAP预防多维推理方法.该方法把OLAP查询的多维推理威胁预防检测放在查询涉及到的底层不相交的单元集(即QCS),而不是单个单元上,从而降低了推理威胁检测算法的计算复杂性,这更符合OLAP的查询处理要求.同时给出QCS方法的有效性证明和算法的实现,并用实例进行说明.与以往的推理控制方法相比,QCS方法不仅可有效保护OLAP系统的隐私信息,而且具有较高的计算效率,能满足OLAP系统的实用性要求.     

基于UML Profile设计OLAP元模型

对UML进行轻量级扩展,建立了一套针对联机分析处理(OLAP)的扩展机制,并建立基于多维建模的OLAP元模型.实现OLAP在概念层上的设计,取代了以往在具体的表结构和数据仓库系统上进行建模的方法.使得OLAP较旱地伴随数据仓库系统进入设计阶段,以减少开发的时间和代价.     

基于数据仓库三层架构的决策支持系统应用研究

数据仓库与联机分析处理(OLAP)技术已成为企业决策支持系统的关键.探讨了基于数据源、数据仓库及OLAP应用三层架构的决策支持系统的体系结构,并结合具体实例给出了系统设计和实现过程.     

基于数据仓库的决策分析系统技术研究

在构建决策分析系统过程中,采用计算列方法和视图法进行数据变换与清洗,选择多维OLAP、关系OLAP、混合OLAP存储模式对提升决策分析系统性能有很大的作用.     

一种在OLAP中保持聚类挖掘结果的有效方法

传统的数据挖掘技术如分类、聚类、关联和异常点发现等技术与OLAP技术的结合通常采用的方法是分类、聚类、关联和异常点发现的结果即为任务的终点和目标.然而事实上,在实际需求中用户不仅仅需要分类、聚类等数据挖掘的结果,还进一步希望此结果能与OLAP分析过程紧密结合,让数据挖掘的结果为OLAP数据分析过程服务.在这种情况下,数据挖掘的结果本身并非最终结果,如何将挖掘结果进一步用于OLAP分析才是用户关注的焦点.以聚类挖掘为例,提出了一种在OLAP分析中保持聚类挖掘结果的方法.     

一种可扩展的OLAP服务系统设计方案

本文提供了一种通用的OLAP服务系统设计方案，该方案能支持不同的DBMS厂商开发的OLAP服务器产品，具有较好的可扩展性和灵活性，用户可根据实际情况选择OLAP服务器产品。为实现这一目标，引入了自定义的查询模式语言，在前端工具和特定的OLAP服务器产品之间起语义转化的作用。     

基于“C藤”Pair Copula的高维OLAP查询建模方法研究

信息爆炸造成的数据仓库维度的急剧增加,大大影响了OLAP查询模型的精度和效率.首次将数理统计学中的“C藤”Pair Copula引入到OLAP查询建模的研究中,有效地解决了高维OLAP查询建模时的“维数灾难”问题,并设计了针对该模型的参数估计方法以提取数据概要知识.实验分析表明与传统方法相比,基于Pair Copula方法的模型可以在保证OLAP的查询精度的基础上减少数据立方体的存储空间,并且在高维数据环境下具有更高的查询效率.     

Oracle下OLAP三层应用系统的研究与设计

结合一个决策支持系统,介绍了OLAP的基本概念,分析了用Oracle开发基于数据仓库技术的OLAP应用系统的设计及实现方法,给出了一个OLAP系统的三层体系结构.     

基于B/S结构的OLAP技术的研究与实践

基于C/S架构的OLAP系统中存在的缺陷已经阻碍了OLAP技术的发展.通过对 Web方式下数据库执行方式的比较,采用页面嵌入控件的方式对OLAP系统架构进行改进,实现Web环境下对OLAP系统的访问,并针对该方式中较流行的OLAP系统架构方案的不足,提出新的解决方案,解决跨平台问题,能更好地普及和应用OLAP技术.     

多维数据模型的变粒度存储策略研究

提高联机分析处理(OLAP)的响应速度是数据仓库研究的核心问题之一.文中根据多维数据模型的结构特点以及OLAP需求提出了一种变粒度存储策略.实验表明该策略能有效地减少存储空间,提高OLAP响应速度.     

基于图结构索引的分布式OLAP加速方法

随着业务数据的规模增大,一些重要的应用场景需要使用分布式在线分析处理(OLAP)支持大规模数据的分析,例如商务智能(BI),企业资源计划(ERP),用户行为分析等.同时,分布式OLAP打破单机存储的限制,可以将数据放在内存中以提升OLAP的处理性能.然而,基于内存的分布式OLAP在消除磁盘I/O后,性能瓶颈转移到了连接操作.连接操作是OLAP中的一种常用操作,会进行大量的数据读取与计算操作.通过对现有的几种连接操作方式进行分析,提出了一种能够加速连接操作的图结构索引以及基于图结构索引的连接操作方式LinkJoin.图结构索引通过用户所指定的连接关系,将数据在内存中的位置以图结构的形式进行存储.基于图结构索引的连接方式,不仅能够有等同于哈希连接的较低复杂度,而且在执行过程中能减少数据读取与计算操作次数.将目前先进的开源内存OLAP系统MonetDB从单机系统扩展成分布式系统,并且在该系统上设计与实现了基于图结构索引的连接操作方式.针对该系统的图索引结构,列式存储以及分布式执行引擎这3个重要方面,进行一系列设计与优化,以提升系统的分布式OLAP处理性能.测试结果表明,在TPC-H标准测试中...     

语义Cube的层次聚类方法

在DataCube语义特性及模式中维的层次性基础上提出了多维数据之间的等价关系≡HCov,对DataCube进行层次聚类·该方法的优点在于用等价类的方法保存了所有聚集记录,同时定义了等价类之间的关系,以保存聚集记录之间的层次信息·理论分析和实验证明,该方法不但节省了存储空间,而且利用聚类信息及层次信息,可高效的进行各种OLAP查询,以及支持多维数据上的上钻下钻、旋转等Cube语义操作·同时,为OLAP查询导航、OLAP查询行为分析的实现提供了可能·