实时主动数据仓库中面向需求的实时数据集成方法研究

实时数据集成是实时主动数据仓库研究领域的一个重要问题.现有的研究成果都是从技术角度出发,而并没有考虑具体的商务应用需求.而在大型商务应用中,即使采用过滤规则只捕捉感兴趣的变化数据,也会产生大量的数据集成工作,从而导致不必要的沉重系统开销,同时还很有可能出现系统响应缓慢和用户需求无法得到满足等情况.从应用角度出发,提出了实时主动数据仓库中面向需求的实时数据集成方法,包括被频繁请求的数据的实时集成、满足突发请求的实时数据集成和由用户决定的实时数据集成.针对不同的商务需求,采用不同的数据集成策略,可以很好地满足不同类型的应用需求.     

实时主动数据仓库中的变化数据捕捉研究综述

实时主动数据仓库是数据仓库的最新发展阶段和未来发展趋势,它为企业提供了对战略决策和战术决策的双重支持.实时主动数据仓库中包含两类数据,即实时数据和非实时数据,相应地,需要两种不同类型的变化数据捕捉方法,即支持实时变化数据捕捉的方法和普通的(不支持实时的)变化数据捕捉方法.结合在该领域的研究经验,对实时主动数据仓库中可以使用的多种变化数据捕捉方法进行了系统地论述,并比较各种方法的应用条件、优点、缺点和适用场合.     

基于实时数据仓库的OLAP研究

传统数据仓库及OLAP应用侧重对历史数据的分析.为了满足实时分析的要求,本文提出了一种实时数据仓库的分区结构.在分析了传统OLAP设计在实时性方面的缺陷后,我们提出了基于分区结构的实时OLAP的设计,使OLAP分析能够达到实时或准实时的要求.     

数据仓库实现中ETL的应用研究

通过外贸业务分析决策系统的实现,探讨在数据仓库项目应用过程中,如何针对来自不同应用系统、不同数据平台、不同数据源形式的源数据系统存在的数据质量的差异性、缺乏一致性等问题,设计较好的ETL(Extract, Transform, Load)过程解决方案,将数据从源数据系统中抽取、转换成数据仓库需要的格式和统一数据类型,并正确加载到数据仓库中,为决策支持系统的实现提供高质量的基础数据.     

数据仓库与数据挖掘的关系及其安全性问题

数据仓库与数据挖掘是当今新的技术热点,数据仓库是一种解决数据使用的高效技术,数据挖掘为之提供了更好的决策支持和服务,同时促进了数据仓库技术的发展.从数据仓库的相关技术和体系结构分析展开研究,分析了数据挖掘与数据仓库的关系,重点阐述了数据仓库的安全性问题,展望了数据仓库未来的研究方向.数据仓库和数据挖掘二者既相互结合、共同发展,又相互影响、相互促进.数据仓库越来越广泛地运用到各个领域中,成为企业获得竞争优势的关键武器.     

机械制造业仓库实时管理方法

通过对以往领料流程和采购入库的研究分析,提出了仓库实时管理的概念.在整个领料、发料、仓库核销及入库的过程当中,运用无线条码扫描技术,大大减少了人为因素,避免了由于主观原因造成的领发料错误;并且在采购入库过程中,运用关联规则数据挖掘Apriori算法对领料数据进行挖掘,实现对采购入库计划的指导,减少了采购计划计划的盲目性...     

实时数据仓库技术的研究

实时数据仓库是数据仓库技术的一个新的发展方向.本文研究总结了实时数据仓库的实现技术和体系结构,并重点研究了数据的实时更新技术,在此基础上提出了一种实用性较强的实时数据仓库的实现方法.     

基于分析规则的主动数据仓库

常规的数据仓库应用中，分析和决策较多地依赖于用户参与。为了在自动决策以及实时性等方面对常规的数据仓库进行改进，文章设计了一种主动数据仓库(Active Data Warehousc)体系结构。它在常规的数据仓库的基础上引进了分析规则。通过对主动规则的改进而设计的分析规则能满足主动数据仓库的特性。相应地还对数据仓库的元数据进行了扩展。     

基于Multi-Agent的主动实时数据仓库研究

传统的数据仓库不能提供实时查询,并且当前的主动实时数据仓库在实时性方面和分布式环境下存在许多不足,针对当前主动实时数据仓库存在的不足,提出基于Multi-Agent的主动实时数据仓库的基本框架,一方面借助了Agent的基本特性提高了数据仓库的主动性和实时性,另一方面采用方案Agent和集成Agent解决了分布式环境下数据仓库集成问题。     

无线实时仓储管理系统的设计与实现

文章介绍了无线实时仓储管理系统的设计与实现方法,讨论了系统的无线网络结构设计以及仓储系统的管理模式,提出了虚拟货位的概念。     

浅谈航空业数据仓库技术及其应用

该文旨在通过对数据仓库技术的简要分析,引出数据仓库技术在航空业的应用。详细分析航空业对数据仓库的需求,设计出适合航空公司发展的数据仓库技术应用方案,探讨了数据仓库和数据挖掘技术在航空业的应用前景。     

浅谈航空业数据仓库技术及其应用

该文旨在通过对数据仓库技术的简要分析,引出数据仓库技术在航空业的应用。详细分析航空业对数据仓库的需求,设计出适合航空公司发展的数据仓库技术应用方案,探讨了数据仓库和数据挖掘技术在航空业的应用前景。     

Meshing Streaming Updates with Persistent Data in an Active Data Warehouse

Active data warehousing has emerged as an alternative to conventional warehousing practices in order to meet the high demand of applications for up-to-date information. In a nutshell, an active warehouse is refreshed online and thus achieves a higher consistency between the stored information and the latest data updates. The need for online warehouse refreshment introduces several challenges in the implementation of data warehouse transformations, with respect to their execution time and their overhead to the warehouse processes. In this paper, we focus on a frequently encountered operation in this context, namely, the join of a fast stream 5" of source updates with a disk-based relation R, under the constraint of limited memory. This operation lies at the core of several common transformations such as surrogate key assignment, duplicate detection, or identification of newly inserted tuples. We propose a specialized join algorithm, termed mesh join (MESHJOIN), which compensates for the difference in the access cost of the two join inputs by 1) relying entirely on fast sequential scans of R and 2) sharing the I/O cost of accessing R across multiple tuples of 5". We detail the MESHJOIN algorithm and develop a systematic cost model that enables the tuning of MESHJOIN for two objectives: maximizing throughput under a specific memory budget or minimizing memory consumption for a specific throughput. We present an experimental study that validates the performance of MESHJOIN on synthetic and real-life data. Our results verify the scalability of MESHJOIN to fast streams and large relations and demonstrate its numerous advantages over existing join algorithms.     

基于WEB的数据仓库技术在物流企业的应用

本文阐述了数据仓库的基本理论及相关的技术,并以一物流企业的数据仓库系统为背景,介绍了数据仓库的设计及实现技术。     

房地产预警系统中数据仓库的设计与应用

房地产预警系统是客观地分析城市房地产运行轨道的应用软件,它设计的基础是大量的房地产信息数据.数据仓库技术可以将这些明细信息汇总统计以供分析决策使用,使预警工作建立在可靠的事实数据的基础上.文中采用软件工程的螺旋式开发方法进行数据仓库的总体开发,应用信息包图描述面向不同主题的概念模型,详细阐述了房地产预警系统中数据仓库的数据建模、数据清理转换等的设计全过程.最后应用联机分析处理技术进行了系统的应用开发.