Web仓储中的单视图一致性

Web仓储系统使用物化视图的方法管理和维护Web数据,它可以给用户的查询和分析带来更快的效率,特别适合联机分析处理(OLAP)和决策支持。Web环境中数据更新非常频繁,为保持系统的时新性(freshness),需要不断刷新物化视图,在Web视图刷新的过程中,必须保持物化视图与基础数据之间的一致性(称为单视图一致性,SVC),否则系统中的数据就会产生错误,进而影响用户的正确使用,围绕这种单视图一致性,针对Web环境的特性,给出了相关保持算法,这些算法具有良好的Web环境适应性和伸缩性。     

保持时新性的WebView自适应物化和维护策略

WebView是指存储在WebRepository中的Web页面。WebView对于很多系统来说都非常有用,它可以给用户的查询和分析带来更快的效率,特别适合联机分析处理(OLAP)和决策支持。然而当使用Repository中的信息为用户服务时,笔者无法保证所提供的信息是最新的(与源数据保持up-to-date)。在这种情况下,虽然把这些信息返回给用户,实际上却不知道这些信息是否可以满足用户的需要。为了提高数据质量,系统需要尽可能提高数据时新性(Freshness),保持Repository与数据源相一致。该文围绕数据时新性,对系统存储哪些页面,这些页面又如何更新和维护才能取得系统能力和效率之间的平衡进行讨论,并提出一种基于效益的时新性保持方法(Profit-basedFreshness-keepingMethod,PFM),同时给出了它的近似解。实验结果说明,该方法在系统效率和数据时新性综合评估方面优于传统方法,同时对Web环境具有良好的适应性。     

Web仓储中视图变化频率的自适应估测

物化视图的刷新是Web仓储进行系统维护的一项主要任务,而基础数据变化频率则是刷新方案中的重要因素.在已有文献中,研究者已经给出一些关于基础数据变化规律的算法和估测器.虽然这些估测器取得了不错的效果,然而他们却忽略了这些估测器都有一定的适用范围,超出这个范围则效果急剧下降.在此,基于泊松过程进行分析,对估测器的适用范围进行了讨论,根据估测结果的偏离值和有效性对估测公式进行参数调整,同时根据估测值的大小不断调整数据源的访问频率和次数,从而使数据源访问模式和估测器互相适应,使估测器在最佳估测范围内获得估测值.实验结果表明,与已有文献中的方法相比,新提出的自适应估测算法能够取得更好的效果.     

Web仓储系统的视图刷新方案

1 Web仓储的时新性标准 WWW的迅猛发展使其成为全球信息传递与共享日益重要的信息资源。Web仓储使用物化视图构建信息集成系统,是对Web信息进行充分利用的一种有效方法。Web仓储具有高稳定性,查询速度非常快,非常适合决策分析等需要对信息进行深度加工的应用。与使用虚视图方法进行集成的系统不同,Web仓储系统中的首要任务是物化视图的构建和维护,而视图刷新则是物化视图维护工作的主体。     

一种满足数据时新性的WSN运载路由算法

为满足无线传感器网络应用的数据时新性,综合节点传送数据和移动设备辅助传送数据2种方式的优点,提出一种能量高效的运载路由算法。通过计算移动设备的最优接收数据位置,规划移动设备的路径,降低传感器节点的能量消耗,由此提高网络性能。模拟结果表明,该算法能在保证数据时新性的前提下,较大地减少网络能耗。     

Web半动态页面的状态迁移维护法

Web的迅猛发展使其成为全球信息传递与共享日益重要和最具潜力的资源。对于内容由许多源数据库导出的大型Web站点来说,保持自身的时新性是非常重要的一项任务。这一点对于那些提供快速变化信息,如股票交易信息和产品信息的网站来讲尤为突出。本文介绍一种名为MOST(Maintain On Status Transfer)的算法,它把数据库导出的半动态页面分为四种状态,不同状态的页面有着不同的使用和维护规则,页面根据访问情况和基础数据变化情况进行状态迁移。实验数据表明,MOST算法对于更新和访问都比较频繁的Web环境具有较好的适应性,性能优于纯物化算法和Mod算法。     

Web数据集成系统基于QC模型的物化视图选择

在Web数据集成系统中,物化视图能够有效地减少网络传输代价,提高系统的查询效率．如何选择查询进行物化,使得选中的查询满足集成层的空间限制,同时获取最大物化收益,成为集成系统中一个迫切需要解决的问题．传统方法没有考虑到海量XML查询之间的包含关系,其选择的物化视图中可能包含冗余的信息．针对上述问题,提出了①Web数据集成系统中海量查询集合的QC(query containment)模型,该模型能够捕捉查询之间最常见的包含关系;②基于QC模型的物化视图选择算法,算法考虑了物化视图选择相关的主要因素,包括查询提交的频率、空间代价、查询重写能力和查询结果的完备性,提出了查询位图的物化视图组织方式,从而获取更加合理的物化视图选择方案．实验结果证明了该方法的有效性．     

浅谈数据整合技术在税收业务系统中的应用

由于计算机应用的飞速发展,很多单位都存在多个业务处理系统。这些业务处理系统是在不同时期因不同业务需要独立建立起来的,不可避免地产生“信息孤岛”现象。这种情况下,改变原有的异构、分散和孤立的基础架构、重新构筑一个全新的技术架构的“信息整合战略”应运而生。     

数据仓库构建过程中数据整合技术的研究

在分析数据仓库及数据整合技术的相关理论基础上,综合当前主要的数据整合技术的优缺点,提出了一种结合物化视图、日志等技术的数据整合技术方案,并将该方案应用于业务综合管理系统中,取得了较好的效果。     

网上监测系统Web数据网关设计与实现

在分析网上监测系统结构及实时数据处理的基础上,提出了一种通用实时监测Web数据网关设计方案。该Web数据网关采用多线程机制,在线采集工业控制的实时数据,通过浏览器可视化组件动态发布设备运转及生产状况信息。方案具有完善的页面请求、客户请求、以及数据对象的管理和服务功能,其结构灵活,系统维护性强。     

Web数据挖掘中的可信数据来源

从大量Web信息中获取有用的信息是Web数据挖掘的关键问题.如何评价web信息是否可信,现在主要方法是通过BadRank算法进行内容评测,或是通过链接权重进行相关引用数计算.可信数据来源是数据挖掘的前提,在基于关键词的数据挖掘中,通过评价挖掘所涉及的不同数据域,以及数据域自身的可信性,对在不同域所获得的挖掘数据给以权重,从而对挖掘结果的序列产生影响,提高挖掘算法在获取可信结果方面的效率.并通过试验测试了可信域评价的效果.     

构建一种高效的Web网站访问数据获取系统

提出了一种基于客户端的访问数据获取机制，它有效地克服了现存的不足，同时给出了构建实现系统的结构。     

Real-Time Reactions in Supervisory Control According to Data Freshness

Supervisory control systems in plants mustacquire data without any loss and react for state changes. Someof state change should be reacted in a real-time manner, whileothers may be notified in a best-effort manner. To implementa middleware which works as a server in supervisory control systemsin an acceptable cost, we value the data freshness which meanshow much time has passed from the occurrence of the data. Inthis paper, we present the Active Ring model whichincorporates the ECA mechanism into circular areas. With rulesusing only the latest data, the ECA mechanism realizes time-criticalreactions as firm real-time tasks. In addition to that, the rulestrigger best-effort notification which is realized as a softreal-time task. The middleware works in numerous plants for steelmill, water purifying, and tunnel ventilation. This paper includesan experimental result revealing that the ActiveRing model is effective to provide service according to the datafreshness.     

Web数据挖掘研究

基于Web的数据挖掘是一个结合数据挖掘和WWW的热门研究主题,它是现代科学技术相互渗透与融合的必然结果。本文阐述了Web数据挖掘的定义、分类和过程,并对Web数据挖掘的应用与发展前景进行了探讨。     

Web数据挖掘研究

基于web的数据挖掘是一个结合数据挖掘和WWW的热门研究主题,它是现代科学技术相互渗透与融合的必然结果。本文阐述了Web数据挖掘的定义、分类和过程,并对Web数据挖掘的应用与发展前景进行了探讨。     

Web数据仓库及其在办公自动化系统中的应用

随着办公自动化系统应用的日益深入,产生了大量的历史数据,同时,在办公自动化系统中,也需要利用历史数据和环境数据进行办公自动化的辅助决策。因此可以利用Web数据仓库技术,将办公自动化系统中的海量数据重组,构成可用、可控、可扩展的数据组织,以满足企业各级主管和办公、业务人员分析决策的信息需求。文中介绍了Web数据仓库在办公自动化系统中的应用。在分析Web数据仓库以及办公自动化的概念及特点的基础上,结合办公自动化系统的数据形式和决策需求,描述了Web数据仓库技术与办公自动化系统结合的框架结构,并以一个子系统为例说明Web数据仓库技术在办公自动化系统中的具体实现方法。     

Web日志文件的异常数据挖掘算法及其应用

从数量化角度给出了异常数据的一般性定义，以Web服务器日志文件数据为依据，讨论了挖掘异常数据的方法和途径；给出了基于距离的单指标的离散统计法和综合统计法，并结合校园网作了实际的分析处理。结果表明，该方法是可行的。