首页 | 本学科首页   官方微博 | 高级检索  
     

基于SN结构的事件流并行数据库加载均衡策略研究
引用本文:刘莹,王启荣,孙凝晖.基于SN结构的事件流并行数据库加载均衡策略研究[J].计算机研究与发展,2009,46(1).
作者姓名:刘莹  王启荣  孙凝晖
作者单位:1. 中国科学院计算技术研究所,北京,100190;中国科学院研究生院,北京,100039
2. IBM中国软件开发中心,北京,100085
3. 中国科学院计算技术研究所,北京,100190
基金项目:国家高技术研究发展计划(863计划) 
摘    要:倾斜问题是并行系统普遍存在的问题,对系统的性能影响很大.事件流数据库作为数据流应用的后端分析处理系统具有连续大量的事件流加载与用户查询并存的特点,传统的解决数据倾斜的方法无法适应其动态加栽的特点.以主干网的网络安全监控应用为研究背景,结合事件流负载特征,针对基于无共享结构的事件流并行数据库提出了一种基于周期计数的能力感知加栽均衡策略.该方法在保证加载性能的同时,可以根据加栽节点的能力在线自动调解数据分布,不仅有效预防和解决了系统倾斜,还为查询服务的性能奠定了良好的基础.模拟分析和真实测试都证明这种加栽均衡策略较其他策略更有效.

关 键 词:倾斜  事件流  并行数据库  负载均衡  加栽策略

Study of Loading Strategy in Shared-Nothing Event Stream Parallel Database Systems
Liu Ying,Wang Qirong,Sun Ninghui.Study of Loading Strategy in Shared-Nothing Event Stream Parallel Database Systems[J].Journal of Computer Research and Development,2009,46(1).
Authors:Liu Ying  Wang Qirong  Sun Ninghui
Affiliation:Institute of Computing Technology;Chinese Academy of Sciences;Beijing 100190;Graduate School of the Chinese Academy of Sciences;Beijing 100039;IBM China Software Development Center;Beijing 100085
Abstract:Skew is one of the most important problems in parallel systems,which has a great impact on the parallel systems performance.The event stream system is the back-end data processing and analysis systems of data stream management systems(DSMS).It is different from the traditional database systems due to the new workload characterization.This kind of systems receive continuous,fast-coming and large volume of event stream data on one side,and supply quick response to the users' queries on the other side.Under su...
Keywords:skew  event stream  parallel database  load balancing  loading strategy  
本文献已被 CNKI 万方数据 等数据库收录!
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号