| 基于组件的大数据分析服务平台 |
| |
| 引用本文： | 赵薇,刘杰,叶丹.基于组件的大数据分析服务平台[J].计算机科学,2014,41(9):75-79. |
| |
| 作者姓名： | 赵薇 刘杰 叶丹 |
| |
| 作者单位： | 1. 中国科学院大学 北京 100190;中国科学院软件研究所 北京 100190
2. 中国科学院软件研究所 北京 100190 |
| |
| 基金项目： | 本文受国家自然科学基金(61202065,61170074),国家863计划(2012AA011204),国家科技支撑计划(2012BAH05F02)资助 |
| |
| 摘 要： | 随着数据规模的快速增长,单机的数据分析工具已经无法满足需求。针对大数据的分析问题,设计并实现了一种基于组件的大数据分析服务平台Haflow。Haflow自定义了业务流程模型和可扩展的组件接口,组件接口支持各种异构工具的集成。系统接收用户定义的业务流程,将其翻译成执行流程实例,提交到Hadoop分布式集群上执行。Haflow是一个可扩展的、分布式的、支持异构分析工具的、面向服务的大数据分析服务平台。提出该平台有两重意义:一方面平台将与数据分析业务无关的工作封装起来,支持各种异构组件,以加快分析应用的开发速度;另一方面,平台后端使用Hadoop分布式系统来实现多任务的并发,从而提高应用的平均执行速度。
|
| 关 键 词： | 大数据 数据分析 数据挖掘 组件 分布式 服务 平台 |
| 收稿时间： | 2013/9/20 0:00:00 |
| 修稿时间： | 2013/10/30 0:00:00 |
Module Based Big Data Analysis Platform |
| |
| ZHAO Wei,LIU Jie and YE Dan.Module Based Big Data Analysis Platform[J].Computer Science,2014,41(9):75-79. |
| |
| Authors: | ZHAO Wei LIU Jie and YE Dan |
| |
| Affiliation: | University of Chinese Academy of Sciences,Beijing 100190,China;Technology Center of Software Engineering,Institute of Software,Chinese Academy of Sciences,Beijing 100190,China;Technology Center of Software Engineering,Institute of Software,Chinese Academy of Sciences,Beijing 100190,China;Technology Center of Software Engineering,Institute of Software,Chinese Academy of Sciences,Beijing 100190,China |
| |
| Abstract: | |
| |
| Keywords: | Big data Data analysis Data mining Module Distributed Service Platform |
| 本文献已被 CNKI 万方数据 等数据库收录！ |
| 点击此处可从《计算机科学》浏览原始摘要信息 |
|
点击此处可从《计算机科学》下载全文 |
|
