| FlowS:一种MapReduce数据流公平调度方法 |
| 其他题名 | flows:a fair scheduling method for mapreduce dataflow
|
| 李奇原; 刘杰; 叶丹; 许舒人
|
| 2012
|
| 发表期刊 | 计算机科学
 |
| ISSN | 1002-137X
|
| 卷号 | 39期号:9页码:157-161,174 |
| 摘要 | MapReduce Job的调度机制一直是学术研究的热点。在分析MapReduce数据流调度模型的基础上,提出一种面向MapReduce数据流的公平调度方法FlowS。该方法采用数据流池来分配资源以保证MapReduce数据流的隔离性,并且采用数据流池动态构建算法来确保资源的公平分配。实验表明,该调度方法可以有效提高Hadoop集群对MapReduce数据流的处理效率。 |
| 收录类别 | CNKI
; WANFANG
; CSCD
|
| 其他摘要 | MapReduce Job scheduling has been paid great attention in academic research.Based on the analysis of MapReduce dataflow scheduling model,this paper presented a fair scheduling method for MapReduce dataflow-FlowS.This method can not only provide the isolation of MapReduce dataflow through dataflow pools,but also assure the fairness of resource allocation through dynamic construction algorithm.The results of experiences show that the proposed method can improve the processing efficiency of Hadoop Clusters. |
| 关键词 | Mapreduce数据流
资源管理
公平调度方法
|
| 部门归属 | 中国科学院软件研究所软件工程技术中心;中国科学院研究生院;
|
| 学科领域 | Computer Science (Provided By Thomson Reuters)
|
| 资助者 | 国家自然科学基金项目(61170074)|国家科技重大核高基项目(2010ZX01042-001-001-05)|国家科技支撑计划(2011BAH15B05,2012BAH05F02)资助
|
| 语种 | 中文
|
| CSCD记录号 | CSCD:4628165
|
| 内容类型 | 期刊论文
|
| URI标识 | http://ir.iscas.ac.cn/handle/311060/14960
|
| 专题 | 中国科学院软件研究所
|
推荐引用方式
GB/T 7714 |
李奇原,刘杰,叶丹,等. FlowS:一种MapReduce数据流公平调度方法[J]. 计算机科学,2012,39(9):157-161,174.
|
| APA |
李奇原,刘杰,叶丹,&许舒人.(2012).FlowS:一种MapReduce数据流公平调度方法.计算机科学,39(9),157-161,174.
|
| MLA |
李奇原,et al."FlowS:一种MapReduce数据流公平调度方法".计算机科学 39.9(2012):157-161,174.
|
除非特别说明，本系统中所有内容都受版权保护，并保留所有权利。
修改评论