异构环境下改进的Hadoop调度算法 |
| |
引用本文: | 林金羽,闫格.异构环境下改进的Hadoop调度算法[J].漳州师范学院学报,2021(3):62-67. |
| |
作者姓名: | 林金羽 闫格 |
| |
摘 要: | Hadoop是一个用于以高效的方式处理大数据的框架.任务调度是Hadoop框架的核心问题之一,其默认的调度器不能根据节点及作业资源的异构性进行任务分配.针对该问题,本文提出一种异构环境下基于作业及资源分配的调度算法.该算法可根据估计作业到达率和平均作业的执行时间将作业分类,找到与该类作业匹配的资源,优先将本地任务分配给...
|
关 键 词: | Hadoop 调度算法 异构 数据本地性 公平 |
|
|