Hadoop MapReduce新旧架构的对比研究综述
于金良
朱志祥
李聪颖
1.西安邮电大学 西安7100612.西安邮电大学 西安7100613.西安邮电大学 西安710061
摘要：Hadoop MapReduce架构经过了一次重构,新旧架构有着巨大的差异.论文首先介绍了旧版本MapReduce的架构,作业执行的流程与其中的任务的调度、资源分配等,指出了旧框架的局限性.再介绍了新框架的架构,任务调度和资源分配等.并从二者的架构、任务调度、资源分配等方面进行了对比,指出了新框架的优势.新一代的MapReduce框架YARN是共享模式的,可以在同一集群上运行使用不同的计算框架编写的应用程序,同时也减少了运维的难度,提高了集群资源的利用率.
关键词：MapReduceYARN任务调度资源分配
分类号：TP274.2(自动化技术及设备)
资助基金：2015年工信部通信软科学研究项目(2015-R-19)2015陕西省信息化技术研究项目课题(2015-002)
论文发表日期：2017-01-01
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：5( 83-87 )
英文信息