一种改进的Hadoop数据负载均衡算法
刘琨1
钮文良2
1.北京联合大学应用科技学院,北京102200;吉林大学计算机科学与技术学院,长春1300122.北京联合大学应用科技学院,北京,102200
摘要：在介绍Hadoop,HDFS的原理的基础上,分析了Hadoop的数据负载均衡算法.Hadoop负载均衡算法只是根据空间使用率对各个结点的负载进行均衡,这种均衡方法没有考虑结点的处理能力、带宽、文件访问频度等因素,因此,造成了基本相同的文件的响应时间存在很大的差别.提出了一种改进的负载均衡的模型,该模型综合了文件大小、文件并发访问时间、文件访问频度、结点的处理能力、带宽、结点的可用存储空间等因素进行负载均衡.试验结果表明,改进模型不仅实现了存储空间的负载均衡,而且使得同类文件的响应时间更一致.
关键词：Hadoop负载均衡云计算云存储
分类号：TP393(计算技术、计算机技术)
资助基金：北京市教委科技面上项目(SQKM201211417008)
论文发表日期：2013-01-01
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：5( 332-336 )
英文信息