基于Hadoop平台的数据挖掘算法应用研究
陈娥祥
福建农林大学 东方学院, 福建 福州, 350000
摘要：Hadoop平台是一个开源的计算机集群系统,它能快速处理海量的数据,且具备低成本、高效率、高扩展、高可靠、高容错的优势.基于Hadoop平台探索了数据挖掘算法的应用,详细阐述了Hadoop平台的基本组成原理以及运行机制,探索了相关的数据挖掘算法.基于MapRe-duce的K-Modes聚类数据挖掘算法具备较好的自适应性,利用簇众数来取代中心节点,提高了算法效率;基于Hadoop平台的分类算法采用朴素贝叶斯算法来实现数据挖掘过程,实验结果表明它完全适应在大数据环境下的数据处理,节约了时间,提高了算法运行效率.
关键词：Hadoop平台数据挖掘聚类算法贝叶斯算法
分类号：TP311.13(计算技术、计算机技术)
资助基金：福建省科技厅项目(江苏科合成果[2017]4766)
论文发表日期：2018-01-01
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：7( 274-280 )
英文信息