海量数据干扰下冗余数据高性能消除方法
茹蓓1
李虹2
1.新乡学院 计算机与信息工程学院,河南 新乡,4530032.吉林省质监检测基地 吉林省纤维检验处,长春,130103
摘要：针对海量数据处理过程中大量相似特征会给数据分类造成冗余干扰,在分类中心确定时出现多次校验、重复等弊端,提出一种海量数据干扰下冗余数据高性能消除方法.采用主动采样方法提取海量数据干扰下冗余数据特征,并对其进行分类.引入均值漂移传递函数对冗余数据进行分类处理,获取冗余数据活跃程度,实现冗余数据的高性能消除.结果表明,相比传统的消除方法,高效消除方法性能良好,所需时间短,具有一定的优越性.
关键词：海量数据干扰冗余数据高性能消除方法改进均值传递函数
分类号：TP311(计算技术、计算机技术)
资助基金：河南省科技厅科技攻关计划(172102210445)河南省科技厅软科学研究计划(152400410345)河南省教育厅项目(15A520093)
论文发表日期：2017-11-01
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：5( 686-690 )
英文信息