基于NewTF-IDF的新闻文本特征提取算法研究
黄敏1
闫思贤2
1.郑州轻工业大学 软件学院,郑州4500022.郑州轻工业大学 计算机与通信工程学院,郑州450002
摘要:由于新闻文本种类较多、内容繁杂,为更好地提取文本主题特征词,提出了一种新的特征提取算法NewTF-IDF.传统的TF-IDF算法仅仅以逆文档率对词频进行加权,忽略了词性、词频、词位置、词跨度等其他方面的因素对词语信息量的影响,忽略了词语在不同文档中的分布对关键词重要度的影响.NewTF-IDF算法对TF-IDF算法做了多组合特征因子和离散度两个方面的改进,使特征词的加权方式更加科学.实验证明,NewTF-IDF算法在特征词提取方面具有更好的性能.
关键词:特征提取TF-IDF特征因子离散度NewTF-IDF
分类号:TP391.1(计算技术、计算机技术)
资助基金:河南省高等学校重点科研项目(19A520009)
论文发表日期:2021-06-20
在线出版日期:2025-08-15(本平台首次上网日期,不代表文献的发表时间)
页数:6( 187-192 )
英文信息
