基于语境分析的汉语分词器在文本信息过滤系统中的应用
律佳
廉立志
1.大庆职业学院,计算机应用工程系,黑龙江,大庆,1632552.大庆职业学院,计算机应用工程系,黑龙江,大庆,163255
摘要：针对汉语分词的歧义切分问题,提出了一种基于语境分析的二元汉语分词器,通过词典匹配和二元切词的结合进行歧义消解,使用分词校正器从句子语法角度上检测分词结果的正确性.实验证明,改进的汉语分词器具有识别各种类型新词、消解各类歧义的能力;将其应用到文本信息过滤系统的文本分析模块,在强化系统语言分析能力的同时,系统的过滤精度也得到大幅度的提高.
关键词：汉语分词器文本信息过滤歧义消解分词校正器
分类号：TP393.08(计算技术、计算机技术)
资助基金：黑龙江省研究生创新科研项目(YJSCX2006-38HLJ)
论文发表日期：2010-01-01
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：5( 66-70 )
英文信息