基于内容和链接分析的主题爬虫策略
刘朋
林泓
高德威
1.武汉理工大学计算机科学与技术学院,武汉,4300632.武汉理工大学计算机科学与技术学院,武汉,4300633.武汉理工大学计算机科学与技术学院,武汉,430063
摘要:在分析目前常用的主题爬行策略的基础之上,根据PageRank算法的思想,结合基于文本内容的启发式策略和基于Web超链分析的策略二者之间的优点,提出了一种新的爬行策略,并实现了一个主题爬虫.通过与传统策略的对比,可以得出该策略既可以利用链接分析扩大某个主题的资源覆盖度,又可以保证搜索结果与主题的高度相关.
关键词:主题爬虫爬行策略Web挖掘论文评估
分类号:TP393(计算技术、计算机技术)
论文发表日期:2009-01-01
在线出版日期:2025-08-15(本平台首次上网日期,不代表文献的发表时间)
页数:4( 22-24,80 )
英文信息展开
计算机与数字工程

计算机与数字工程

CSTPCD
ISSN:1672-9722
年,卷(期):2009,37(1)
所属栏目:算法与分析