基于Python的聚焦网络爬虫的设计与实现
唐文军1
隆承志2
1.华南理工大学信息网络工程研究中心 广州 5106402.华南理工大学计算机科学与工程学院 广州 510640
摘要：针对如何快速、精准地检索门户网站信息的问题,设计和实现基于Python语言的聚焦网络爬虫.首先分析聚焦网络爬虫的爬取数据流程,明确爬虫的基本原理;在爬取数据流程的基础上,设计聚焦网络爬虫的通用结构模型;最后,利用Python语言库实现聚焦网络爬虫,并以广东省政府采购网的招标信息的爬取为实例验证该聚焦网络爬虫的可用性.
关键词：聚焦网络爬虫Python语言门户广度爬行策略
分类号：O141.4(数理逻辑、数学基础)
资助基金：国家自然科学基金(61973126)
论文发表日期：2023-04-20
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：5( 845-849 )
英文信息