heritrix的爬虫包 很好使用
于 2022-06-14 发布
文件大小:21.72 MB
0 102
下载积分: 2
下载次数: 1
代码说明:
Heritrix是一个爬虫框架,可加如入一些可互换的组件。它的执行是递归进行的,主要有以下几步: 在预定的URI中选择一个。 获取URI 分析,归档结果 选择已经发现的感兴趣的URI。加入预定队列。 标记已经处理过的URI Heritrix主要有三大部件:范围部件,边界部件,处理器链
下载说明:请别用迅雷下载,失败请重下,重下不扣分!
发表评论