url无限采集工具（python多线程）

作者：小俊分类：黑帽软件发布于：2020-8-29 16:16 ė755次浏览 63条评论

可以无限进行采集，python多线程

运行环境：python+redis

采集原理：从初始关键词里面采集网址，然后在网址里面爬取关键字，一边采集关键字，一边采集网址，redis数据库自动去重，多线程模式采集网址加url！

本文出自小俊博客，转载时请注明出处及相应链接。

错误 2020-11-29 22:40 回复
运行一直百度搜索无结果
DIUNXVO JIXIANG 2020-09-13 10:08 回复
很好的软件，没有地址么
1. 小俊 2020-10-01 04:58 回复
  @DIUNXVO JIXIANG：有的