cundeng 发表于 2018-8-11 13:42:37

知道创宇爬虫程序的实现-Python

def main()　　获取各个参数
　　for i in 深度：
　　total=该层URL总数
　　初始化线程池
　　for j in 该层URL
　　线程池.添加任务（各参数）
　　线程池处理任务列队
　　该层URL总数=线程结果队列
　　数据库.summit()
页: [1]
查看完整版本: 知道创宇爬虫程序的实现-Python