Crawler 类到底是干嘛的?

来源:8-5 通过downloadmiddleware随机更换user-agent - 2

海洋球

2018-06-13

一直没理解他的作用,, 和Spider 有啥区别。

写回答

1回答

bobby

2018-06-15

https://stackoverflow.com/questions/34260886/difference-between-scraper-crawler-and-spider-in-the-context-of-scrapy

0
0

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

查看课程