spider 和 crawler 有何区别？

来源：9-12 scrapy扩展开发

学徒王小明

2018-03-17

老师，spider 和 crawler有什么区别？它们在 scrapy 中的作用是什么？

scrapy 的拓展入口是 from_crawler 类方法，这其中有什么道理吗？

写回答

1回答

bobby

2018-03-19

已采纳

from_crawler这个没有道理 scrapy内部定义的方法必须要按照这个写 https://stackoverflow.com/questions/34260886/difference-between-scraper-crawler-and-spider-in-the-context-of-scrapy

学徒王小明

非常感谢！

2018-04-14

共1条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

查看课程

相似问题

from_crawler(cls,crawler)传进来的参数crawler指的是什么?

回答 1

crawler 对象是什么，发挥了什么作用

回答 1

Crawler 类到底是干嘛的？

回答 1

rule中follow参数为true。

回答 2

怎样在main里面一次性运行多个spider？

回答 1

打开慕课网App查看更多内容