课程6-4 调试拉钩网爬取url，response为302重定向为登录页面，没有进入调用callback函数parse

课程6-4 调试拉钩网爬取url，response为302重定向为登录页面，没有进入调用callback函数parse_item，提取不到后续url

来源：7-4 Rule和LinkExtractor使用

慕仔0239935

2017-08-27

写回答

1回答

bobby

2017-08-28

亲这是被怀疑为爬虫然后重定向你去登录了就不会进入parse_detail了你可以适当限制一下爬虫速度

bobby

慕尼黑530398

你说的请求头是什么？可以在组件中设置

2017-12-04

共10条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5829 学习 · 6293 问题

相似问题

回答 2

回答 3

回答 2

回答 1

回答 2