爬取拉钩老是被重定向，

首页课程实战体系课手记专栏慕课教程

爬取拉钩老是被重定向，

来源：7-4 Rule和LinkExtractor使用

慕斯0988524

2018-02-09

写回答

1回答

bobby

bobby

2018-02-13

拉钩的反爬虫采取的是最暴力的ip访问限制方式，你可以试试换ip访问

0

13

慕斯0988524

回复

weibo_大胜ga圆珠笔_0

好的，

2018-03-01

共13条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5827 学习 · 6293 问题

相似问题

只爬取，不处理

回答 3

爬取拉钩要登录

回答 2

课程6-4 调试拉钩网爬取url，response为302重定向为登录页面，没有进入调用callback函数parse_item，提取不到后续url

回答 1

实习僧爬取问题

回答 1

老师现在拉勾网的反爬策略是什么呢？

回答 1

打开慕课网App查看更多内容