爬取lagou时报错无法获取内容

首页课程实战体系课手记专栏慕课教程

爬取lagou时报错无法获取内容

来源：7-7 职位数据入库-1

williamg

2017-07-02

显示重定向，有2个问题 -

1. 是不是被禁爬虫了？该如何解封？

2. 另外再问下，用crawl模板生成的任务中，如何加入header？

写回答

1回答

bobby

bobby

2017-07-03

重启家里的路由器然后ip就会变直接在yield request(headers=header)

0

2

bobby

回复

williamg

你加我的qq 442421039 我看看

2017-07-10

共2条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

相似问题

知乎爬取302错误，无法爬取

回答 1

知乎爬取问题

回答 2

博客园只爬取每页第一条

回答 4

爬取拉钩要登录

回答 2

json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)

回答 1

打开慕课网App查看更多内容