scrapy爬取知乎无法直接登

来源：6-14 item loder方式提取question - 1

追梦逐梦白日做梦

2017-06-17

为什么我的scrapy在爬知乎的时候，登完一次之后，再登还是要输验证码

写回答

1回答

bobby

2017-06-19

已采纳

再次登录之后要验证码是正常的为什么要反复登录呢

bobby

追梦逐梦白日做梦

这个完全是由于知乎的反爬虫策略完成的，因为我之前很少请求知乎，所以知乎一开始不会随便判断我为爬虫让我输入验证码，这个和每个人的ip以及useragent有关，不一定每个人都一样

2017-06-20

共2条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

相似问题

回答 2

回答 1

回答 2

回答 1

回答 2