ip被封后,更换代理ip依然没有效果,请问是什么原因呢

来源:8-8 scrapy实现ip代理池 - 3

loonslo

2019-03-27

我下午从西刺拉ip的时候,爬取速度过快,ip被封掉了,弹出提示503,,
然后我用代理ip连接,依然提示503.连续好几个代理ip都是这样了,请问是什么原因呢》。
图片描述
图片描述
这个ip连接其他url是可以用的

写回答

1回答

bobby

2019-03-29

你说你用的免费代理继续抓取西刺会被ban? 你使用的ip是西刺的代理ip抓取的西刺吗?如果是用的西刺的代理的话,既然西刺知道这些代理ip地址,会不会直接将这些ip直接封了呢?

0
2
bobby
回复
loonslo
是的,用的人实在太多了,给你推荐阿布云,使用非常简单,可用性很高,就是有点贵
2019-04-15
共2条回复

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

查看课程