ip代理很慢

来源：8-8 scrapy实现ip代理池 - 3

蜥蜴

2017-06-01

我仔细检查了我的代码，从西刺爬取ip后，用requests测试有效性，运行judge_ip（）方法的时候，很长时间运行无返回，这种情况要怎么处理？

结束运行后执行运行到except这部分了。

写回答

2回答

蜥蜴

提问者

2017-06-05

一直都没有返回，按停止，执行到except Exception as e：，然后就又执行get_random_ip()方法了。

bobby

这些免费的ip一般都不稳定，你可以考虑一下这个项目 https://github.com/qiyeboy/IPProxyPool

2017-07-12

共3条回复

bobby

2017-06-02

你先看看except里面的异常信息是什么

bobby

williamg

这些免费的ip一般都不稳定，你可以考虑一下这个项目 https://github.com/qiyeboy/IPProxyPool

2017-07-12

共2条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

相似问题

回答 1

回答 1

回答 2

回答 1

回答 1