对于需要使用代理的网站，十万数据量，需要多少代理ip呀

首页课程实战体系课手记专栏慕课教程

对于需要使用代理的网站，十万数据量，需要多少代理ip呀

来源：2-3 windows和linux下安装python2和python3

慕慕7513118

2022-04-19

ip是一到三分钟的那种，网站也封得比较严。大概需要多少代理呢

写回答

1回答

bobby

bobby

2022-04-21

需要看你爬取的网站对ip的爬取速度限制是多少，比如一分钟，一小时，一天访问量是多少

0

0

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

相似问题

爬取登录的网站是否有必要构建UA池与IP代理池

回答 1

ip代理 connection was refused by other side 61 connection refused

回答 1

老师，ip代理是在不需要登录的网站才可以使用吗

回答 1

爬取网站禁用aws ec2的ip

回答 3

老师您好，我想问一下关于scrapy中的ip代理池问题

回答 1

打开慕课网App查看更多内容