爬虫程序,在国内服务器可用,国外服务器就不行了?

来源:10-4 scrapy-redis编写分布式爬虫代码

弗兰克的IT生活

2021-04-01

只是服务器换了,发布到海外服务器上爬虫就爬不到信息了,这种情况是这么回事??

写回答

1回答

bobby

2021-04-02

有没有报错信息?以及国外的服务器能否访问你要爬取的网站?

0
1
弗兰克的IT生活
网络是通的,这个问题目前没解决,切换国内服务器解决的,可能机器所属国家本身对目标网站有限制,或者网络环境问题
2021-04-07
共1条回复

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

查看课程