如果使用了chrome+selenium的话,那如何设置ip代理池和随机user-age呢

来源:9-1 selenium动态网页请求与模拟登录知乎

qq_whatever_11

2018-07-01

之前设置在middleware中的随机user-agent和ip代理池还会有效吗

写回答

1回答

bobby

2018-07-03

chromedriver的界面版不支持,但是你可以试试这个 chromedriver的headless版本 https://blog.csdn.net/hunter_wyh/article/details/78548056

0
4
bobby
回复
qq_whatever_11
scrapy-splash稳定性没有chrome好,而且后期会不会维护不好说,chromedriver是google维护的 会长期维护的
2018-07-09
共4条回复

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

查看课程