scrapy 框架只需要提高 url 就可以帮忙下载页面内容，但动态网页呢？怎么和selenium配合

来源：12-1 新建scrapy项目

两努

2020-02-23

使用 scrapy 框架做爬虫，只能爬静态网页吗？
如果是京东页面，需要点击才有的「商品评价」页面呢？

scrapy 可以配合 selenium 使用吗？
如果可以，怎么配合？

写回答

2回答

两努

提问者

2020-02-24

老师，你的另一名课程名称发一下可以吗。适合的话我买一下

bobby

https://coding.imooc.com/class/chapter/92.html#Anchor 这一门课，这个课程的第八章会讲解，这门课我近期也补录了关于cookie池等内容。大概会在下个月上线

2020-02-25

共1条回复

bobby

2020-02-24

可以啊，我的另一门课程中讲解过这个内容，即使一个页面分为多个ajax请求也可以做到，不过不像我们写同步的代码那样轻松，毕竟这是一个异步io框架

Python爬虫工程师实战大数据时代必备

慕课网严选精品教程，高质量内容+服务！

2377 学习 · 1158 问题

相似问题

回答 2

回答 2

回答 3

回答 3

回答 2