老师，有些网站下一页的url是js生成的 selenium直接点击报错

首页课程实战体系课手记专栏慕课教程

老师，有些网站下一页的url是js生成的 selenium直接点击报错

来源：4-11 scrapy中为什么要使用yield

10codes15bugs

2019-12-01

写回答

1回答

bobby

bobby

2019-12-02

如果手动可以点击那么使用selenium也可以点击，你如果点击不了有没有报错？你可以通过查看浏览器的chrome的console或者看看pycharm的console是否有报错信息？

0

2

bobby

回复

10codes15bugs

好的，

2019-12-04

共2条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

相似问题

selenium 集成到scripy后，点击翻页问题

回答 4

为什么要使用selenium

回答 1

爬虫的进阶学习

回答 1

网站下一页的a标签，href链接是js脚本，该如何爬取下一页的内容？

回答 1

学习爬取知乎首页所有question，发现提取网页源码的href解析出question的url是不能深度爬取全站所有question的url

回答 1

打开慕课网App查看更多内容