请教老师一个问题,关于爬虎牙的
来源:13-12 案例总结
慕设计3439860
2019-04-28
1、就是我做了一个爬虎牙英雄联盟的爬虫,功能基本能实现,但有个疑问就是爬的信息是当前页面下主播的名字和人气,如何实现比如第二页信息的爬取呢?我数了下我爬的主播人数是120名主播,正好对应当前页主播的数量,如何实现比如说下一页主播的信息也一并爬取呢?第二页的网址和第一页的网址是一样的
写回答
1回答
-
7七月
2019-04-29
从爬取的html中分析出下一页的url,然后发送请求 请求第二页的html,分析页面数据,然后是第三页url,依次循环到最后一页。
042019-05-01
相似问题