csdn问答下一页抓取

来源:6-2 requests功能详解

慕运维5301375

2021-06-25

老师,csdn现在的问答页面怎么抓取,它改成上拉加载的模式了,翻页以后的js请求返回的数据怎么获取,postman直接导过来403

写回答

2回答

慕运维5301375

提问者

2021-06-27

头部所有的请求参数我都复制过去了,我直接通过
copy as url 过去的,请求不了

0
0

bobby

2021-06-26

你已经分析出url了吗?你可以复制浏览器中的request的headers然后在requests中逐步请求,然后一个个去掉headers中的值就知道哪个headers重要了

0
2
bobby
回复
慕运维5301375
你贴一下完整的代码我本地运行试试
2021-06-29
共2条回复

Python爬虫工程师实战 大数据时代必备

慕课网严选精品教程,高质量内容+服务!

2377 学习 · 1158 问题

查看课程