请问要怎么做才能得到插入数据以后,完整的html??

来源:4-12 提取详情页信息

lily_0012

2022-07-05

bob老师你好,在抓取微信公众号后台数据中,请求返回的response信息无法直接用css或xpath选择器提取,是通过数据插入模板的方式进行组合(js文件链接附下方),请问要怎么做才能得到插入数据以后,完整的html??

链接描述








写回答

1回答

bobby

2022-07-05

这种动态页面需要使用selenium去抓取,因为这些都是js运行后的页面,只有浏览器才有能力运行js

0
7
lily_0012
Bob老师你好,谢谢你前段时间详细的解答,最近又遇到新问题: 在爬取网页微信聊天记录时,用fiddler抓包,总是遇到服务器积极拒绝的情况,这是什么原因呢?(微信联系人头像图标可以抓取到)
2022-08-16
共7条回复

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5795 学习 · 6290 问题

查看课程