分析压缩过后的js文件

来源：9-6 scrapy的暂停与重启

weibo_飞的猪头_0

2018-04-17

bobby老师您好, 我在爬取一个网站的数据时候, 它的headers中有这样一个键值对, 每一次请求键和值都会改变, 这个参数应该是js动态生成的, js也是被压缩过后的。如何分析这种参数是动态生成的网站.

个人猜测2f320d和3f3f06…… 应该是发送ajax请求的时候, js通过固定的字符串和cookie中取出的数据加密而成, 后台使用同样的方式使用固定的字符串及cookie字段加密比较, 如果相同就通过请求

2f3e0d: 3f3f06fafe3e53c4ed2accadfec1f560

写回答

1回答

bobby

2018-04-18

这种分析思路比较简单，先从html中看看有没有，找不到然后从cookie中找看看有没有，如果还是找不到就遍历js文件看看能不能找到，如果都找不到，那就需要去分析js源码了

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

相似问题

回答 1

回答 1

回答 1

回答 1

回答 2