Scrappy shell无效
来源:7-6 item loader方式解析职位
超级无敌大好人
2021-03-17
拉钩现在具体职位,我用shell直接重定向了,我加了cookie和useragent都没办法,老师该咋办
写回答
1回答
-
拉钩采用了极度变态的动态cookie机制,目前正在破解中。使用scrapy已经无法获取到数据了,目前采用selenium获取最方便,使用scrapy获取也会被反爬
022021-04-30
相似问题
Scrappy shell无效
来源:7-6 item loader方式解析职位
超级无敌大好人
2021-03-17
拉钩现在具体职位,我用shell直接重定向了,我加了cookie和useragent都没办法,老师该咋办
1回答
拉钩采用了极度变态的动态cookie机制,目前正在破解中。使用scrapy已经无法获取到数据了,目前采用selenium获取最方便,使用scrapy获取也会被反爬
相似问题