拉勾现在不能通过cmder获取到数据？

首页课程实战体系课手记专栏慕课教程

拉勾现在不能通过cmder获取到数据？

来源：7-6 item loader方式解析职位

句点2393256

2020-04-24

刚刚开始我通过下面命令进去嘛，，，然后就
scrapy shell -s USER_AGENT=“Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3 904.108 Safari/537.36” https://coding.imooc.com/learn/questiondetail/154919.html 图片描述

我通过下面的命令返回一个空列表
response.css(".job-name::attr(title)")
有点疑惑。。。

写回答

1回答

bobby

bobby

2020-04-25

你先把html打印出来看看是否符合预期

0

2

bobby

回复

weixin_慕勒4383646

你给scrapy shell添加useragent 拉钩要检查useragent

2020-07-03

共2条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5831 学习 · 6293 问题

相似问题

老师现在拉勾网的反爬策略是什么呢？

回答 1

完全没办法匹配拉勾网URL了

回答 1

爬取拉钩要登录

回答 2

拉勾现在不登录出能访问页面

回答 1

获取了登录后的cookie无法获取具体信息

回答 1

打开慕课网App查看更多内容