拉勾网一直返回空列表
来源：16-1 scrapyd部署scrapy项目
归根结底不优秀
2019-06-10
写回答
2回答
-
归根结底不优秀
提问者
2019-06-11
老师，我是先用scrapy抓，然后一直返回的是空列表，才用shell来试一试的
012019-06-11 -
bobby
2019-06-11
这里已经说得比较清楚了，拉钩判断到你这是脚本抓取的 没有给你返回html，所以你解析就没有用了，最好使用requests请求，scrapy shell对于一些简单的url返回没问题，对于一些加了反爬的 最好还是使用requests去模拟请求00
这里已经说得比较清楚了，拉钩判断到你这是脚本抓取的 没有给你返回html，所以你解析就没有用了，最好使用requests请求，scrapy shell对于一些简单的url返回没问题，对于一些加了反爬的 最好还是使用requests去模拟请求相似问题