无法请求怎么破

首页课程实战体系课手记专栏慕课教程

无法请求怎么破

来源：4-4 pycharm中调试scrapy源码

DennisXu

2020-12-02

图片描述

写回答

1回答

bobby

bobby

2020-12-03

cnblogs没有robots文件你的settings是否将 ROBOTSTXT_OBEY = False 设置了

0

2

bobby

回复

DennisXu

你要设置为false不要设置为true

2020-12-04

共2条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

相似问题

请教破解淘宝滑动验证的方法

回答 2

老师，scrapy使用代理api

回答 2

拉勾网重定向无法爬取

回答 3

请求CSD乱码

回答 1

不知道老师对京东的滑动验证码有什么破解思路么

回答 3

打开慕课网App查看更多内容