dont_filter=False 不是过滤吗？？

首页课程实战体系课手记专栏慕课教程

dont_filter=False 不是过滤吗？？

来源：13-3 通过修改scrapy-redis完成增量抓取-2

qq_ZQY_1

2020-09-19

写回答

1回答

bobby

bobby

2020-09-20

已采纳

dont_filter=False代表url会被去重你这里问题是什么

0

1

qq_ZQY_1

非常感谢！

2020-10-26

共1条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

相似问题

dont_filter的问题

回答 1

ScrapyRedis Crawl不会继续爬取

回答 3

关于filtered duplicate request的疑惑?

回答 3

bobby老师求助，还是callback的问题

回答 1

布隆过滤器

回答 2

打开慕课网App查看更多内容