老师，bloomfilter去重的指纹也是放到redis里去的吧？

首页课程实战体系课手记专栏慕课教程

老师，bloomfilter去重的指纹也是放到redis里去的吧？

来源：10-9 集成bloomfilter到scrapy-redis中

Jazz_Qi

2019-07-03

老师，bloomfilter去重的指纹也是放到redis里去的吧？

写回答

1回答

bobby

bobby

2019-07-03

已采纳

可以这样理解，其实就是将指纹映射到一个位置上而已

0

3

Jazz_Qi

回复

bobby

谢谢老师

2019-07-04

共3条回复

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

相似问题

request去重和随机user-agent、referer

回答 1

scrapy-redis去重和redis分布式配置问题

回答 1

bloomfilter是把所有的url都放到redis里去重后再去分发下载吗

回答 1

为什么redis服务会给我返回一个空的结果,导致redis服务关闭

回答 8

请问是否有任务结束后保留JOBDIR文件的方法?

回答 1

打开慕课网App查看更多内容