bloomfilter效率

来源：10-9 集成bloomfilter到scrapy-redis中

Homo_sapiensQ

2023-01-17

应用bloomfilter后，大概能给redis节约百分之多少的内存，效率如何？
老师能给一个大概的量化的结果吗

写回答

1回答

bobby

2023-01-18

课程给的源码中提到过哪里可以看bloomfilter需要实现分配的内存量，如果不使用bloomfilter，假设每个url经过md5编码后是50个字节，那么假设10亿个，就是 10亿*50 = 500亿字节，大概46G内存

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

相似问题

回答 1

回答 1

回答 1

回答 4

回答 1