我用老师的方法配置完bloomfilter以后运行jobble的爬虫,就几秒钟。。可视化工具就炸了

来源:10-9 集成bloomfilter到scrapy-redis中

CodeForHzj

2018-11-19

图片描述

写回答

2回答

bobby

2018-11-22

//img.mukewang.com/szimg/5bf60d4b00013cbb16890670.jpg 这个地方修改

0
1
CodeForHzj
好的谢谢
2018-11-25
共1条回复

CodeForHzj

提问者

2018-11-19

后面显示说有500多MB...

0
2
CodeForHzj
回复
bobby
emmm哪里可以修改这个数据量的值啊,好像是bloomfilter里面问题,我没使用bloomfilter的时候,数据是正常的,但是速度好像也有点慢。使用了bloomfilter就显示不了了。
2018-11-21
共2条回复

Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课

带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎

5796 学习 · 6290 问题

查看课程