老师,本节提到的黑物表是什么呢?
来源:6-28 高效文件搜索查询-半模糊匹配关键字

Caesar_123
8天前
老师,我看讲解的时候,提到了如果数据量特别大的时候,会采取存储到“黑物表”或elasticsearch中。这个黑物表是指什么呢?具体是怎么样去实现这个方案的?我们公司随着业务增多,系统也用了好几年,数据量会越来越大,以后肯定会影响性能。这种情况应该怎样去应对呢?希望老师能给讲解一下。
写回答
1回答
-
RubinChu
7天前
这种情况需要看实际场景哈,比较普遍的是把所有数据存入 hive 表中作为冷数据,把近期数据存入常用数据库作为热数据,热数据通常是存的近几个月的数据,每天定时备份到冷数据中。普通的查询,为了查询效率,直接查询热数据,如果需要查询几个月前的老数据,就需要去冷数据的数据库查询,通常查询时间比较长,但是由于是不常用的冷数据查询,通常业务上也对于一次查询时间长一些有所容忍
116天前
相似问题