几千万的数据如何构建？

来源：8-8 索引构建_异步实现

暴雪哥哥

2018-08-14

老师，课程中是创建一两天数据，对索引时间要求不高。

在现实开发中，数据量都很大，千万上亿的数据如何来提高创建索引的效率？

写回答

1回答

瓦力老师

2018-08-18

亲，这个问题其实比较宽泛哈，具体要看你的数据属性和应用场景，比如像经常处理的日志，即使数据再多，也有时间过期的属性，那么就可以根据日期来处理的哈，其他的你可以具体举例，一起分析下～

暴雪哥哥

谢谢老师回答，还有下面疑惑：比如像前程无忧、智联招聘这样的平台，数据维度多，比如姓名+学历+工作经验+项目经验+简介等等。在数据基量很大的情况下怎么创建索引或者更新索引比较快。 1、创建索引直接从生产数据库读取吗？ 2、如果几千万数据创建索引是不是要几个小时？ 3、要更改索引，增加个字段怎么的，是不是要重新创建一次索引，还是有其他解决方案？

2018-08-19

共1条回复

BAT大牛亲授基于ElasticSearch的搜房网实战

ES+MySQL+Kafka，打造强力站内搜索

898 学习 · 285 问题

查看课程

相似问题

es如何返回所有数据

回答 1

es无法识别date类型版本5.5.2 按照老师的创建索引结构导入

回答 1

如何解决：elasticsearch 中2次查询（查询条件一样），数据不一致的问题

回答 1

nginx日志如何删除或拆分

回答 1

搜索时为什么先冲es查id，在从mysql补全数据？直接es获取不是更好吗

回答 1

打开慕课网App查看更多内容