关于ES的词典问题,以及结合做大数据分析问题
来源:3-5 -analyze_api

程序员猫哥
2018-11-04
在学分词,我用的是6.4.2版本网上说es带了近义词词典,但是找遍了没找到- -还有就是那个如果es结合大数据分析的技术,可以结合哪些?老师能给个方向吗?我想并行学一下- - spark之类的可以吗?
写回答
1回答
-
近义词词典一般是自己维护的,es 近义词是使用 synonym token filter 实现的,参看下面的官方文章
https://www.elastic.co/guide/en/elasticsearch/guide/current/using-synonyms.html
https://www.elastic.co/guide/en/elasticsearch/reference/current/analysis-synonym-tokenfilter.html
我这个月写篇这方面的文章吧,到时候更新过来,你看下具体如何用
es 本身也是大数据相关的技术,是目前大数据领域涉及到实时分析、日志处理等不可或缺的一个组成。
如果你想学习其他的组成,spark 是一个很好的方向,在实时流处理方面它做的很好。从找工作方面来讲也比较容易。最近比较火的 Flink 也可以关注下。学习这些技术的时候务必要了解他们底层的一些知识,这样可以做到一通百通,很多流行大数据技术在底层技术实现上是类似的,这样可以尽快跟上时代的潮流。
加油!
012018-11-12
相似问题