IDF度量值 怎么理解?获取到这个值后有什么作用?

来源:4-5 使用Spark实现中文分词+TF-IDF

慕函数0552834

2021-11-07

http://img.mukewang.com/szimg/6187d68f0910458a08500264.jpg

IDF度量值  怎么理解?获取到这个值后有什么作用?

写回答

1回答

小简同学

2021-11-09

同学你好,是用来提取文本特征,让计算机去读懂文本,计算机是不知道这个文本表达的是什么意思,TF-IDF这个值可以度量文本里面每个词语的权重值,最能够表达这个文本的词语,它的权重值就高,这样子,计算机就能知道这个文本要表达的含义。


0
0

Spark+ES+ClickHouse 构建DMP用户画像

大数据主流技术,数据挖掘核心算法,用户画像完整知识轻松掌握

306 学习 · 219 问题

查看课程