请教老师,假如我有1万关键词要统计,用scala写,需要用到多线程吗?

来源:4-17 功能开发之完成第一个指标的统计分析

慕函数0552834

2019-10-25

请教老师,假如我有1万关键词要统计,用scala写,需要用到多线程并发运行吗?还是一个个循环,spark本身能解决分布式并行?

写回答

1回答

Michael_PK

2019-10-25

spark本身就是分布式计算框架,如果yarn那就是跑在hadoop集群上。

0
9
Michael_PK
回复
慕函数0552834
没问题
2019-10-25
共9条回复

Spark进阶 大数据离线与实时项目实战

大数据生态圈实用框架(Spark/Hbase/Redis/Hadoop)整合应用及调优

702 学习 · 190 问题

查看课程