老师,在实际生产中,有将 spark streaming 所有数据储存为 parquet 吗,这个效率怎么样,会不会有瓶颈

来源：7-2 -核心概念之StreamingContext

慕运维7479159

2018-02-11

写回答

1回答

Michael_PK

2018-02-11

已采纳

不一定，这个看你们公司的技术方案，如果要存HDFS，那肯定是列式存储的好点，比如parquet或者orc

慕运维7479159

非常感谢！

2018-02-11

共1条回复

Spark Streaming实时流处理项目实战

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

1404 学习 · 571 问题

相似问题

回答 1

回答 2

回答 1

回答 1

回答 1