如何在mapreduce中处理Snappy压缩格式的数据

来源:10-4 -Hadoop3.x新特性之HDFS改进

TinyLeon

2018-12-12

老师好:
客户提供的数据是从hive库里捞出来的snappy格式的处理,我这边需要用mapreduce对它进行处理。请问如何在mapper中读取snappy格式的数据?

job.setInputFormatClass();

在mapper中,设置输入job的数据输入格式,它的值应该填写什么?
谢谢老师。

写回答

1回答

Michael_PK

2018-12-12

这个我真没使用MapReduce处理过,既然是hive带出来的,你再加载到hive里面去,直接用SQL处理就行了,更方便

0
0

10小时入门大数据

【毕设】大数据零基础入门必备,轻松掌握Hadoop开发核心技能

1456 学习 · 656 问题

查看课程