如何在mapreduce中处理Snappy压缩格式的数据
来源:10-4 -Hadoop3.x新特性之HDFS改进
TinyLeon
2018-12-12
老师好:
客户提供的数据是从hive库里捞出来的snappy格式的处理,我这边需要用mapreduce对它进行处理。请问如何在mapper中读取snappy格式的数据?
job.setInputFormatClass();
在mapper中,设置输入job的数据输入格式,它的值应该填写什么?
谢谢老师。
写回答
1回答
-
Michael_PK
2018-12-12
这个我真没使用MapReduce处理过,既然是hive带出来的,你再加载到hive里面去,直接用SQL处理就行了,更方便
00
相似问题