etl过程

来源:8-5 使用Hive完成统计分析功能

程研板

2020-01-14

pk哥,你的etl过程使用的java代码然后打包,能直接用hive中的select语句生成etl后的文件吗。

写回答

2回答

赵小八之小老虎

2020-01-14

这不用想都能,老师不是在视屏最后说了吗?你们可以用sql实现下ETL 其实就是用sql抽取下有用的列到导入到一张新的表,然后再根据新的表计算,其实一样的只不过一个是用MapReduce 一个是Hive 的sql  不对老师之前讲过 Hive 的sql调的也是MapReduce,只不过一个实用java MapReduce API接口实现,一个是用Hive Hql 实现。  哈哈 也不知道理解对不

0
0

Michael_PK

2020-01-14

理解的没毛病。etl是可以使用hive来完成的,但是灵活度不够,使用代码处理更加灵活

0
0

Hadoop 系统入门+核心精讲

从Hadoop核心技术入手,掌握数据处理中ETL应用,轻松进军大数据

2397 学习 · 902 问题

查看课程