请问如果判断Flag

来源:10-3 ReduceJoin功能实现

John_Z_

2020-09-15

你好老师,请问在ReduceJoin中,这里使用数据集的字段数量来判断和设置Flag,但如果字段数量相同则无法判断,那请问是否有更通用的API可以判断记录的来源?谢谢

写回答

1回答

Michael_PK

2020-09-15

我明白你的意思了,一般情况下,join的两个数据是在不同的目录下,那可以直接从目录上来判断设置flag

0
2
Michael_PK
回复
John_Z_
数据来源可以在setup方法中通过context去获取
2020-09-15
共2条回复

Hadoop 系统入门+核心精讲

从Hadoop核心技术入手,掌握数据处理中ETL应用,轻松进军大数据

2397 学习 · 902 问题

查看课程