老师好,为什么 dataX 的 channel=2 但最终只有 1 个文件

来源:4-14 Datax数据采集实战

奇思妙想赵老师

2021-10-19

整个数据读写是成功的,配置也是正确的,确实识别到分为了 2 个 channel。如图:

http://img.mukewang.com/szimg/616e9b4909811e0904100121.jpg

但是最后 hdfs 里只有 1 个文件

http://img.mukewang.com/szimg/616e9c710922b20908010130.jpg

写回答

1回答

叁金

2021-10-21

你可以看一下图1的日志输出,虽然你配置了2个channel,但是split的task只有一个。

0
1
奇思妙想赵老师
是的,只有一个task,请问这是为什么呢?同样的操作,老师的机器上是 2 个task,而我的只有 1个。怎么理解 channel 和 task 之间的划分机制?
2021-10-21
共1条回复

玩转热门框架 用企业级思维 开发通用够硬的大数据平台

通揽大数据平台全貌,培养企业级开发大局观

485 学习 · 192 问题

查看课程