ETLApp maptask数问题

来源:6-18 省份浏览量统计功能升级

慕少0127260

2019-10-16

老师,您的ETLApp类中maptask数是几个,都 是读取trackinfo_20130721.txt大小166M,其中setup()方法一共执行多少次,setup()方法执行的次数是否等于maptask数?

写回答

1回答

Michael_PK

2019-10-16

每个map task里面set up只执行一次,map方法只执行多次

0
4
Michael_PK
回复
慕少0127260
不是这个,你要从conf中拿到block size的那个参数,我没记错的话,代码里面出来会是64m
2019-10-16
共4条回复

Hadoop 系统入门+核心精讲

从Hadoop核心技术入手,掌握数据处理中ETL应用,轻松进军大数据

2397 学习 · 902 问题

查看课程