首页
›
答案
›
题库
›
远程教育
›
联大学堂
如何决定一个job的map和reduce的数量?
如何决定一个job的map和reduce的数量?
正确答案:1)map数量splitSize=max{minSize,min{maxSize,blockSize}}map数量由处理的数据分成的block数量决定default()num=total()size/split()size;2)reduce数量reduce的数量job.setNumReduceTasks(x);x为reduce的数量。不设置的话默认为1。
标签:
Hadoop应用基础
数量
数据
上一条:
如果没有定义partitioner,那数据在被送达reducer前是如何被分区的?
下一条:
列举几个hadoop生态圈的组件并做简要描述?