为了账号安全,请及时绑定邮箱和手机立即绑定

spark countbykey的结果怎么输出

spark countbykey的结果怎么输出

慕哥9229398 2018-08-27 00:00:52
spark countbykey的结果怎么输出

1 回答

?
叮当猫咪

TA贡献1776条经验 获得超12个赞

numSplits:来自job.getNumMapTasks(),即在job启动时用org.apache.Hadoop.mapred.JobConf.setNumMapTasks(int n)设置的值,给M-R框架的Map数量的提示。goalSize:是输入总大小与提示Map task数量的比值,即期望每个Mapper处理多少的数据

查看完整回答
反对 回复 2018-09-29

添加回答

代码语言

举报

0/150
提交
取消
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号