为了账号安全,请及时绑定邮箱和手机立即绑定

spark countbykey的结果怎么输出

spark countbykey的结果怎么输出

慕哥9229398 2018-08-27 00:00:52
spark countbykey的结果怎么输出
查看完整描述

1 回答

?
叮当猫咪

TA贡献1776条经验 获得超12个赞

numSplits:来自job.getNumMapTasks(),即在job启动时用org.apache.Hadoop.mapred.JobConf.setNumMapTasks(int n)设置的值,给M-R框架的Map数量的提示。goalSize:是输入总大小与提示Map task数量的比值,即期望每个Mapper处理多少的数据

查看完整回答
反对 回复 2018-09-29
  • 1 回答
  • 0 关注
  • 1646 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信