Hadoop进阶_学习笔记

首页免费课 Hadoop进阶笔记

Hadoop进阶

最热最新

慕仔7523148

213213

查看全部

0 采集收起来源：Map—Shuffle—Reduce
2019-08-01
慕仔7523148 02:40

314313

查看全部

0 采集收起来源：从分片输入到Map
2019-08-01
慕仔7523148 01:46

231231

查看全部

0 采集收起来源：从分片输入到Map
2019-08-01
慕仔7523148 01:12

21312321

查看全部

0 采集收起来源：从分片输入到Map
2019-08-01
慕仔7523148 01:17

213213

查看全部

0 采集收起来源：从分片输入到Map
2019-08-01
慕仔7523148 00:32

3224234

查看全部

0 采集收起来源：从分片输入到Map
2019-08-01
慕仔7523148 00:41

324234

查看全部

0 采集收起来源：WordCount实例回顾
2019-07-31
慕仔7523148 04:27

2313424

查看全部

0 采集收起来源：hadoop体系架构
2019-07-31
昵称真的不好起 04:53

Reduce任务数量

查看全部

0 采集收起来源：Map—Shuffle—Reduce
2019-07-30
昵称真的不好起 04:07

在一个reducer中，所有数据都会被按照key值升序排序

查看全部

0 采集收起来源：Map—Shuffle—Reduce
2019-07-30
昵称真的不好起 03:33

partition reduce和输出文件的数量是相同的

查看全部

0 采集收起来源：Map—Shuffle—Reduce
2019-07-30
昵称真的不好起 01:08
MapReduce的四个阶段
1. split阶段分片输入阶段
2. Map
3. shuffle阶段
4. 4.reduce阶段
查看全部

0 采集收起来源：WordCount实例回顾
2019-07-29
昵称真的不好起 05:20

Hadoop2.0
移除了原有的JobTracker和TaskTracker,改由Yarn平台的ResourceManager负责集群中所有资源的统一管理和分配，NodeManager管理Hadoop集群中单个计算节点

查看全部

0 采集收起来源：hadoop体系架构
2019-07-29
昵称真的不好起 02:41

HDFS:分布式文件系统，若干台计算机组成，存放PB，TB数量级以上的文件，每份文件可以有多个副本，高冗余，高荣错的文件系统

查看全部

0 采集收起来源：hadoop体系架构
2019-07-29
慕仔7523148 08:17

21321

查看全部

0 采集收起来源：课程总结
2019-07-24

首页上一页 8 9 10 11 12 13 14 下一页尾页

0/150

提交

取消

开始学习

课程须知: 1、在学习本课程之前，需要学习hadoop课程基础篇，即掌握MapReduce作业的基本步骤。 2、需要掌握线性代数、向量等的基本数学知识

老师告诉你能学到什么？: 1、hadoop新旧版本的基本架构 2、mapreduce作业的内部原理 3、mapreduce作业重要参数的调优 4、利用hadoop缓存实现矩阵相乘 5、简单的推荐算法

微信扫码，参与3人拼团

热搜

最近搜索清空

Hadoop进阶