Hadoop进阶_技术问答

首页免费课 Hadoop进阶问答

Hadoop进阶

全部评论问答未解决精华

step1运行失败，请问有人知道是怎么回事吗？

最新回答 / 不看6324不混吃等死

这些不是报错，这是客户机连接状态，即使成功也会有

1 回答 1277 浏览 3-3 mapreduce实现矩阵相乘(2)

2019-07-14

源码哪里有?

+ 我来回答回答最高可+2积分

0 回答 407 浏览

2019-07-13

运行失败输出日志是这样什么问题

最赞回答 / 不看6324不混吃等死

解决就是全局缓存，没有设置为绝对路径private static String cache = "/matrix/step1_output/part-r-00000"

1 回答 739 浏览 3-4 mapreduce实现矩阵相乘(3)

2019-07-13

420M是一个完整的文件吗？

最新回答 / 我要做工程师呀呀

Map阶段的输入如果是从HDFS读取的话，那么这个文件就会从多个DataNode读取，但最后读取的是一个完整的文件

1 回答 761 浏览 2-2 从分片输入到Map

2019-07-02

为什么连接不上呢，求帮忙

最新回答 / 不看6324不混吃等死

你代开hdfs没有，映射有没有设置好

2 回答 935 浏览 3-3 mapreduce实现矩阵相乘(2)

2019-06-21

原问题已解决..

最新回答 / 詹姆斯周

多多学习，多多思考

1 回答 733 浏览 2-3 Map—Shuffle—Reduce

2019-05-27

step1运行失败。。。

最新回答 / 詹姆斯周

在百度搜索框输入问题试试

1 回答 806 浏览 3-3 mapreduce实现矩阵相乘(2)

2019-04-26

java.io.IOException: No input paths specified in job

最新回答 / Blossom7

没有，它变成了另外一个错误，你要在编译器中连接虚拟机，还要添加相关的矩阵文件

5 回答 2454 浏览 3-3 mapreduce实现矩阵相乘(2)

2019-04-25

DataNode大小

最新回答 / 刚刚入行的老司机

128

1 回答 673 浏览 2-2 从分片输入到Map

2019-04-02

12345

最新回答 / 慕粉13321504129

10JQKA

1 回答 714 浏览 1-1 hadoop体系架构

2019-03-22

转置结果？

最新回答 / 大魔王OR3135271

啊我懂了<...图片...>

2 回答 834 浏览 3-3 mapreduce实现矩阵相乘(2)

2019-02-26

分片问题。

最新回答 / 慕运维3335648

应该是规定读取的方式按行来的，加入按列来读取，那就可以按列来分片了

1 回答 964 浏览 3-4 mapreduce实现矩阵相乘(3)

2019-02-25

Reduce1中数据整合算法问题

最新回答 / 詹姆斯周

百度搜下问题看看

1 回答 945 浏览 4-3 基于物品的推荐算法（代码）

2019-02-15

matrix1.txt文件内容老师没发

最新回答 / 陆米

懒不死你1 1_1,2_2,3_-2,4_02 1_3,2_3,3_4,4_-33 1_-2,2_0,3_2,4_34 1_5,2_3,3_-1,4_25 1_-4,2_2,3_0,4_2

1 回答 1001 浏览 3-4 mapreduce实现矩阵相乘(3)

2018-12-19

Shuffle就是combiner吗？

最新回答 / qq_世人如此功利_0

不是的，Combine在Shuffle之前Combine：在Map阶段，当所有数据处理完成后，Map Task对所有临时文件进行一次合并Shuffle：也称Copy阶段。Reduce Task从各个Map Task上远程复制一片数据，并针对某一片数据进行判断，如果其大小超过一定阀值，则写到磁盘上，否则直接放入内存中

1 回答 1140 浏览 2-3 Map—Shuffle—Reduce

2018-12-13

首页上一页 1 2 3 4 5 下一页尾页

开始学习

课程须知: 1、在学习本课程之前，需要学习hadoop课程基础篇，即掌握MapReduce作业的基本步骤。 2、需要掌握线性代数、向量等的基本数学知识

老师告诉你能学到什么？: 1、hadoop新旧版本的基本架构 2、mapreduce作业的内部原理 3、mapreduce作业重要参数的调优 4、利用hadoop缓存实现矩阵相乘 5、简单的推荐算法

微信扫码，参与3人拼团

热搜

最近搜索清空

Hadoop进阶