Hadoop基础及演练_技术问答

首页免费课 Hadoop基础及演练问答

Hadoop基础及演练

                
                叁金
            JAVA开发工程师

                    查看讲师更多课程 
                    叁金讲师的其他课程
                
玩转热门框架 用企业级思维 开发通用够硬的大数据平台
实战·中级·479

                                                                                                                                    ￥448.00
                                            
多层次构建企业级大数据平台， 成就全能型大数据开发
实战·高级·137

                                                                                                                                    ￥599.00
                                            
ChatGPT入门实战课 AI提效大数据开发平台建设
实战·初级·237

                                                                                                                                    ￥168.00
                                            
Calcite数据管理与SQL优化实战
初级·1103
免费课程
                                
Presto实战与演练
中级·3853
免费课程
                                
                难度初级
            
                时长 1小时 6分
            
                学习人数
            
综合评分9.30
                            51人评价
                        查看评价
                                9.4
                                内容实用
                            
                                9.1
                                简洁易懂
                            
                                9.4
                                逻辑清晰

全部评论问答未解决精华

枫小晨

手动点赞~~

0 2-3 Shell命令操作HDFS

2018-03-05

慕粉1036156

喜欢这个老师

0 1-2 课程简介及目标

2018-03-05

请问replication=1是什么参数？

已采纳回答 / 叁金

对的，是在hdfs中备份的数量。比如设置成3的话就是将写入的文件备份三份。

2 回答 1248 浏览 2-4 Python程序操作HDFS

2018-03-02

慕圣2259047

入门非常好，知道了很多特性

1 4-4 Spark简介

2018-03-01

hdfs目录或文件不存在

讲师回答 / 叁金

你的目录不对啊 hdfs可执行文件在你hadoop的home下面的bin目录下！

3 回答 2439 浏览 2-3 Shell命令操作HDFS

2018-02-26

smileclover

老师讲的很有耐心，很有条理，赞

0 2-3 Shell命令操作HDFS

2018-02-23

Ronrey

赞一个666！！！

0 2-1 HDFS概念及优缺点

2018-02-12

慕沐4058791

除了list(), python3 的同学还可以试下这个解决方法

for i in l_count:
print(i)

1 3-2 MapReduce实战

2018-02-10

关于视频中读流程所举的例子有些疑问

已采纳回答 / 叁金

这里是两个例子，分别是写流程和读流程。读流程这里因为篇幅原因没有画更多的节点。这里想表达的意思是同一个文件不同的数据块可能分布在不同的节点之上。client根据客户端提供的数据块的地址找对应的datanode去读取！这里我当时描述的可能不太清楚。

2 回答 1368 浏览 2-2 HDFS写流程和读流程

2018-02-08

DT黄雨泽

想自学大数据，但是感觉一片茫然，不知道具体从何处下手。。。

2018-02-07

Judithmooc7

讲的很有条理，很好懂！

3 2-2 HDFS写流程和读流程

2018-02-07

服务器分布在不同的机架（双电源），为了防止某条线路断电导致服务器失效（也解决了部分网络机架网络出问题的情况）备份的过程（默认3份）首先，如果client是集群内的节点则将第一份存储在client上否则随机存储到其他节点，第二份节点存储到其他机架节点，第三份存储到本机架节点。（注此处需开启hadoop的机架感知属性，默认是关闭的，如果未开启机架感知则认为随机放到了三个节点上，防止某些节点出问题造成数据丢失）通过zookeeper实现的namenode主备切换，防止因为namenode失效造成的数据无法...

1 回答 1061 浏览 2-2 HDFS写流程和读流程

2018-02-04

_小松

真6啊大神

2 3-2 MapReduce实战

2018-02-04

奋斗的小白菜

早是能后台播放这个就好了

0 2-1 HDFS概念及优缺点

2018-02-03

慕数据4304709

叁金老师讲的通俗易懂，很受用

2 4-4 Spark简介

2018-01-31

为何写流程中是由DataNode1通知DataNode2，再由DataNode2通知DataNode3，而不是DataNode1同时通知DataNode2和DataNode3？

讲师回答 / 叁金

在向HDFS的写操作中，不得不提一下“数据流管道”。数据流管道在Google实现他们的分布式文件系统(GFS)时就已引入，其目的是：在写一份数据的多个副本时，可以充分利用集群中每一台机器的带宽，避免网络瓶颈和高延时的连接，最小化推送所有数据的延时。其实这里我可能表述的不太准确，Client在保存数据的过程当中，将数据发送到第一个数据节点DateNode 1，然后在第一个DateNode节点在本地保存数据的同时，将数据推送到第二个数据节点DateNode 2，同理在第二个节点本地保存数据的同时，也会由...

3 回答 1890 浏览 2-2 HDFS写流程和读流程

2018-01-23

首页上一页 7 8 9 10 11 12 13 下一页尾页

开始学习

课程须知: 有Linux命令使用基础，有Python编程基础

老师告诉你能学到什么？: 大数据到底是个啥，大数据方向到底怎么样 Hadoop基础原理与两个核心 Hadoop的基础应用 Hadoop生态圈简介 Hadoop生态圈常用开源项目介绍

微信扫码，参与3人拼团

热搜

最近搜索清空