认识Hadoop--基础篇_技术问答

首页免费课认识Hadoop--基础篇问答

认识Hadoop--基础篇

全部评论问答未解决精华

_lql

分区 reduce排序合并

0 5-4 利用MapReduce进行排序（上）

2016-06-13

_lql

hash 归并同一个点

0 5-1 WordCount单词计数（上）

2016-06-13

_lql

job task jobTracker TaskTracker
JobTracker:作业调度,分配任务（map任务 reduce任务），监控tasktracker状态；
tasktracker执行任务报告状态；
MapReduce容错机制：重复执行，推测执行

4 4-2 MapReduce的运行流程

2016-06-13

_lql

客户端发送文件读请求——>namenode返回元数据（从哪些datanode找到）——>客户端读取block，下载下来之后组装；
客户端文件拆分成block——>通知namenode返回可用的有足够磁盘空间的datanode——>客户端对block进行写入——>流水线复制——>更新元数据；

20 3-3 HDFS中文件的读写操作

2016-06-13

yangh100

spark期望中

0 1-2 Hadoop的前世今生

2016-06-05

琳小白

虽然腾讯云和阿里云都有学生计划，但是还是要钱啊。。。

0 2-1 Hadoop安装-获取linux操作系统

2016-06-04

琳小白

老师的声音，我喜欢，这个抑扬顿挫的风格和暴走是一样一样的啊

2 1-1 Hadoop大数据平台架构与实践课程简介

2016-06-04

god_isagirl

http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.1/hadoop-2.7.1.tar.gz

38 2-3 Hadoop安装-配置hadoop

2016-06-03

宙斯盾

hdfs-site.xml
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>

1 2-3 Hadoop安装-配置hadoop

2016-06-01

文人骚客2077

代码不是重点，关键是，如何远程调试hadoop？我如何用eclipse/idea远程调试hadoop应用？

2 5-5 利用MapReduce进行排序（下）

2016-05-22

文人骚客2077

为了应付选修课作业~ 哎~

0 1-2 Hadoop的前世今生

2016-05-19

qq_习惯一个人_1

老师能不能把讲义给我们一份

3 4-1 MapReduce的原理

2016-05-17

bogeff

很不错，希望可以使用IDE来进行编程讲解就更完美了

0 5-3 WordCount单词计数（下）

2016-05-15

宙斯盾

一个job包含多个task

1 4-2 MapReduce的运行流程

2016-05-14

宙斯盾

配置文件
1.hadoop-env.sh 外部环境
修改JAVA_HOME
2.core-site.xml 工作目录
hadoop.tmp.dir dfs.name.dir fs.default.name
3.hdfs-site.xml 数据存放目录
dfs.data.dir
4.mapred-site.xml 任务调度器
mapred.job.tracker
5./etc/proifle 配置环境变量
HADOOP_HOME PATH

3 2-3 Hadoop安装-配置hadoop

2016-05-14

首页上一页 28 29 30 31 32 33 34 下一页尾页

开始学习

课程须知: 本课程需要童鞋们提前掌握Linux的操作以及Java开发的相关知识。对相关内容不熟悉的童鞋，可以先去《Linux达人养成计划Ⅰ》以及《Java入门第一季》进行修炼～～

老师告诉你能学到什么？: 1、Google的大数据技术 2、Hadoop的架构设计 3、Hadoop的使用 4、Hadoop的配置与管理

微信扫码，参与3人拼团

热搜

最近搜索清空

认识Hadoop--基础篇