-
SPARK：
基于内存计算的大数据计算框架
MapReduce的替代方案
兼容HDFS，HIVE数据源
弹性分布式数据集RDD
查看全部 -
shell操作HDFS：
hadoop fs -cat
查看全部 -
HDFS写流程：
客户端将要存入的数据分块，块在所有datanode上进行存储（副本备份），存储完毕datanode给namenode发消息。
HDFS读流程:
客户端向namenode发起读数据请求，namenode返回数据块存储信息。客户端根据块存储信息向对应的datanode获取信息。
查看全部 -
大数据：HADOOP为代表的大数据平台框架上进行各种数据分析
查看全部 -
hadoop基础查看全部
-
数据块
数据块是抽象块而非整个文件作为存储单元 默认大小为64MB，一般设置为128M，备份X3
查看全部 -
数据分块的依据是什么 如何确定一个文件存储的时候要分成多少个数据块呢？
datanode之间进行数据复制是如何实现的呢？复制的过程会不会出现失败的情况，如果失败了怎么办？有什么机制
查看全部 -
Hadoop生态圈
查看全部 -
大数据概念
查看全部 -
大数据定义
查看全部 -
常用shell命令
查看全部 -
查看全部 -
HDFS读流程
查看全部 -
HDFS写流程
查看全部 -
HDFS写流程
查看全部
举报
0/150
提交
取消