-
分布式存储系统HDFS
文件系统 ——>多服务器
避免同一时刻大量访问: 主从节点
主节点返回节点信息,从节点存储数据查看全部 -
NameNode:
整个文件系统的管理节点,它主要维护着整个文件系统的文件目录树,文件/目录的元信息,每个文件对应的数据块列表,并且还负责接收用户的操作请求。
包含以下文件:fsimage 元数据镜像文件(某一时刻快照),eidts 用户操作记录,
seed_txid 事务id存储edits索引 (重启时检查是否一致),
VERSION hdfs版本信息
位置: core-xml设定目录dfs/name/current内
默认保存路径hdfs-default.xml中 dfs.namenode.name.dir属性控制
SNN (Secondary NameNode)
定期把edits文件中内容合并到fsimage, 即checkpoint
HA架构没有SNN, 由Standby NameNode实现
DataNode
真实文件存储服务
查看全部 -
格式: bin/hdfs dfs -xxx schema://authority/path
HDFS的schema是hdfs,主机的schema是file。
aithority是Namenode对应ip地址和端口
例如: bin/hdfs dfs -ls hdfs://localhost:9000/path
查看全部 -
不用担心
查看全部 -
hadoop
查看全部 -
HDB,CH还是CDH呢?查看全部
-
-ls
-put
-cat
-get
-mkdir [-p]
-rm [-r]查看全部 -
-ls
-put
-cat
-get查看全部 -
start-dfs.sh
stop-dfs.sh
start-yarn.sh
stop-yarn.sh
查看全部 -
关闭防火墙
查看全部 -
安装hadoop
基本设置
ip设置
主机名设置(临时加永久)
hosts文件修改(ip和主机名的映射关系)
关闭防火墙(临时加永久)
ssh免密码登陆
jdk安装(JDK 1.8)
查看全部 -
安装hadoop
基本设置
ip设置
主机名设置(临时加永久)
hosts文件修改(ip和主机名的映射关系)
关闭防火墙(临时加永久)
ssh免密码登陆
jdk安装(JDK 1.8)
查看全部 -
安装hadoop
基本设置
ip设置
主机名设置(临时加永久)
hosts文件修改(ip和主机名的映射关系)
关闭防火墙(临时加永久)
ssh免密码登陆
jdk安装(JDK 1.8)
查看全部 -
安装hadoop
基本设置
ip设置
主机名设置(临时加永久)
hosts文件修改(ip和主机名的映射关系)
关闭防火墙(临时加永久)
ssh免密码登陆
jdk安装(JDK 1.8)
查看全部 -
ACDSee
抽不出VB
小程序
查看全部
举报