-
免密码登陆配置命令：
sssh-copy-id -i hostname
查看全部 -
需修改脚本列表
start-dfs.sh
stop-dfs.sh
start-yarn.sh
stop-yarn.sh
查看全部 -
需修改脚本列表：
start-dfs.sh
stop-dfs.sh
start-yarn.sh
stop-yarn.sh
查看全部 -
需修改脚本列表：
start-dfs.sh
stop-dfs.sh
start-yarn.sh
stop-yarn.sh
查看全部 -
配置文件列表：
core-site.xml
hdfs-site.xml
mapred-site.xml
yarn-site.xml
hadoop-env.xml
-- JAVA_HOME
-- HADOOP_LOG_DIR
查看全部 -
java序列化hadoop序列化，主要是将序列号 内存读到磁盘 反序列化：磁盘读到内存中
查看全部 -
同过命令直接将结束haddoop任务结束查看全部 -
如图查看全部 -
多文件的效果查看全部 -
map和reduce执行流程查看全部 -
分布式存储包括map和reduce操作查看全部 -
文件创建时间，什么啥时候进行的修改等操作。
fsimage: 文件系统镜像 ， 源数据镜像文件，某一时刻Namenode内存中的源数据信息，也可理解为快照,是由edit内容信息合并完成，合并卫checkpoint
seondaryNamenode 触发1个小时 100万次操作
edits: 存储用户的操作记录，包括修改，不包括查询
seed_txid: 默认为0， 存储edits 后面的序号，倒序查找，方便恢复
查看全部 -
常见操作vi 创建文件并编辑，
这里用到了前缀：bin/hdfs dfs -各种命令
查看全部 -
shell介绍查看全部 -
一台计算机一般存储能力是512G或1t，但数据量扩大之后，就需要将数据放到不同机器上，然而这样导致管理麻烦。所以就需要系统去管理这样的多台机器上的文件hdfs诞生。
通用性：虽然是访问不同机器，但感觉像是访问自己的主机一台机子，和容错性，不适合小文件
查看全部 -
多机器多个个用户通过网络，分享和存储文件查看全部 -
注意要靠环境变量profile ，只是将安装包考过去。其他没有可拷过去
tar -zxvf 解压
查看全部 -
scp -rp /data/soft/jdk1.8/ hadloop101:/data/soft/
将前面文件拷贝到后面的目录
查看全部
同过命令直接将结束haddoop任务结束
如图
多文件的效果
map和reduce执行流程
分布式存储包括map和reduce操作
常见操作
shell介绍
多机器多个个用户通过网络，分享和存储文件举报