-
分布式存储介绍
查看全部 -
分布式存储介绍 1.0
客户端一多文件系统压力大
查看全部 -
HDFS,Yarn主节点最多有两个主节点，多个从节点
查看全部 -
Yarn的三种调度器：
1.fifo scheduler 2.CapacityScheduler 3.FairScheduler
查看全部 -
注意日期参数
查看全部 -
定义各种变量 inputpath=
删除输出目录
执行清洗任务
判断是否执行成功 hdfs dfs -ls ${output_path}/_SUCCESS
if ["$?" = "0"] //linux中判读上个命令是否执行成功
then
echo ”执行成功“
执行下一个任务
查看全部 -
shell脚本设置
查看全部 -
print("hello")查看全部 -
HDFS 常用shell命令
查看全部 -
拷贝SSH 达到SSH免密登录效果
ssh-copy-id -i hadoop102
查看全部 -
SSH免密登录
查看全部 -
大数据生态圈
查看全部 -
1.0 NameNode 节点只有一个
2.0 NameNode 节点可以有2个
3.0 NameNode 节点可以有3个
查看全部 -
大数据系统生态圈
查看全部 -
yarn也符合主从节点，主节点最多两个
查看全部
举报
0/150
提交
取消