Hadoop伪分布集群安装部署（下）_快速入门Hadoop3.0大数据处理-慕课网

第6章资源调度器(Yarn)详解
视频：6-1 Yarn资源调度器介绍(05:18)

解锁即可观看《大数据工程师》完整课程视频

立即解锁

大数据工程师

硬核技能带你攻克热点商业项目，从入门直达中级工程师水平，掌握DT时代淘金利器！

【第1周】学好大数据先攻克Linux

【第2周】大数据起源之初识Hadoop

【第3周】Hadoop之HDFS的使用

【第4周】Hadoop之HDFS核心进程剖析

【第5周】Hadoop之初识MR

【第6周】拿来就用的企业级解决方案

【第7周】Flume从0到高手一站式养成记

【第8周】数据仓库Hive从入门到小牛

【第9周】Hive扩展内容

【第10周】快速上手NoSQL数据库HBase

【第11周】数据分析引擎之Impala

【第12周】7天极速掌握Scala语言

【第13周】Spark快速上手

【第14周】Spark性能优化的道与术

【第15周】Spark3.x扩展内容

【第16周】综合项目：电商数据仓库之用户行为数仓

【第17周】综合项目：电商数据仓库之商品订单数仓

【第18周】消息队列之Kafka从入门到小牛

【第19周】极速上手内存数据库Redis

【第20周】Flink快速上手篇

【第21周】Flink高级进阶之路

【第22周】Flink1.15新特性及状态的使用

【第23周】Flink1.15之状态的容错与一致性

【第24周】FlinkSQL(1.15)快速上手

【第25周】FlinkSQL双流JOIN详解

【第26周】全文检索引擎Elasticsearch

【第27周】Es+HBase仿百度搜索引擎项目

【第28周】直播平台三度关系推荐V1.0

【第29周】直播平台三度关系推荐V2.0

【第30周】数据中台大屏

【第31周】实时OLAP引擎之ClickHouse

【第32周】实时数仓-Kafka Eagle+DS

【第33周】实时数仓-Flink CDC数据采集

【第34周】实时数仓-Paimon(数据湖)快速上手

【第35周】实时数仓-Paimon(数据湖)高级进阶

【第36周】实时数仓-湖仓一体项目

【第37周】一站式流式开发平台StreamPark

【第38周】大数据分布式SQL网关Kyuubi

徐老师

猎豹移动、中科院大数据研究院大数据技术专家，拥有10年以上一线互联网公司软件研发经验。曾为移动研究院、平安寿险等企业进行大数据技术企培。著有《Flink入门与实战》、《大数据技术及架构实战派》书籍。

讲师课程

徐老师带你新一代分布式调度工具-DolphinScheduler

免费课中级 1128

徐老师带你入门新一代流式数据湖新秀--Apache Paimon

免费课中级 896

徐老师带你 2小时 Flink SQL快速上手

免费课中级 1037

《大数据开发2024》体验课

免费课入门 1579

提问题

提交

其他问答

查看更多本节问答

写笔记

公开笔记

提交

问答
评论
笔记
资料下载

全部精华我要发布

jps后namenode和secondrynamenode

已采纳回答 / 徐老师

核心错误日志是这一句：Caused by: java.net.UnknownHostException: hadoop100表示不认识hadoop100这个主机名，需要配置hostname以及/etc/hosts

3 回答 630 浏览

2022-04-15

jps可以，浏览器连接超时

讲师回答 / 徐老师

应该是防火墙没关导致的

2 回答 542 浏览

2022-04-19

在服务器上安装的，启动后，web ui界面打不开

最新回答 / 慕哥6429941

9870端口无法打开https://blog.csdn.net/weixin_45094136/article/details/115349017另外要查看防火墙是否真的关闭了我安装的时候9870,8088这2个端口都打不开就是这2个问题造成的

1 回答 805 浏览

2022-04-19

这个安装包在哪里给我呢官网太慢了下载

已采纳回答 / 徐老师

使用这个国内源下载会快https://mirrors.tuna.tsinghua.edu.cn/apache

2 回答 630 浏览

2022-04-22

我没有改那4个脚本文件，就正常启动了，jps和浏览器查看的都正常，是怎么回事？

讲师回答 / 徐老师

一样的效果，你在/etc/profile里面设置也是可以的/etc/profile里面是设置的全局的环境变量，在执行那4个脚本的时候就可以识别到那些配置了

1 回答 562 浏览

2022-04-22

namenode和secondarynamenode都无法开启其他正常

讲师回答 / 徐老师

这里面提示的是你设置的adress设置的有问题，应该是主机名有问题你的主机名中有没有用下划线之类的特殊字符？

1 回答 1031 浏览

2022-04-27

你现在的情况是hdfs的服务都起来了，所以访问192.168.100.10:9870是可以的而NodeManager 和 ResourceManager进程没起来，说明YARN服务没有起来，应该是YARN的相关配置文件修改的有问题你在启动的时候控制台有没有显示错误问题？如果没有的话到hadoop的logs目录下(/data/hadoop_repo/logs/hadoop这个目录下)看一下这个日志hadoop-root-resourcemanager-bigdata01.log，这里面会显示Resource...

3 回答 598 浏览

2022-04-28