讲师回答 / 徐老师
针对你说的这种场景,会出现这种结果:有2个节点读取本地节点中的数据进行本地计算,另外2个节点上没有数据的,则会跨节点拉取数据进行计算。默认情况下会优先读取本节点的数据,这是最优的策略,如果由于各种原因无法满足这种策略,会退而求其次,进行跨节点数据传输
2020-10-26
讲师回答 / 徐老师
官网下载地址:https://archive.apache.org/dist/hadoop/common/hadoop-3.2.0/hadoop-3.2.0.tar.gz
2020-09-09
已采纳回答 / 徐老师
json数据的资料、sqoop相关的资料已经上传到这个网盘链接中了链接:https://pan.baidu.com/s/1AhKOkvsob_ugADZaQc6RlQ 提取码:dy6j
2020-08-12
已采纳回答 / 徐老师
应该是resourcemanager相关的进程没有启动成功,需要查看一下集群中resourcemanager进程的启动日志如果按照视频中的目录进行配置的话,日志是在/data/hadoop_repo/logs/hadoop这个目录下hadoop-root-resourcemanager-bigdata01.log我估计很大概率是yarn-site.xml配置的有问题,具体的可以看看这个日志文件,如果解决不了的话,把这个日志文件里面的错误信息贴出来我看看
2020-08-09
已采纳回答 / 徐老师
你现在的情况是hdfs的服务都起来了,所以访问192.168.100.10:9870是可以的而NodeManager 和 ResourceManager进程没起来,说明YARN服务没有起来,应该是YARN的相关配置文件修改的有问题你在启动的时候控制台有没有显示错误问题?如果没有的话到hadoop的logs目录下(/data/hadoop_repo/logs/hadoop这个目录下)看一下这个日志hadoop-root-resourcemanager-bigdata01.log,这里面会显示Resource...
2020-07-20
讲师回答 / 徐老师
sqoop1.4.7 下载地址 请查收?https://downloads.apache.org/sqoop/1.4.7/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz
2020-07-09
讲师回答 / 徐老师
一般出现这种情况是因为依赖包没有下载成功,你可以到你本地的maven仓库中确认一下对应的jar包是否成功下载或者尝试重新强制下载依赖,使用命令 mvn clean compile
2020-06-24