一 端口变化
3.2.0版本中namenode页面端口是9870,datanode管理端口是8088,所以需要开放这两个端口还给web页面访问
二but there is no YARN_RESOURCEMANAGER_USER defined. Aborting operation
hadoop-env.sh中不光需要配置java-home,还需要声明下面这些用户变量,不然无法启动:
export JAVA_HOME=/usr/local/jdk/jdk1.8.0_191
export HDFS_NAMENODE_USER=root
export HDFS_DATANODE_USER=root
export HDFS_SECONDARYNAMENODE_USER=root
export YARN_RESOURCEMANAGER_USER=root
export YARN_NODEMANAGER_USER=root
三 3.2.0版本mapred-site.xml 文件配置需要加mapreduce.application.classpath属性
<property> <name>mapreduce.application.classpath</name> <value> /usr/local/hadoop3/etc/hadoop, /usr/local/hadoop3/share/hadoop/common/*, /usr/local/hadoop3/share/hadoop/common/lib/*, /usr/local/hadoop3/share/hadoop/hdfs/*, /usr/local/hadoop3/share/hadoop/hdfs/lib/*, /usr/local/hadoop3/share/hadoop/mapreduce/*, /usr/local/hadoop3/share/hadoop/mapreduce/lib/*, /usr/local/hadoop3/share/hadoop/yarn/*, /usr/local/hadoop3/share/hadoop/yarn/lib/* </value> </property>
四 salave文件编程workers文件了,内容配置是一样的
五 启动成功不报错,但最蛋疼的Live Nodes为0问题
解决步骤:
一 先查看datanode 日志:
如果出现这个说明连接配置有问题,查看core-site.xml配置,这个是配置datanode和namnode通信的:
一看
这里配置的连接地址有问题
hdfs应该配置成namnode的地址,不能配置成datanode的地址,所有节点都一样,这个地址,配置完成重启成功
网上还有说/etc/hots解析不成功的,这个也是一个原因,配置好域名映射就可以了,重要的是先看日志分析是什么问题
最后成功页面
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持。
Hadoop,集群搭建
更新日志
- 差利兰保-《TheGreatestGift》示范碟NRG
- 联合起来!这款可以让你掌管苏维埃的游戏即将发售正式版
- 全新归来:《攻壳机动队》TV动画新作正式官宣!
- 《艾尔登法环》奎爷Mod:交界地来了位专业弑神者!
- 齐秦《原来的我·黄金纪念版精选》[WAV+CUE][740MB]
- 张学友《等你等到我心痛精选》[WAV+CUE][680MB]
- 《陶喆 David Tao 陶喆同名专辑 1997》[FLAC/分轨][230MB]
- 邓丽君《34首不朽名作 小城经典 2CD》[WAV+CUE][1.1GB]
- 孟庭苇-14首经典歌曲《月亮说话精选辑》[WAV+CUE][680MB]
- 群星《华纳千禧世纪好精选3CD香港版》[WAV+CUE][2.2GB]
- 鸣潮万象新声任务怎么做 万象新声流程攻略
- 鸣潮丹瑾培养材料大全 丹瑾突破材料清单汇总
- 鸣潮安可角色培养材料大全 安可突破材料清单汇总
- 《我推的孩子》第2季全新PV公开!今年7月3日开播
- 外媒:下一代Xbox与前代截然不同 或能运行Steam