提示:要查看高清无绳夹克,请用手机打开并单击图像放大。
1 .问题现象
Hadoop集群HDFS、YARN、Hive等服务发生了异常警报
重启集群异常警报gydgb时有大量警报
集群1
硬盘驱动器
抑制可用空间.
NameNode运行状况抑制.
HDFS金丝雀抑制.
数据节点IP-172-31-10-118 )日志文件
NameNode连接抑制.
数据节点IP-172-31-5-190 )日志文件
NameNode连接抑制.
数据节点IP-172-31-9-33 )日志文件
NameNode连接抑制.
高性能存储器IP-172-31-6-148 )日志文件
Hive Metastore Canary抑制.
impala后台程序IP-172-31-10-118 )日志文件
进程状态抑制.
impala后台程序IP-172-31-5-190 )日志文件
进程状态抑制.
impala后台程序IP-172-31-9-33 )日志文件
进程状态抑制.
名称IP-172-31-6-148 )日志文件
安全模式状态抑制.
服务器IP-172-31-5-190 )日志文件
查询成员资格抑制.
Zookeeper服务“仲裁成员资格”警告
CM节点上所有服务的角色日志无法从ClouderaManager控制台成功显示,并显示以下错误:
2 .问题再现
集群环境:
CDH5.12.0群集服务HDFS/hive/yarn/zookeeper/hue/impala/kudu/oo zie )1.恢复现场配置并恢复所有服务器的主机配置文件配置
127.0.0.1 IP-172-31-10-156.AP-southeast-1.com pute.internal
127.0.0.1 localhost localhost.local domain localhost4localhost4. local domain 4
:1 localhost localhost.local domain localhost6localhost6. local domain 6
172.31.8.141 IP-172-31-8-141.AP-southeast-1.com pute.internal
172.31.1.175 IP-172-31-1-175.AP-southeast-1.com pute.internal
172.31.9.186 IP-172-31-9-186.AP-southeast-1.com pute.internal
172.31.10.156 IP-172-31-10-156.AP-southeast-1.com pute.internal
配置中的第一行被配置为额外的异常配置。
在主机上ping自己的主机名称显示
2 .重新启动集群服务
广告中出现了以下大量警告
集群1
硬盘驱动器
抑制可用空间.
NameNode运行状况抑制.
HDFS金丝雀抑制.
数据节点IP-172-31-10-118 )日志文件
NameNode连接抑制.
数据节点IP-172-31-5-190 )日志文件
NameNode连接抑制.
数据节点IP-172-31-9-33 )日志文件
NameNode连接抑制.
高性能存储器IP-172-31-6-148 )日志文件
Hive Metastore Canary抑制.
hiveserver2IP-172-31-6-148 )日志文件
进程状态抑制.
impala后台程序IP-172-31-10-118 )日志文件
进程状态抑制.
impala后台程序IP-172-31-5-190 )日志文件
进程状态抑制.
impala后台程序IP-172-31-9-33 )日志文件
进程状态抑制.
名称IP-172-31-6-148 )日志文件
安全模式状态抑制.
服务器IP-172-31-5-190 )日志文件
查询成员资格抑制.
ip-172-31-10-118
代理状态抑制.
ip-172-31-5-190
代理状态抑制.
ip-172-31-9-33
代理状态抑制.
Zookeeper与现场警报一致,Zookeeper服务为以下状态
查看CM节点的日志,会发生以下异常“Connection refused”
主机列表监视状态
3 .问题的原因
如果群集正常运行,则这是因为所有节点的hosts文件都更改为127.0.0.1
4 .解决方法
修改所有节点的hosts文件,并将注释放置在第127.0.0.1行中
重新启动群集服务并恢复正常
喝醉了酒快马加鞭,少年多自夸! 岭南浣溪沙,吐酒! 挚友拒绝放开,数据玩耍的花!
提示:要查看高清无绳夹克,请用手机打开并单击图像放大。
关注Hadoop的实际技巧,建议第一时间分享更多的Hadoop干货,欢迎转发和分享。
原创文章,欢迎。 转载请注明“根据微信公众号Hadoop实际技巧转载”