测试hadoop2.x HA主备切换遇到的问题和解决办法 [

xiaoxiao2021-02-28  36

手动kill 主namenode后,备用namenode没有主动从standby切换到active!!! 解决办法: 备用namenode 上查看 Hadoop-grid-zkfc-server102.log 日志,发现异常如下 2016-10-16 00:09:32,465 WARN org.apache.hadoop.ha.SshFenceByTcpPort: PATH=$PATH:/sbin:/usr/sbin fuser -v -k -n tcp 53310 via ssh: bash: fuser: command not found 2016-10-16 00:09:32,465 WARN org.apache.hadoop.ha.NodeFencer: Fencing method org.apache.hadoop.ha.SshFenceByTcpPort(null) was unsuccessful. 2016-10-16 00:09:32,465 WARN org.apache.hadoop.ha.ActiveStandbyElector: Exception handling the winning of election 2016-10-16 00:09:34,552 WARN org.apache.hadoop.ha.FailoverController: Unable to gracefully make NameNode at server101.hadoop.com/192.168.1.101:53310 standby (unable to connect) 2016-10-16 00:09:34,592 WARN org.apache.hadoop.ha.SshFenceByTcpPort.jsch: Permanently added 'server101.hadoop.com' (RSA) to the list of known hosts. 由上面的警告可知:fuser: command not found,在做主备切换时执行fuser命令失败了。 查看hdfs-site.xml配置文件, <property> <name>dfs.ha.fencing.methods</name> <value>sshfence</value> </property> hdfs-site.xml通过参数dfs.ha.fencing.methods来实现,在出现故障时通过哪种方式登录到另一个namenode上进行接管工作。 ====》》》dfs.ha.fencing.methods参数 系统在任何时候只有一个namenode节点处于active状态。 在主备切换的时候,standby namenode会变成active状态,原来的active namenode就不能再处于active状态了, 否则两个namenode同时处于active状态会有问题。 所以在failover的时候要设置防止2个namenode都处于active状态的方法,可以是 Java 类或者脚本。 fencing的方法目前有两种,sshfence和shell sshfence方法是指通过ssh登陆到active namenode节点杀掉namenode进程,所以你需要设置ssh无密码登陆,还要保证有杀掉namenode进程的权限。 解决步骤: # 查找fuser [root@server101 ~]# yum provides "*/fuser" Loaded plugins: fastestmirror Determining fastest mirrors * epel: mirrors.tuna.tsinghua.edu.cn psmisc-22.20-9.el7.x86_64 : Utilities for managing processes on your system Repo        : base Matched from: Filename    : /usr/sbin/fuser # 在namenode主、备节点上安装fuser(datanode节点不用安装) [root@server101 ~]# yum -y install psmisc [root@server102 ~]# yum -y install psmisc 安装完成后,再次测试,namenode自动切换成功!!!
转载请注明原文地址: https://www.6miu.com/read-2626107.html

最新回复(0)