主机重启使得Kudu时间不同步的解决方法

问题描述:集群一直运行好好的,突然一天集群机器发生关机->重启后,通过CM观察发现,多个组件飘红,包括HBase、Kudu等,如下图

 

主机重启使得Kudu时间不同步的解决方法

通过查看kudu进程的角色日志,发现是由于时钟不同步引起的,错误日志如下:

主机重启使得Kudu时间不同步的解决方法

 

解决办法:

 

1、登录agent所有机器(除开ntp 服务器),执行命令service ntpd restart

[[email protected] ~]# ntpstat 查看同步状态,出现synchronised 表示同步成功

synchronised to NTP server (10.211.128.21) at stratum 12

time correct to within 1888 ms

polling server every 64 s

如果等了很久,还不能同步,可以试一下ntpdate -u +时钟服务器  强制同步

2、登录agent所有机器(除开ntp 服务器),执行命令service cloudera-scm-agent restart

3、点击红色按钮,重启CM服务

主机重启使得Kudu时间不同步的解决方法

4、等一会儿,CM所有组件恢复绿色,恢复正常