手机版
你好,游客 登录 注册
背景:
阅读新闻

Ceph集群报 Monitor clock skew detected 错误问题排查及解决

[日期:2017-03-03] 来源:Linux社区  作者:Linux [字体: ]

Ceph集群报 Monitor clock skew detected 错误告警信息如下:
[root@ceph-100-80 ceph]# ceph -w
    cluster ddc1b10b-6d1a-4ef9-8a01-d561512f3c1d
      health HEALTH_WARN
            clock skew detected on mon.ceph-100-81, mon.ceph-100-82
            Monitor clock skew detected
      monmap e1: 3 mons at {ceph-100-80=172.16.100.80:6789/0,ceph-100-81=172.16.100.81:6789/0,ceph-100-82=172.16.100.82:6789/0}
            election epoch 22, quorum 0,1,2 ceph-100-80,ceph-100-81,ceph-100-82
      mdsmap e21: 1/1/1 up {0=ceph-100-80=up:active}, 2 up:standby
      osdmap e116: 6 osds: 6 up, 6 in
      pgmap v205: 576 pgs, 3 pools, 1962 bytes data, 20 objects
            234 MB used, 269 GB / 269 GB avail
                  576 active+clean
   
 1:添加配置参数:             
vim /etc/ceph/ceph.conf

 [mon.ceph-100-80]
 host = ceph-100-80
 mon_data = /var/lib/ceph/mon/ceph-ceph-100-80/
 mon_addr = 172.16.100.80:6789

 # 添加内容如下:
mon clock drift allowed = 2
 mon clock drift warn backoff = 30   

 2:同步配置文件
ceph-deploy --overwrite-conf admin ceph-100-{80..82}

 3:重启mon 服务

/etc/init.d/ceph restart mon

 4:验证:
[root@ceph-100-80 ceph]# ceph -w       
    cluster ddc1b10b-6d1a-4ef9-8a01-d561512f3c1d
      health HEALTH_OK
      monmap e1: 3 mons at {ceph-100-80=172.16.100.80:6789/0,ceph-100-81=172.16.100.81:6789/0,ceph-100-82=172.16.100.82:6789/0}
            election epoch 24, quorum 0,1,2 ceph-100-80,ceph-100-81,ceph-100-82
      mdsmap e21: 1/1/1 up {0=ceph-100-80=up:active}, 2 up:standby
      osdmap e116: 6 osds: 6 up, 6 in
      pgmap v205: 576 pgs, 3 pools, 1962 bytes data, 20 objects
            234 MB used, 269 GB / 269 GB avail
                  576 active+clean
             
再次查看,告警内容消失。
问题总结:
本问题主要是mon节点服务器,时间偏差比较大导致,本次遇到问题为测试环境,通过修改ceph对时间偏差阀值,规避的告警信息,线上业务环境,注意排查服务器时间同步问题。

CentOS 7.1 上安装分布式存储系统 Ceph  http://www.linuxidc.com/Linux/2015-08/120990.htm

Ceph环境配置文档 PDF http://www.linuxidc.com/Linux/2013-05/85212.htm 

CentOS7下部署Ceph集群(版本10.2.2) http://www.linuxidc.com/Linux/2017-02/140728.htm

Ceph的安装过程 http://www.linuxidc.com/Linux/2013-05/85210.htm 

如何升级Ceph版本及注意事项  http://www.linuxidc.com/Linux/2017-02/140631.htm

HOWTO Install Ceph On FC12, FC上安装Ceph分布式文件系统 http://www.linuxidc.com/Linux/2013-05/85209.htm 

实验环境Ceph 9.2.1部署笔记 http://www.linuxidc.com/Linux/2016-11/137094.htm

Ubuntu 16.04快速安装Ceph集群  http://www.linuxidc.com/Linux/2016-09/135261.htm

Ceph 的详细介绍请点这里
Ceph 的下载地址请点这里

本文永久更新链接地址http://www.linuxidc.com/Linux/2017-03/141309.htm

linux
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款