OpenStack Cinder服务状态排错

开发 架构 OpenStack
最近手动搭建了一个openstack环境,创建硬盘时失败,查看日志,提示无法进行调度,怀疑是cinder节点出现问题,去cinder节点查看服务 ,状态显示正常。

[[333895]]

 本文转载自微信公众号「新钛云服」,作者舒祝  。转载本文请联系新钛云服公众号。

最近手动搭建了一个openstack环境,创建硬盘时失败,查看日志,提示无法进行调度,怀疑是cinder节点出现问题,去cinder节点查看服务 ,状态显示正常。

  1. systemctl status openstack-cinder-volume.service 

然后在控制节点查看cinder服务,openstack volume service list

正常情况下显示:

结果显示cinder-volume的state为down,查看日志发现没有任何错误信息,重启cinder的各种服务仍然没有效果,最后决定跟踪源码(说明:文中代码对应的是OpenStack Train版)。

找到openstack volume service list对应的实现代码。

  1. now = timeutils.utcnow(with_timezone=True

由于openstack-cinder-api.servic服务在controller节点启动,所以获取的是controller节点的当前时间。

services = objects.ServiceList.get_all(context, filters)最终会从cinder数据库的services表中获取所有服务数据。

alive = abs(delta_sec) <= CONF.service_down_time,比较时间差的绝对值是否小于配置的service_down_time,其中service_down_time默认时间是60s。

  1. cfg.IntOpt('service_down_time'
  2.            default=60, 
  3.            help='Maximum time since last check-in for a service to be ' 
  4.            'considered up'), 

art = "up" if alive else "down" 差值小于60,则service 状态为 up,否则为down。由此可见cinder service的state值取决于cinder数据库中 service 表每行数据的 updated_at 列的值和当前 controller 节点的时间差是否在配置的范围之内。

解决问题

上面cinder-volume出现down的原因就是因为运行openstack-cinder-volume.service服务的存储节点时间与controller节点时间差值过大。为了保证状态为up,必须保证两节点的时间差在service_down_time - report_interval之内,默认情况下,差值为50秒。所以同步两台服务器时间之后,再次查看,发现cinder-volume的state变为up。

cinder服务更新机制

下面说下 Cinder Service 的更新机制。

report_interval默认时间是10s,

  1. cfg.IntOpt('report_interval'
  2.            default=10, 
  3.            help='Interval, in seconds, between nodes reporting state ' 
  4.            'to datastore'), 

 

责任编辑:武晓燕 来源: 新钛云服
相关推荐

2015-11-04 15:02:55

飞康FreeStorOpenStack

2015-05-12 10:38:56

openstack k开源分析

2017-10-20 15:25:17

DockerOpenStack Cvolume

2012-10-30 09:59:04

RackspaceOpenStack

2022-09-28 08:00:43

MinioS3接口

2010-04-14 11:23:16

打印服务器排错

2016-02-29 16:54:10

OpenStack混合云应用软件定义基础设施

2017-09-14 10:11:24

OpenStack虚拟机过程分析

2009-06-30 09:39:20

Win Server 打印服务器

2010-09-27 10:24:30

DHCP服务器排错

2019-08-27 08:00:10

OpenStack命令虚拟机

2017-04-17 15:48:15

Cinder备份实践

2013-03-07 10:12:20

ibmrackspacelinux

2015-05-07 09:32:37

IaaS架构统一存储OpenStack

2015-09-18 10:40:04

OpenStackMetadata虚拟机配置

2009-07-28 16:03:23

ASP.NET状态服务

2012-02-13 23:46:22

keepalived高可用

2012-06-18 16:09:50

NASA亚马逊云服务

2013-01-30 10:01:11

DellOpenStack公共云服务
点赞
收藏

51CTO技术栈公众号