kilo版云主机无法终止及无法创建该怎么处理

发布时间：2021-12-14 15:24:10 作者：柒染
来源：亿速云阅读：178

# Kilo版云主机无法终止及无法创建该怎么处理

## 引言

在OpenStack Kilo版本中，云主机（Instance）无法终止或无法创建是运维过程中常见的故障场景。这类问题可能由计算节点服务异常、数据库状态不一致、资源配额限制或网络配置错误等多种因素导致。本文将系统性地分析故障原因，并提供详细的排查步骤和解决方案。

---

## 一、问题现象描述

用户通过Dashboard或命令行工具执行以下操作时出现异常：
1. 无法终止云主机（`nova delete`命令无响应或报错）
2. 无法创建新云主机（`nova boot`失败）
3. 云主机状态卡在`DELETING`或`ERROR`状态

---

## 二、根本原因分析

### 2.1 服务组件异常
- **Nova-Compute服务宕机**：计算节点上的`nova-compute`服务未运行
- **Nova-Conductor通信失败**：`nova-conductor`与数据库连接异常
- **RabbitMQ消息堆积**：任务队列阻塞导致操作超时

### 2.2 数据库状态不一致
- `instances`表中记录的状态与实际资源不匹配
- 残留的`resource_provider`记录未清理

### 2.3 资源限制
- 项目配额（Quota）耗尽
- 计算节点资源不足（vCPU/内存/磁盘）

### 2.4 网络问题
- Neutron端口未正确释放
- 安全组规则冲突

---

## 三、故障排查步骤

### 3.1 基础检查
```bash
# 检查Nova服务状态
nova service-list

# 检查计算节点资源
nova hypervisor-stats

# 检查RabbitMQ队列
rabbitmqctl list_queues | grep nova

3.2 数据库验证

-- 查询异常实例状态（需替换实例ID）
SELECT * FROM instances WHERE uuid='INSTANCE_UUID';

-- 检查任务队列
SELECT * FROM task_log WHERE task_name LIKE '%delete%';

3.3 日志分析

关键日志路径： - /var/log/nova/nova-compute.log - /var/log/nova/nova-conductor.log - /var/log/nova/nova-scheduler.log

常见错误日志特征：

ERROR nova.compute.manager [instance: UUID] 实例终止超时
WARNING oslo_messaging.rpc.server [req-xxx] RPC超时

四、解决方案

4.1 强制终止云主机（应急方案）

# 1. 直接更新数据库状态（慎用！）
nova reset-state --active INSTANCE_UUID
nova delete INSTANCE_UUID

# 2. 使用--force参数强制删除
nova force-delete INSTANCE_UUID

4.2 清理残留资源

# 清理Neutron端口
neutron port-list --device_id=INSTANCE_UUID
neutron port-delete PORT_UUID

# 清理Libvirt残留
virsh list --all
virsh destroy INSTANCE_NAME

4.3 服务恢复流程

# 重启关键服务
systemctl restart nova-compute
systemctl restart nova-conductor

# 重建RabbitMQ队列
rabbitmqctl purge_queue nova

五、预防措施

5.1 日常监控建议

部署Prometheus监控： “`yaml
- alert: NovaServiceDown expr: up{job=“nova”} == 0 for: 5m
”`

5.2 定期维护操作

# 每月执行数据库校验
nova-manage db archive_deleted_rows --max_rows 1000

5.3 配置优化

/etc/nova/nova.conf关键参数：

[default]
rpc_response_timeout = 300
max_concurrent_builds = 10

六、高级故障处理

6.1 使用Nova-Manage工具

# 修复实例状态不一致
nova-manage instance repair_state --state=error INSTANCE_UUID

6.2 Cellv2架构特殊处理

# 查询Cell映射关系
nova-manage cell_v2 list_cells

# 跨Cell操作时需要指定Cell路径
nova-manage --cell_path CELL_PATH instance list

七、典型案例分析

案例1：RabbitMQ消息堆积

现象：
批量删除操作后出现AMQPTimeout错误

解决方案：

# 扩容RabbitMQ内存
rabbitmqctl set_vm_memory_high_watermark 0.6

# 优化Nova配置
[oslo_messaging_rabbit]
rabbit_qos_prefetch_count = 100

案例2：Ceph RBD锁冲突

现象：
云主机卡在deleting状态，日志出现rbd image is locked错误