重启K8S节点部分pvc不能正常挂载

发布时间:2020-08-04 08:12:20 作者:zgui2000
来源:网络 阅读:977

Tags: 重启K8S节点部分pvc不能正常挂载
重启K8S节点部分pvc不能正常挂载
===
在本文中重点讲一下重启K8S节点之后部分pvc不能正常挂载的解决方案;

1. 故障发生:

  我们一台k8s计算节点出现故障,强制重启之后,有一个gitlab的pod启动的时候,通过kubectl describe pods gitlab查看的日志总是有报错:

Multi-Attach error for volume "pvc-76b54b6c-df46-11e7-a2f0-005056b12f99" Volume is already exclusively attached to one node and can't be attached to another 

2. 故障处理:

查看pv对应哪个rbd image,这个命令在安装kubectl命令的k8s节点执行

kubectl get pv pvc-1557d839-714f-11e9-8d1a-5065f3457c8c -o go-template='{{.spec.rbd.image}}'

根据上一步输出的结果,在ceph节点上面查看rbd image的watcher,-p指定pool

sudo rbd status kubernetes-dynamic-pvc-199d4a26-714f-11e9-bb25-480fcf482f56 -p kube

根据输出的结果,登录到那台机器上面,在查看rbd images mapped关系

sudo rbd showmapped | kubernetes-dynamic-pvc-199d4a26-714f-11e9-bb25-480fcf482f56

最后一步,根据上一步命令的执行结果,在这台机器上面卸载rdb imags

sudo rbd unmap /dev/rbd8

然后再重启pod,发现pvc可以正常挂载了;

博文的更详细内容请关注我的个人微信公众号 “云时代IT运维”,本公众号旨在共享互联网运维新技术,新趋势; 包括IT运维行业的咨询,运维技术文档分享。重点关注devops、jenkins、zabbix监控、kubernetes、ELK、各种中间件的使用,比如redis、MQ等;shell和python等运维编程语言;本人从事IT运维相关的工作有十多年。2008年开始专职从事Linux/Unix系统运维工作;对运维相关技术有一定程度的理解。本公众号所有博文均是我的实际工作经验总结,基本都是原创博文。我很乐意将我积累的经验、心得、技术与大家分享交流!希望和大家在IT运维职业道路上一起成长和进步;

重启K8S节点部分pvc不能正常挂载

推荐阅读:
  1. Haproxy 实现部分域名使用https,其他域名正常使用
  2. vsan节点故障(Not responding),节点里的应用正常

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

pvc k8s

上一篇:枚举排列

下一篇:好程序员大数据学习路线分享hadoop常用四大模块文件

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》