分区与 LVM 出问题时的排查顺序:从现象到根因

Linux · 3 分钟阅读· 277 次阅读

LVM 快照不是备份,预留空间写满后快照直接失效且无法回滚

正确的第一步是分类:起不来、连不上、跑得慢,三条路完全不同。

先说结论

先分三类,再由外向内查:网络、进程、配置、依赖、资源。

  • 先确认现象能复现,且能描述清楚
  • 由外向内:端口、进程、配置、依赖、资源
  • 读第一条错误,不是最后一条
  • 改一个变量,验证一次,别一次改五处
  • 留下记录:现象、假设、验证、结论

第一类:起不来

先看进程在不在,再看它为什么退出:LVM 快照不是备份,预留空间写满后快照直接失效且无法回滚。

  • 查看服务状态与最近日志(不是全部日志)
  • 确认端口是否被占用、权限是否足够
  • 确认配置文件语法(多数服务支持 test 模式)
  • 确认依赖的数据目录存在且可写

第二类:连不上

按「本机、网络、代理、应用」四层查:

层级 验证方式 典型原因
本机 本机 curl / telnet 端口 没监听、只听 127.0.0.1
网络 从另一台机器访问 防火墙、安全组、VLAN
代理 检查反代配置与证书 路径、超时、头部大小
应用 看访问日志与错误日志 鉴权、限流、连接池耗尽

第三类:跑得慢

XFS 不能缩小,如果计划缩容,文件系统要选 ext4。

慢的问题先分清是「等」还是「算」:CPU 高是算,CPU 低但延迟高是等(IO、锁、网络)。

分区与 LVM 出问题时的排查顺序

这个服务的高频故障点

同类的坑基本集中在这些位置:

  • lvextend -r 会在扩 LV 的同时 resize 文件系统,少一步手工操作
  • LVM 快照不是备份,预留空间写满后快照直接失效且无法回滚
  • XFS 不能缩小,如果计划缩容,文件系统要选 ext4
  • LUKS 加密后默认不做裸盘 TRIM,SSD 要加 allow-discards 才有回收

别做的事

把 LVM 快照当备份,源盘坏了快照跟着一起没

扩容只跑了 lvextend 没 resize2fs,df 看还是老容量

一次改多个参数,会让下一次故障更难查。

把结论写下来

排查记录不是给别人看的,是给三个月后的自己看的。LUKS 加密后默认不做裸盘 TRIM,SSD 要加 allow-discards 才有回收。

还有几处容易忽略的

都是小地方,但出问题时往往就卡在这里。

  • 根分区只给 30GB 往往不够,Docker 的 /var/lib/docker 默认就在根上
  • swap 放在 LVM 上时,休眠需要 swap 不小于内存的 1.0-1.5 倍
  • 根分区只给 20GB,半年后镜像和日志把它填满

排障能力不是知道更多命令,是知道先查什么。

评论 (3)

K
Kevin

版本差异要强调,我照着做结果参数名全变了。

L
lin

最小可用配置这个说法很好,先跑起来再优化。

阿
阿哲

排查顺序那段直接抄进值班手册了。

发表评论

验证码

提交后需站长审核,通过后才会显示。