自建对象存储的最小可用配置:五个必须改的默认值

自建服务 · 3 分钟阅读· 312 次阅读

纠删码的可用容量约为总容量的一半,不是四分之三

下面这份配置的目标不是最优,是「半年后回来看还认得」。先把这五项改掉。

先说结论

最小可用配置 = 能启动 + 能观测 + 能备份 + 能回滚。缺一项都不算配好。

  • 路径与数据目录先定死,别用默认
  • 日志要能看,且要有轮转
  • 资源上限显式写出来
  • 健康检查与重启策略配好
  • 备份 + 回滚演练一次

五项必改

按顺序改,每改一项重启验证一次:

  • 数据目录:改到独立分区或卷,避免日志写满根分区
  • 监听地址与端口:只监听需要的接口,别 0.0.0.0 全开
  • 资源上限:内存、CPU、句柄数显式限制
  • 日志:级别、路径、轮转策略三样都写
  • 时区:容器与宿主一致,否则日志和定时任务全乱

配置长什么样

纠删码的可用容量约为总容量的一半,不是四分之三。

配置项 建议值 原因
数据目录 /data/minio 独立分区,便于备份与扩容
监听 127.0.0.1 或内网地址 减少暴露面
内存上限 按实测峰值 ×1.3 防止 OOM 拖垮宿主
日志 按大小轮转,保留 7-14 天 磁盘先满的总是日志
健康检查 30s 间隔,3 次失败重启 挂了能自己回来

表里的值不是标准答案,是「先按这个来,再按观测调」。

这个服务的几个关键事实

和默认值相关、但文档里往往一笔带过的几条:

  • 纠删码的可用容量约为总容量的一半,不是四分之三
  • mc mirror 做增量同步,比 rsync 更懂对象与分片上传
  • 分片上传的 ETag 不是文件 MD5,校验要用 x-amz-checksum 头
  • 大量小对象会拖慢列举,10 万个对象 ls 一次要几十秒

自建对象存储的最小可用配置

验证:怎么知道配对了

配完必须验证,不能只看进程在:

  • 重启一次,确认能自动起来
  • 故意打满内存或断开依赖,看是否按预期降级
  • 查看日志,确认时间戳与本机一致
  • 跑一次备份,再从备份恢复到一个空目录

配置怎么管

把配置放进版本控制,改动写注释说明原因。半年后你会感谢现在的自己。

还有几处容易忽略的

都是小地方,但出问题时往往就卡在这里。

  • 单盘模式没有冗余,盘坏了数据直接没;纠删码 4 盘只能坏 2 盘
  • 生命周期规则是后台异步扫描,配完不会立刻删除对象
  • 单盘跑对象存储当唯一备份目标,盘坏了源和备份一起没
  • 用 ETag 校验分片上传的文件,永远对不上
  • 把 20 万个小文件塞进一个前缀,控制台列表直接卡死

默认值能用,但只有改过的配置才叫「你的」。

评论 (3)

老
老吴

备份没验证过等于没有,这条我认。

阿
阿哲

排查顺序那段直接抄进值班手册了。

南
南风

「先看日志再猜」这句话值一篇文。

发表评论

验证码

提交后需站长审核,通过后才会显示。