华为云 OBS 生命周期规则实践:自动分层与过期清理降低存储成本
一、背景
在日常项目里,日志、构建产物和备份文件会持续写入对象存储服务 OBS。这些数据刚写入时访问频繁,几周后几乎不再读取,但如果一直放在标准存储里,费用会随时间线性增长。手工清理既容易遗漏,也容易误删。OBS 自带的生命周期管理(Lifecycle)可以按前缀和时间自动完成存储类别转换和过期删除,本文记录我在一个小型项目中的配置思路和踩坑点。
二、存储类别回顾
OBS 提供标准存储、低频访问存储、归档存储和深度归档存储。标准存储适合频繁访问的热数据;低频访问存储单价更低,但有最短存储时间和数据取回费用;归档存储更便宜,但读取前需要先恢复,恢复需要一定时间。选择转换时间点时,要同时考虑最短存储时长和取回成本,否则省下的存储费可能被取回费抵消。
三、规划规则
我的桶里按前缀划分了三类数据:
- logs/:应用日志,7 天内排查问题会读取,30 天后基本不看,保留 180 天满足审计要求。
- build/:CI 构建产物,只保留最近 14 天。
- backup/:数据库每日备份,30 天后转低频,90 天后转归档,365 天后删除。
对应的规则是:
- 规则 A,前缀 logs/:30 天后转为低频访问存储,180 天后过期删除。
- 规则 B,前缀 build/:14 天后过期删除。
- 规则 C,前缀 backup/:30 天后转低频访问,90 天后转归档,365 天后删除。
如果桶开启了多版本控制,还需要为历史版本单独设置过期时间,否则当前版本被删除后历史版本仍然占用空间。我为三个前缀都加了"历史版本 30 天后删除"的设置。
四、控制台配置步骤
- 进入 OBS 控制台,选择目标桶,打开"基础配置"里的"生命周期规则"。
- 点击"创建",填写规则名称,选择"按前缀"匹配并填写前缀,例如 logs/。
- 在"当前版本"中勾选"转换为低频访问存储"和"删除对象",分别填写天数;在"历史版本"中设置删除天数。
- 保存后在列表中确认规则状态为"启用"。
需要注意前缀不要互相重叠,例如同时配置 log 和 logs/ 两条规则时,logs/ 下的对象会同时命中两条规则,执行结果不直观。
五、用命令行验证
除了控制台,也可以用 obsutil 查看桶的生命周期配置,便于纳入运维脚本做巡检。规则生效后,后台会按天扫描对象,转换和删除通常不会在到期当天立刻发生,存在一定延迟,因此验证时不要以分钟级时间判断规则是否生效。我通过上传测试对象并观察其存储类别在几天后的变化来确认规则正确。
六、踩坑与建议
- 最短存储时长:低频和归档存储有最短计费时长,过早转换后又删除,会按最短时长计费。因此 build/ 这类短命数据直接设置过期删除,不做转换。
- 小文件:大量很小的对象转低频或归档收益有限,必要时先打包再上传。
- 误删风险:生命周期删除不可恢复,建议先在测试桶验证,并对重要备份开启多版本或跨区域复制。
- 标签管理:给桶加上项目和环境标签,配合费用中心的成本分析,可以看到规则上线前后的存储费用变化。
七、效果
规则上线一个月后,标准存储容量明显下降,日志和备份的大部分数据进入了低频和归档层,构建产物不再无限堆积,整体存储费用有了可观的下降,而且不再需要人工定期清理。
八、总结
生命周期规则是 OBS 中投入小、收益明显的功能。关键在于按访问模式划分前缀、结合最短存储时长选择转换时间点,并为历史版本设置过期策略。建议在新建桶时就把生命周期规则作为标准配置的一部分。
- 点赞
- 收藏
- 关注作者
评论(0)