OBS 桶里冷数据越来越多?用生命周期规则降存储成本的完整做法
OBS 桶用久了,里面会攒下大量几乎没人再访问的冷数据:几个月前的日志、历史备份、已经归档的报表。它们还按标准存储计费,量一大,每月账单就明显多出一块。
解决办法不是定期手动搬数据,而是给桶配一条生命周期规则,让对象按年龄自动降级、自动清理。规则一旦配好,系统按对象最后一次修改时间判断年龄,到点自动执行,不用人工干预。
一、先分清哪些数据是冷数据
动手前先按前缀把桶里的数据分分类:logs/ 放应用和访问日志,backup/ 放数据库和系统备份,archive/ 放历史报表,temp/ 放临时上传文件。不同前缀的数据冷热程度和保留期限完全不同,混在一起配一条规则很容易误伤。冷热分不清时,宁可先对最明确的冷数据下手。
二、控制台配置步骤
进入华为云控制台,打开对象存储服务 OBS,在桶列表中找到目标桶,进入桶详情页,找到生命周期管理入口,点击创建规则。创建时一般要填:规则名称,比如 logs-cold-to-archive;作用范围,选择按前缀匹配,填 logs/,只对该前缀下的对象生效;转换规则,设置对象多少天后转存储类别;过期删除规则,设置对象多少天后删除。一条规则里可以同时包含多条转换和一条删除动作。
三、一份可以直接参考的转换规则示例
以日志类数据为例,比较稳妥的配置是:对象创建 30 天后转低频访问存储,90 天后转归档存储,180 天后过期删除。日志前 30 天还可能被拿出来排查问题,放在低频访问,取回快、价格比标准存储低;90 天后基本只用于合规留存,转归档存储成本更低;180 天后超过留存期,直接删除,桶就不会无限膨胀。备份类数据可放宽为 7 天转低频、30 天转归档、365 天删除;临时文件 7 天后直接删除。
四、容易踩的几个坑
第一,归档存储的对象取回需要时间。转归档后如果临时要读某份旧日志,不能像标准存储那样立刻拿到,需要先发起取回请求并等待恢复完成,不要把可能随时要读的数据转归档。
第二,删除规则不可逆。过期删除执行后对象就找不回来了,配规则前一定要确认保留期限符合业务和合规要求,重要数据先确认已有其他备份。
第三,开启版本控制的桶要另外配非当前版本规则。只配当前版本,历史版本对象不会跟着降级,冷数据还是会以标准存储的价格留着。
第四,规则对已有对象同样生效。桶里已经存在的、年龄符合条件的对象也会被转换或删除,第一次配规则时先用一个小前缀验证,确认无误再推广到整个桶。配完规则可以过一两天看桶的存储用量和各存储类别的容量分布,确认冷数据确实转到了低频访问或归档存储。
小结:冷数据越来越多,本质上是存储分层没跟上数据老化的速度。用生命周期规则把多久转低频、多就转归档、多就删除写清楚,桶就能自己完成冷热分层,既不用人工定期清理,也不会为再也不读的数据继续付标准存储的钱。
- 点赞
- 收藏
- 关注作者
评论(0)