证书过期总在半夜爆雷?给 HTTPS 做一套到期提醒与自动续期
证书过期是最冤的一种故障。服务本身没坏,代码也没改,只是因为一张证书到了有效期,浏览器开始报不安全,接口调用开始失败,半夜被叫醒时才发现,离过期只剩几个小时。证书的问题从来不是技术有多难,而是它静默过期:平时没人看它,过期那一刻所有人都看见了。
解决办法也不复杂,就两件事:让续期自动发生,让到期提前被看见。自动续期兜底,提前提醒兜底的兜底。两层都做好,证书过期就从故障变成一条普通的运维记录。
一、先算清楚:证书到底什么时候过期
第一步不是装工具,而是把现状摸清楚。很多团队出问题,是因为根本不知道手里有几张证书、分别挂在哪里、什么时候到期。域名证书、负载均衡上的证书、对象存储自定义域名的证书、内部接口的自签证书,常常散落在不同地方。
最直接的办法是直接问服务器:
echo | openssl s_client -connect 你的域名:443 -servername 你的域名 2>/dev/null \
| openssl x509 -noout -dates -subject -issuer
输出里的 notAfter 就是过期时间。把它换算成剩余天数,记在一张表里:域名、用途、挂在哪里、签发机构、到期日、负责人。这张表不用多精美,但必须完整。漏掉一张证书,提醒做得再好也没用。
接下来定两条线:到期前 30 天开始提醒,到期前 7 天升级为紧急提醒。30 天留足处理时间,哪怕续期流程要走审批也来得及;7 天是最后防线,这时候还没续上,就该有人专门盯着,而不是等它自然过期。
二、让续期自动发生:别靠人记
如果证书支持自动续期,就让它自动续。手动续期最大的问题不是步骤多,而是依赖人的记忆和空闲。自动续期的核心就三步:续期、重载服务、验证生效。缺了后两步,证书续好了服务还在用旧的,等于没续。
一个最常见的组合是定时任务加续期命令,再加服务重载:
# 每天凌晨检查一次,需要续期时自动续期并重载 Nginx
0 3 * * * 续期命令 --quiet --deploy-hook "nginx -s reload"
这里有两个细节值得注意。第一,续期命令要加安静模式,只在出错时输出,否则每天一封邮件很快就没人看了。第二,重载要用 reload 而不是 restart,前者是平滑重载配置、不断开已有连接,后者会短暂中断服务。证书续期本该是无感知的操作,别让它变成一次计划外停机。
续期之后一定要验证。续期成功不等于线上生效,验证的命令和前面查过期时间的是同一条,确认 notAfter 变成了新的日期,再顺手请求一次接口确认返回正常。这一步花不了十秒,却能拦住"续好了但没生效"这种最常见的乌龙。
自动续期也有续不上的时候:域名解析改了、验证文件被删了、服务器时间漂移了。所以自动续期不是一劳永逸,而是把"每次都要人动手"变成"只有异常才需要人动手"。这就需要第二层:提醒。
三、让到期提前被看见:提醒要发到人能看到的地方
提醒最容易犯的错,是发到一个没人看的地方。证书到期提醒如果只写在某个后台看板里,和没提醒差不多。提醒要发到团队日常真正会看的渠道,并且要带上关键信息:哪个域名、还剩几天、在哪里续、负责人是谁。
提醒的频率也要设计。到期前 30 天提醒一次,到期前 14 天再提醒一次,到期前 7 天每天提醒一次,到期前 3 天升级处理人。频率递增,而不是一开始就每天轰炸。每天轰炸的提醒很快会被当成噪音忽略,递增的提醒才像倒计时,越临近越不容忽视。
写一个最简单的到期检查脚本并不难,思路就是批量检查、算剩余天数、超过阈值就告警:
#!/bin/bash
# 检查域名列表中每张证书的剩余天数,少于 30 天就输出告警
for domain in 域名一 域名二 域名三; do
expire=$(echo | openssl s_client -connect $domain:443 -servername $domain 2>/dev/null \
| openssl x509 -noout -enddate | cut -d= -f2)
days=$(( ($(date -d "$expire" +%s) - $(date +%s)) / 86400 ))
echo "$domain 剩余 ${days} 天,到期日 $expire"
done
这个脚本可以挂在定时任务里每天跑一次,也可以接进已有的监控告警。重点不是脚本写得多优雅,而是它每天都在跑,并且告警有人认领。没人认领的告警,和没有告警是一样的。
四、容易踩的四个坑
第一个坑是只管公网域名,不管内部证书。内部接口、测试环境、管理后台用的自签证书一样会过期,而且因为平时没人用浏览器点开,更容易被遗忘。内部证书也要进同一张到期表,走同一套提醒。
第二个坑是续期后忘了同步到所有地方。一张证书可能同时挂在负载均衡、CDN 和源站上,只续了其中一处,其他地方还在用旧证书。续期清单里要写明这张证书挂在哪些位置,续完逐一验证,而不是默认"续一次就全好了"。
第三个坑是通配符证书的范围理解错了。一张通配符证书能覆盖一级子域名,但覆盖不了多级子域名。以为它全覆盖、实际有域名不在覆盖范围内,上线后才发现证书不匹配,这种故障查起来很费时间。新增子域名时,先确认证书覆盖范围,再上线。
第四个坑是把证书文件直接写进代码仓库。证书和私钥一旦进了仓库,就很难彻底收回,轮换成本也很高。证书应该放在专门的证书管理或密钥管理服务里,服务启动时按需读取,轮换时只改一处。
五、落地清单:今天就能做完的三件事
第一,拉一张证书清单:所有域名、到期日、挂载位置、负责人,缺一个就补一个。第二,把自动续期打开,并且验证一次续期后重载与生效的全流程,不要只验证到"续期命令跑通了"。第三,把到期提醒接进团队日常会看的渠道,设好 30 天和 7 天两档阈值,并且指定到期前 7 天还没续上的负责人。
证书过期不是技术难题,是管理难题。它考验的不是你会不会续期,而是你有没有一套不依赖个人记忆的机制。自动续期加上提前提醒,再加上一张完整的清单,这套组合做下来,证书过期就再也不会在半夜把人叫醒了。
- 点赞
- 收藏
- 关注作者
评论(0)