自动安全升级每天跑 1 秒就结束,27 个安全更新积压三个多月
先说结论:systemctl status unattended-upgrades 显示 active,apt-daily-upgrade.service 每天准点跑、退出码 0,这两件事都不能证明自动安全更新在工作。这台机器上它一次都没干过活,而积压的安全更新已经到了 27 个,其中包含 apt、libc6、ca-certificates 和内核。
三处"证据"都在骗人
排查是从一条运维习惯开始的:装机时就配了自动安全更新,按说不用管,但既然是"配了就当没配"的怀疑派,还是查了一遍。
第一处,服务状态:
systemctl status unattended-upgrades --no-pager
systemctl is-enabled unattended-upgrades
返回 enabled + active (running),看起来完美。
第二处,定时任务:
systemctl list-timers 'apt-daily*' --no-pager
journalctl -u apt-daily-upgrade --since '-14 days' --no-pager | tail -20
每天 06:12 到 06:55 之间随机启动,持续 1 秒,Deactivated successfully,没有任何失败标记。看上去就是"跑了,没东西可升"。
第三处,升级日志:
ls -la /var/log/unattended-upgrades/
unattended-upgrades.log 是 0 字节,时间戳停在 7 月 31 日(镜像构建那天)。这才是不对劲的地方:如果它每天真的检查过一遍,即便没有可升级的包,也会写下 No packages found 之类的行。0 字节意味着这个脚本从来没有被执行过。
与此同时,待升级的包是真实存在的:
$ apt list --upgradable 2>/dev/null | grep -c upgradable
34
34 个可升级,其中 27 个属于安全源。三个月没打补丁的机器,和"没东西可升"是两回事。
两个 unit,只有一个真正干活
这里是最容易误解的一层。Ubuntu 上跟自动升级有关的 unit 有两个,名字很像,职责完全不同:
$ systemctl cat unattended-upgrades.service | grep -E 'Description|ExecStart'
Description=Unattended Upgrades Shutdown
ExecStart=/usr/share/unattended-upgrades/unattended-upgrade-shutdown --wait-for-signal
$ systemctl cat apt-daily-upgrade.service | grep -E 'ExecStart|OnCalendar'
ExecStart=/usr/lib/apt/apt.systemd.daily install
unattended-upgrades.service 名字最像主角,其实只是关机钩子:它平时挂在那里等信号,系统关机时如果正好有升级在跑,负责把它停下来。它 active 是正常的,跟你有没有打补丁毫无关系。
真正每天执行的是 apt-daily-upgrade.service,它调用 /usr/lib/apt/apt.systemd.daily install。这个 shell 脚本是 apt 包自带的,负责根据一组 APT::Periodic::* 变量决定要不要做四件事:更新索引、预下载、执行无人值守升级、清理缓存。
门禁在那个未定义的变量上
打开脚本看判定逻辑:
grep -n 'Unattended-Upgrade' /usr/lib/apt/apt.systemd.daily
关键的两行是:
# 脚本里先给一个默认值 0
UnattendedUpgradeInterval=0
eval $(apt-config shell UnattendedUpgradeInterval APT::Periodic::Unattended-Upgrade)
如果配置里没有这个键,变量就保持 0,后面的 if [ $UnattendedUpgradeInterval -gt 0 ] 分支直接跳过,脚本以成功状态退出。1 秒结束、退出码 0、日志里没有任何异常——因为从脚本的角度看,它确实什么都不该做。
验证一下这个键到底有没有值:
apt-config dump APT::Periodic::Unattended-Upgrade
echo "[rc=$?]"
输出是空的,退出码 0。注意这个细节:键不存在时 apt-config dump 不报错、不打印,只返回空行。"查不到"和"值为 0"在输出上几乎一样,凭感觉看日志很容易略过。
顺手把四个相关键都列出来:
apt-config dump APT::Periodic
这台机器上只有三项:
APT::Periodic "";
APT::Periodic::Update-Package-Lists "1";
APT::Periodic::Download-Upgradeable-Packages "0";
APT::Periodic::AutocleanInterval "0";
没有 Unattended-Upgrade。
为什么缺这一项:少了一个 20auto-upgrades
继续找这三项是从哪来的:
grep -rn 'Periodic' /etc/apt/apt.conf.d/ | grep -v 50unattended
指向 /etc/apt/apt.conf.d/10periodic,内容是:
APT::Periodic::Update-Package-Lists "1";
APT::Periodic::Download-Upgradeable-Packages "0";
APT::Periodic::AutocleanInterval "0";
问题清楚了:10periodic 由 apt 包自带,只负责更新索引;而控制"要不要执行无人值守升级"的 20auto-upgrades 在这个系统上根本不存在。
$ ls /etc/apt/apt.conf.d/
01autoremove 01-vendor-ubuntu 10periodic 15update-stamp 20apt-esm-hook.conf
20archive 20packagekit 20snapd.conf 50command-not-found 50unattended-upgrades
70debconf 99needrestart 99update-notifier
50unattended-upgrades 在,unattended-upgrades 包也装了(2.8ubuntu1),但装包只提供了策略文件,没提供那个开关。正常路径是 dpkg-reconfigure unattended-upgrades 回答 yes,由 debconf 生成 20auto-upgrades;镜像构建时如果这一步被跳过、或者有人手工装包没跑 reconfigure,就会留下这种"配置看起来齐全、实际没启用"的状态。
所以 50unattended-upgrades 里那几行全是默认值也就顺理成章了:
grep -vE '^\s*(//|#|$)' /etc/apt/apt.conf.d/50unattended-upgrades
只剩 Allowed-Origins 四条、一个空的 Package-Blacklist、一行 DevRelease "auto"。没有 Automatic-Reboot、没有 Mail、没有 Remove-Unused-Kernel-Packages,全部走默认——这一点后面会变成一个真问题。
修复:一行开关加一个验证
补上开关,两个键都要写(Update-Package-Lists 保持 1,让它在升级前刷新索引;Unattended-Upgrade 才是真正的开关):
sudo tee /etc/apt/apt.conf.d/20auto-upgrades >/dev/null <<'EOF'
APT::Periodic::Update-Package-Lists "1";
APT::Periodic::Unattended-Upgrade "1";
EOF
sudo chmod 644 /etc/apt/apt.conf.d/20auto-upgrades
apt-config dump APT::Periodic
改完再 dump 一次,应该能看到 APT::Periodic::Unattended-Upgrade "1";。看不到就是文件名排序或语法问题——.conf.d 目录按文件名字典序加载,数字前缀越小越先读,后面同名键覆盖前面,所以文件必须叫 20xxx 这种能在 10periodic 之后被读到的名字,随便起个 auto-upgrades 是不行的(没有数字前缀的文件照样会被读,但排序位置不确定,别赌)。
Download-Upgradeable-Packages "0" 建议保持 0:它控制是否提前把升级包下载到本地缓存。小盘机器上提前下载会白占几百 MB,而真正升级时 unattended-upgrade 自己会下载。
先验证再启用:不改系统也能看到它会装什么
在真开自动升级之前,我最想确认的是"它到底会动哪些包"。unattended-upgrade 提供 --dry-run:
sudo unattended-upgrade --dry-run --debug 2>&1 | grep -E 'Allowed origins|Packages that will be upgraded'
这台机器的输出:
Allowed origins are: o=Ubuntu,a=jammy, o=Ubuntu,a=jammy-security,
o=UbuntuESMApps,a=jammy-apps-security, o=UbuntuESM,a=jammy-infra-security
Packages that will be upgraded: apt apt-utils bind9-dnsutils bind9-host
bind9-libs ca-certificates libapt-pkg6.0 libbrotli1 libc-bin libc-dev-bin
libc-devtools libc6 libc6-dev libmspack0 libpcre2-8-0 libperl5.34
linux-generic linux-headers-generic linux-image-generic linux-libc-dev
locales perl perl-base perl-modules-5.34 python3-pyasn1 python3-twisted
sosreport
27 个,而 apt list --upgradable 数是 34。差的 7 个不是漏了,是策略使然:Allowed origins 只包含 jammy 和 jammy-security,不包含 jammy-updates。默认配置就是这么设计的——只有基础源和安全源进自动升级范围,普通更新要人工过一遍。
想看这 7 个是谁,可以对着 debug 输出里的 adjusting candidate version 行找:被降回已安装版本的,就是"只有 jammy-updates 提供新版"的包(这台机器上是 distro-info、libglib2.0 系列)。这条边界值得记住,否则会误以为自动升级坏了。
顺带一个小实验,用来确认配置有没有被正确加载:把新的 conf 片段放到临时目录,用一个临时主配置指过去,就能在不碰 /etc 的前提下验证解析结果:
mkdir -p /tmp/aptparts
printf 'APT::Periodic::Unattended-Upgrade "1";\n' > /tmp/aptparts/20auto-upgrades
printf 'Dir::Etc::Parts "/tmp/aptparts";\n' > /tmp/apt-test.conf
APT_CONFIG=/tmp/apt-test.conf apt-config dump APT::Periodic
输出 APT::Periodic::Unattended-Upgrade "1"; 就是对的。
这里踩了一个坑:一开始我图省事用 apt-config -o Dir::Etc::Parts=/tmp/aptparts dump APT::Periodic::Unattended-Upgrade,结果输出为空,一度以为文件写错了。原因是 -o 传进来的目录列表并没有改变 conf.d 的扫描行为,-o 更擅长覆盖单个键值,不适合替换整个 parts 目录。要换目录就老老实实用 APT_CONFIG 指定主配置文件——排查这类问题,工具的参数语义比直觉重要。
两个会骗人的细节
其一:dry-run 会往升级历史里写字。 跑完 dry-run 之后,/var/log/apt/history.log 多了几条:
Start-Date: 2026-11-17 08:42:06
Commandline: /usr/bin/unattended-upgrade --dry-run
但包一个都没动——dpkg-query 查 libc6 还是 2.35-0ubuntu3.15,dpkg.log 最后一条仍停在 11 月 12 日装 certbot 的时候。所以"history.log 里有记录"不能作为"装过包"的证据,判断唯一可靠的依据是版本号:
dpkg-query -W -f='${Package} ${Version}\n' libc6 ca-certificates
其二:unattended-upgrades.log 为 0 字节不等于没跑过。 反过来也成立,日志有内容也不代表装了包——默认日志级别只记 INFO 级别的结论行。真正该盯的是这一行:
grep 'Packages that will be upgraded' /var/log/unattended-upgrades/unattended-upgrades.log | tail -5
grep -c 'All upgrades installed' /var/log/unattended-upgrades/unattended-upgrades.log
没有这行,就是一次"空跑"。三十天里 0 条,与 0 字节的日志互相印证,这才敢下结论。
开了自动升级,内核和重启要单独想
27 个包里有 linux-generic、linux-image-generic、linux-headers-generic。这带来两个真实问题。
第一个是重启。Unattended-Upgrade::Automatic-Reboot 默认 false,意思是"照装,但不重启"。内核装完不重启等于没生效,/var/run/reboot-required 会一直挂着,而这条文件没人看就永远不会被处理。要么接受定期人工重启,要么明确配置重启窗口:
sudo tee /etc/apt/apt.conf.d/51uu-local >/dev/null <<'EOF'
Unattended-Upgrade::Automatic-Reboot "false";
Unattended-Upgrade::Remove-Unused-Kernel-Packages "true";
Unattended-Upgrade::Remove-Unused-Dependencies "false";
Unattended-Upgrade::MinimalSteps "true";
EOF
apt-config dump | grep -i 'Automatic-Reboot'
Remove-Unused-Kernel-Packages 值得开:这台机器 /boot 和根分区在同一个 /dev/vda1 上(df /boot 和 df / 指向同一个设备),40G 用了 26%,/boot 里已经躺着 5.15.0-186 和 5.15.0-198 两套内核。每来一个新内核就多一份 initrd,攒到几十个版本会把根分区吃掉——这不是理论风险,/boot 没独立分区时它跟着根分区一起满。
Remove-Unused-Dependencies "false" 是保守选择:没人看着的时候让 apt 顺手 autoremove 掉"它认为"没用的包,风险大于收益。
第二个是服务重启。needrestart 在这台机器上装了(3.5-5ubuntu2.5),99needrestart 通过 DPkg::Post-Invoke 挂进 apt,库升级后能列出需要重启的进程。但它不会替你重启,自动升级跑完 libc6 这类核心库,nginx、sshd、docker 用的还是旧库。要么接受,要么在自动升级后加一个固定的 reload 步骤,要么定期重启。这一点在文章里必须说清楚:自动打补丁不等于自动生效。
想反悔的时候
自动升级没有"回滚"这种操作,包已经装上了,降级要自己挑版本。能做的是止损和追溯:
# 暂停自动升级(保留索引更新)
sudo sed -i 's/^APT::Periodic::Unattended-Upgrade.*/APT::Periodic::Unattended-Upgrade "0";/' \
/etc/apt/apt.conf.d/20auto-upgrades
apt-config dump APT::Periodic::Unattended-Upgrade
# 把关键包钉住,不让它进自动升级范围
sudo apt-mark hold docker-ce nginx mysql-server
apt-mark showhold
# 出问题时按时间点查装了哪些包
grep -A3 'Start-Date: 2026-11' /var/log/apt/history.log | head -20
apt-mark hold 对无人值守升级同样生效,这是最细粒度的控制手段:既想自动打补丁,又不想让 Docker 在凌晨三点被换掉,就 hold 住它。代价是这些包从此要人工跟进,hold 了不记账,半年后就是另一篇事故复盘。
报错与异常对照表
| 现象 | 真实原因 | 处理 |
|---|---|---|
systemctl status unattended-upgrades 是 active,但没打过补丁 |
该 unit 是关机钩子,不是执行者 | 看 apt-daily-upgrade.service 的 journal 和 unattended-upgrades.log |
| 定时任务每天 1 秒结束、退出码 0 | APT::Periodic::Unattended-Upgrade 未定义,脚本判定无事可做 |
补 /etc/apt/apt.conf.d/20auto-upgrades,dump 确认值为 1 |
apt-config dump APT::Periodic::Unattended-Upgrade 输出空、rc=0 |
键不存在时不报错,只返回空行 | 与值为 “0” 严格区分,空 = 没配置 |
| 升级日志 0 字节但从没报错 | 脚本从未被调用,自然没有日志 | 以 Packages that will be upgraded 行是否存在为准 |
| 34 个可升级,自动升级只处理 27 个 | Allowed origins 不含 jammy-updates,属设计行为 | 需要覆盖就显式加 origin,别指望默认 |
| 升级后内核版本没变 | Automatic-Reboot 默认 false,只装不重启 |
配重启窗口,或监控 /var/run/reboot-required |
| history.log 里有 unattended-upgrade 记录,包却没变 | dry-run 同样写入 history.log | 用 dpkg-query 版本号核对,不看 history |
apt-config -o Dir::Etc::Parts=... 验证配置无效 |
-o 不改变 conf.d 扫描目录 |
改用 APT_CONFIG 指向临时主配置 |
| 自动升级跑完,业务进程仍在用旧库 | needrestart 只提示不重启 | 升级后 reload/重启服务,或安排窗口重启 |
边界
以上在 Ubuntu 22.04、unattended-upgrades 2.8ubuntu1、apt 2.4.15 上验证,/usr/lib/apt/apt.systemd.daily 的门禁逻辑与脚本行号在不同版本间会有差异,升级前建议自己 grep 一遍确认变量名。Debian 12 之后的 unattended-upgrades(2.9 起为 3.x)把策略拆成了 50unattended-upgrades 加 52unattended-upgrades-local 的结构,20auto-upgrades 的生成方式也不完全一样。云厂商镜像可能预置了自己的 apt 配置,同一份文档在别人机器上不一定复现,先 dump 再看。
最后一句提醒:这类"配置齐全但没生效"的状态最麻烦的地方在于,所有监控都显示绿灯。服务 active、定时任务成功、没有报错,唯独结果不对。定期用 apt list --upgradable 和 grep 'Packages that will be upgraded' 对一次账,比相信 systemctl status 靠谱得多。
- 点赞
- 收藏
- 关注作者
评论(0)