华为云 WAF 误拦截支付回调 403 的一次完整排查:规则命中、CC 防护与放行策略调优
一、现象与初筛
上周二下午,订单系统偶发支付状态不更新:第三方支付平台的回调请求打到挂在华为云 WAF 后面的域名,约 4% 返回 403,重试后大部分成功,少数订单一直卡在「支付中」。Nginx access 日志里这些请求根本没有记录,说明 403 是 WAF 层直接返回、没有回源。先排除基础项:CNAME、证书、回源白名单、健康检查、安全组均正常。用 curl 带上支付平台原始的 User-Agent 与 JSON 报文复现,403 稳定出现;换成普通浏览器字符串就返回 200,范围由此收敛到 WAF 的规则匹配,而非网络或源站。
二、定位:命中日志与规则编号
在 WAF 控制台按时间窗筛选该域名的 403 防护事件,能看到命中规则 ID、攻击类型、payload 片段和处置动作。关键发现是回调全部命中两条规则:一条是「Web 基础防护」的 SQL 注入检测,另一条是「CC 攻击防护」的频率限制。回调报文带 sign、out_trade_no 等参数,签名值是一串含连字符与等号的 base64 文本,被注入规则的关键字组合误判;支付平台在订单高峰用同一批源 IP 短时间重发多笔回调,又触发了按 IP 统计的 CC 阈值。两条叠加,正常回调被判为攻击直接拦截。坑在于事件列表默认不展开 payload,要点进详情才看得到是签名参数被截断匹配,否则容易误判成源站 403。
三、根因确认
三份证据互证。第一,把签名参数在测试环境单独拿出来请求,403 必现;去掉该参数或换成短纯字母值即 200。第二,把域名防护模式临时切到「仅记录不拦截」,观察 30 分钟,回调 403 归零,源站日志里对应请求全部出现且处理正常,确认拦截动作来自 WAF。第三,CC 命中曲线与支付平台整点批量回调逐分钟对齐,且源站 CPU 与连接数平稳,排除真实攻击。根因明确:不是攻击也不是源站故障,而是默认规则对「带长签名参数、短时高频、固定源 IP」的机器流量不适配,属误报加阈值过严的组合问题。
四、解决方案与验证
改动分三层,均可回滚。规则层:不动全局防护等级,只对回调路径建一条精准的误报屏蔽规则,条件为 URI 前缀加支付平台回源 IP 段,动作设为放行并跳过基础防护的注入检测,避免整站降低防护水位;签名参数单独加白,而不是把整个请求体排除检测。CC 层:把回调路径从通用频率限制里排除,另建一条更宽松的独立限速规则,阈值取支付平台峰值并发的 1.5 倍,统计维度从「单 IP」改成「IP + URI」,避免多个业务回调互相挤占配额。可观测层:LTS 按规则 ID 建 403 命中告警,事件日志投递 OBS 留存 30 天。上线后观察 24 小时,回调 403 从 4% 降到 0,订单状态同步延迟回到秒级;再用压测流量回填历史回调报文做回归,屏蔽规则只在指定路径与源 IP 段生效,其它路径的注入测试仍被正常拦截,没有出现防护放空。
五、复盘与后续防护
最大的教训是「403 先分清是谁返回的」:WAF、ELB、Nginx、应用都可能给 403,先看源站有没有访问日志,能省掉一大半无效排查。其次是新接回调时提前登记签名样例、源 IP 段与峰值频率,先在仅记录模式跑一轮确认无误报再切拦截模式。后续我们把「回调类接口清单」做进上线检查表,要求每条回调路径都有对应的误报屏蔽规则与独立限速配置,并在 CES 上配了按规则 ID 的命中量看板,规则一调整就能看清影响面。误报治理不是一次性动作,要跟着业务报文持续校准,才能既拦得住攻击、又不误伤正常流量。
- 点赞
- 收藏
- 关注作者
评论(0)