加了台新机器,流量却打不过去:聊聊 ELB 的监听器、后端服务器组和健康检查
上周有件挺憋屈的事。业务量涨了,给服务加了台新机器,加完一看监控,请求还是全落在老机器上,新机器连一个请求都没分到。第一反应是 ELB 配错了,翻来覆去查了半天,最后发现问题出在一个特别不起眼的地方。这事让我把 ELB 这几个核心概念又从头捋了一遍,写下来权当给新手避坑。
先说 ELB 到底在干嘛。一句话:它是挡在客户端和后端机器中间的“交通警察”,请求先到它这儿,它再按规则分发给后面的机器。华为云的 ELB 有独享型和共享型,新手一般用独享型就行,概念上两者是通的。
监听器是第一个要搞明白的东西。可以把它理解成 ELB 的“耳朵”:它监听某个端口、某种协议的请求,再决定把请求转给哪个后端服务器组。比如监听器配了 HTTP 80 端口,所有打到 ELB 80 端口的 HTTP 请求都会被它接住。协议这块新手最容易随手选错——前端是 HTTPS、后端服务只开了 HTTP,这种“前端加密、后端明文”的组合很常见,监听器上配好证书、后端协议选 HTTP 就行。但如果两边都选了 HTTPS,后端机器上却没配证书,请求肯定过不去。
这里有个坑我踩过:监听器建好了,转发策略也配了,请求就是进不来。查了半天,发现监听器建是建了,但压根没关联后端服务器组。监听器和后端服务器组是分开的两个东西,建完监听器一定要记得把它和后端服务器组绑在一起,不然 ELB 收到请求也不知道往哪儿转。
后端服务器组,顾名思义,就是“到底把流量分给谁”的名单。往里面加后端服务器,分配策略有加权轮询、加权最少连接、源 IP 算法几种,名字听起来唬人,意思其实很直白。加权轮询是按权重比例轮着来;加权最少连接是把新请求交给当前连接数最少的机器;源 IP 算法是让同一个客户端 IP 的请求尽量落到同一台机器上。
开头说的那个事故,原因就在这儿:新机器加进后端服务器组的时候,权重被默认设成了 0。权重 0 的意思就是“一票都不给”,ELB 会直接跳过它。控制台里权重那一栏小小一个 0,不仔细看真发现不了。每次加完机器,第一件事就是去后端服务器组里确认下权重。
会话保持也值得提一句。有些业务(比如没做分布式 session 的老应用)要求同一个用户的请求一直落到同一台机器,HTTP/HTTPS 监听器可以开会话保持,靠往客户端种 cookie 实现。但别把它当万能药:开了会话保持,流量就不再均匀,某台机器特别忙、另一台闲着,都是正常的。能用无状态设计解决的,尽量别依赖这个。
重头戏是健康检查,新手区翻车率最高的地方。健康检查是 ELB 定期“敲门”问后端机器“你还活着吗”:TCP 类型的就是尝试建个连接,HTTP 类型的会发一个真实的 HTTP 请求到你配的检查路径,看返回的状态码是不是预期内的。连续几次没通过,这台机器就会被标成“不健康”,ELB 再也不把流量分给它,直到它重新通过检查。
健康检查一直报不健康,排查有个顺手的路子,我一般按这个顺序看。
先看后端服务本身是不是真的在监听那个端口。登上机器 netstat 一下,或者 curl 一下本地端口,服务没起来、端口写错了,都属于“自己先倒了”,ELB 配得再对也没用。
再看健康检查的配置和后端实际对不对得上。最常见的就是检查路径配了 /healthz,后端压根没这个接口,返回 404,ELB 就判不健康。还有一种:后端接口要求带鉴权头,健康检查发的是裸请求,次次 401,自然次次不健康。检查路径最好是一个轻量的、专门用来探活的接口,别拿业务接口凑合,更别拿一个重度依赖数据库的接口当探活——数据库一抖,机器就被摘掉,雪上加霜。
然后看安全组,这是超时类问题的重灾区。ELB 做健康检查用的是它自己的后端地址去探测,后端服务器的安全组必须放行这个探测流量。症状很有特点:后端服务本地 curl 好好的,ELB 就是报不健康,十有八九是安全组把探测包拦了。放行时注意源地址要是 ELB 所在的网段、端口对上健康检查端口,别图省事全放通。
还有协议别扭的地方:监听器前端是 HTTP,后端服务器组里配的后端协议也要和后端服务实际提供的一致。前端 HTTPS、后端 HTTP 没问题,但健康检查用的协议同样要和后端服务匹配,不然检查发出去就没回音。
权重和“是否在组里”也顺手看一眼。机器被手动摘掉(权重 0 或从组里移除)之后,健康检查状态看着可能是正常的,但就是没流量,这和“不健康”是两码事,别混在一起查。
最后说个心态上的坑。刚接触 ELB 的人(包括当初的我)容易把它当黑盒,出了问题就重启、重建。其实它的逻辑特别直白:监听器收请求,按规则转给后端服务器组里的机器,健康检查负责把坏掉的机器摘出去。排查时顺着“请求从哪来、到哪去、哪一环断了”这条线走,一层一层看,大部分问题都能定位到。
ELB 配熟之后你会发现,它最难的从来不是概念,而是那些藏在控制台角落里的小开关:一个权重 0,一条安全组规则,一个写错的检查路径。希望这篇能帮你少踩几个。
- 点赞
- 收藏
- 关注作者
评论(0)