基于华为云的高可用Web应用部署解决方案
基于华为云的高可用Web应用部署解决方案
一、方案概述
本方案面向中型企业及互联网应用场景,围绕华为云核心产品构建一套高可用、可扩展、安全合规的Web应用部署架构。方案覆盖网络规划、计算资源、负载均衡、数据库存储、安全防护、监控运维六大层面,目标是在单Region内实现跨可用区(AZ)的高可用部署,核心服务可用率达到99.95%以上,并具备弹性伸缩能力以应对流量波动。
适用场景
- 电商、SaaS、企业门户等中等流量Web应用
- 对服务连续性有较高要求,能容忍短暂有损切换但不能接受长时间宕机
- 运维团队规模有限,倾向于托管服务以降低运维负担
- 预算可控,不追求全量多Region容灾,但需要架构层面具备扩展到多Region的能力
设计原则
- 高可用优先:核心组件均跨AZ部署,消除单点故障。
- 托管服务优先:数据库、缓存、负载均衡等选用华为云托管服务,减少自建运维。
- 安全纵深防御:从网络隔离、安全组、WAF到主机安全,多层防护。
- 弹性伸缩:计算层支持自动扩缩容,存储层按需扩容。
- 成本可控:按业务负载选择规格,非核心组件选用通用型规格。
二、整体架构
2.1 架构分层
整个系统分为五层:
| 层级 | 组件 | 华为云产品 | 说明 |
|---|---|---|---|
| 接入层 | DNS解析 | 云解析服务 DNS | 域名解析,支持权重轮询 |
| 接入层 | Web应用防火墙 | WAF | 拦截SQL注入、XSS、CC攻击等 |
| 接入层 | 内容分发 | CDN | 静态资源加速,降低源站压力 |
| 负载层 | 负载均衡 | ELB(弹性负载均衡) | 四层/七层流量分发,跨AZ |
| 计算层 | 弹性云服务器 | ECS | 应用服务器,部署业务代码 |
| 计算层 | 弹性伸缩 | AS | 根据CPU/内存等指标自动扩缩容 |
| 数据层 | 关系型数据库 | RDS for MySQL | 主备高可用,自动故障切换 |
| 数据层 | 分布式缓存 | DCS for Redis | 热点数据缓存,减轻数据库压力 |
| 数据层 | 对象存储 | OBS | 静态文件、附件、日志存储 |
| 安全层 | 安全组 | VPC安全组 | 网络级访问控制 |
| 安全层 | 主机安全 | HSS | 入侵检测、漏洞扫描、基线检查 |
| 运维层 | 监控告警 | CES + AOM | 指标监控、日志采集、告警通知 |
2.2 网络拓扑
互联网
|
DNS(云解析)
|
WAF(Web应用防火墙)
|
+-----------+-----------+
| |
CDN(静态加速) ELB(负载均衡)
| |
OBS(对象存储) +---------+---------+
| |
ECS-AZ1 ECS-AZ2
(应用组1) (应用组2)
| |
+-----+-----+ +-----+-----+
| | | |
DCS RDS RDS(备)
(Redis) (主) ←自动切换
|
OBS(备份)
2.3 流量链路
- 用户请求首先到达DNS,解析到WAF的公网IP。
- WAF进行规则检测,恶意请求被拦截,正常请求转发至ELB。
- 静态资源请求(图片、CSS、JS)由CDN直接响应,未命中时回源至OBS。
- 动态请求由ELB按轮询策略分发到后端ECS实例组。
- ECS应用服务器处理业务逻辑,读写数据时先访问DCS Redis缓存,缓存未命中则查询RDS数据库。
- 文件上传类操作将文件写入OBS,数据库仅存储文件元数据(路径、大小、类型)。
三、详细设计
3.1 网络规划
VPC设计
创建一个VPC,网段选择 192.168.0.0/16,预留充足地址空间。VPC内划分以下子网:
| 子网名称 | 网段 | AZ | 用途 |
|---|---|---|---|
| subnet-web-az1 | 192.168.1.0/24 | AZ1 | ECS应用服务器(AZ1) |
| subnet-web-az2 | 192.168.2.0/24 | AZ2 | ECS应用服务器(AZ2) |
| subnet-rds | 192.168.10.0/24 | 多AZ | RDS数据库 |
| subnet-dcs | 192.168.20.0/24 | 多AZ | DCS缓存 |
| subnet-mgmt | 192.168.100.0/24 | AZ1 | 运维跳板机、内部管理 |
设计要点:
- 应用子网按AZ划分,ELB跨AZ转发时流量不出VPC,延迟低。
- 数据库和缓存使用独立子网,与应用子网隔离,安全组规则更精细。
- 管理子网用于部署运维跳板机(Bastion Host),通过NAT网关访问外网下载补丁。
- 每个子网关联独立的路由表,默认路由指向NAT网关(仅管理子网)或保持本地路由(应用/数据子网不出公网)。
NAT网关
在管理子网部署一个NAT网关,配置SNAT规则,使跳板机和ECS实例(需要下载软件包时)可通过NAT访问公网。生产环境中建议通过NAT出网而非为每个ECS绑定EIP,既节省带宽费用又减少攻击面。
3.2 计算资源设计
ECS规格选择
应用服务器选用 s6.large.2(2vCPU / 2GB内存)作为基线规格。该规格基于通用型s6系列,性价比适合中等负载的Web应用。实际选型应通过压测确认,以下为参考依据:
- 日均PV约50万,峰值QPS约200的应用,2台 s6.large.2 可承载。
- 若应用含较多计算逻辑(如报表生成),升级至
s6.xlarge.2(4vCPU / 4GB)。 - 若为内存密集型(如大量缓存本地数据),选用
s6.large.4(2vCPU / 4GB)。
镜像选择
使用公共镜像 EulerOS 2.9 或 CentOS 7.9。推荐EulerOS,华为云对EulerOS的内核优化和补丁响应更及时。应用部署环境通过自定义镜像(IMS)固化,避免每次扩容都重新安装依赖。
自定义镜像制作流程:
- 启动一台基础ECS,安装JDK/Nginx/应用运行时。
- 配置好应用部署脚本和系统参数(文件句柄数、内核参数等)。
- 通过IMS制作系统盘镜像,后续ECS实例和AS伸缩组均使用该镜像启动。
弹性伸缩组(AS)
创建一个伸缩组,配置如下:
- 伸缩配置:基于自定义镜像,规格 s6.large.2,关联 subnet-web-az1 和 subnet-web-az2(跨AZ),挂载到ELB后端服务器组。
- 伸缩策略:
- 扩容策略:CPU利用率大于70%持续5分钟,扩容2台。
- 缩容策略:CPU利用率小于30%持续10分钟,缩容1台。
- 最小实例数:2(保证始终跨AZ有2台运行)。
- 最大实例数:10(防止异常流量导致无限扩容产生高额费用)。
- 冷却时间:300秒,避免频繁扩缩容抖动。
- 健康检查:ELB健康检查结果作为伸缩实例健康判断依据,不健康实例自动移除并替换。
弹性公网IP(EIP)
不为应用ECS绑定EIP。公网入口统一走WAF到ELB链路。仅跳板机绑定EIP用于SSH运维,并配合安全组限制源IP为办公网出口IP。
3.3 负载均衡设计
ELB实例
创建一个独享型ELB(保障型),规格选择「小型」即可满足中等流量需求。独享型ELB实例独占资源,性能可预期,且支持跨AZ转发。
- 网络类型:弹性公网IP(对外接收流量)加私网网络类型VPC(转发到后端ECS)。
- AZ分布:选择至少2个AZ,ELB实例在各AZ均有节点,任一AZ故障不影响流量接收。
监听器配置
| 监听器 | 协议 | 端口 | 后端协议 | 后端端口 | 调度算法 | 说明 |
|---|---|---|---|---|---|---|
| listener-https | HTTPS | 443 | HTTP | 8080 | 加权轮询 | 终止SSL,证书部署在ELB |
| listener-http | HTTP | 80 | HTTP | 8080 | 加权轮询 | 重定向至443端口 |
HTTPS监听器配置服务器证书(在SCM证书管理服务中上传或申请免费证书),ELB负责SSL卸载,后端ECS接收明文HTTP流量,降低ECS的CPU开销。
后端服务器组
- 后端协议HTTP,端口8080。
- 健康检查协议HTTP,路径
/health,间隔10秒,超时5秒,连续3次失败标记不健康。 - 会话保持:若应用需要会话保持,配置Cookie粘性会话保持;否则不开启,让流量均匀分布。
3.4 数据库设计
RDS for MySQL
- 实例规格:
rds.mysql.s1.large(2vCPU / 4GB),主备高可用实例。 - 存储:超高IO SSD,初始100GB,后续可在线扩容。
- 高可用:主备模式,主实例和备实例部署在不同AZ,主库故障时备库自动提升为主,切换时间通常在30秒以内。
- 备份策略:每日自动全量备份一次(凌晨2:00),保留7天;增量备份每5分钟一次。Binlog开启,支持按时间点恢复(PITR)。
- 网络:部署在 subnet-rds,仅允许应用子网和管理子网通过安全组访问3306端口。
数据库连接管理
- 应用侧使用连接池(如HikariCP),配置建议:
- 最小空闲连接:5
- 最大连接数:20(单实例,根据RDS规格的max_connections调整)
- 连接超时:30秒
- 空闲连接超时:600秒
- 读写分离:若读请求量大,为RDS添加只读实例(最多5个),应用通过RDS代理地址自动读写分离。
DCS for Redis
- 实例规格:
dcs.master.small,主备实例类型。 - 内存:2GB起步,根据缓存命中率监控数据调整。
- 高可用:主备模式,自动故障切换。单节点模式不推荐用于生产。
- 网络:部署在 subnet-dcs,仅允许应用子网访问6379端口。
- 持久化:开启AOF持久化,每秒fsync,兼顾性能和数据安全。
- 用途:
- 热点数据缓存(商品信息、用户会话、配置字典)
- 接口限流计数器
- 分布式锁(配合业务逻辑实现)
3.5 对象存储设计
OBS桶规划
| 桶名称 | 用途 | 访问策略 | 生命周期 |
|---|---|---|---|
| bucket-app-static | 前端静态资源 | 公共读 | 无 |
| bucket-app-uploads | 用户上传文件 | 私有读写 | 180天后转低频访问存储 |
| bucket-app-logs | 应用日志归档 | 私有读写 | 30天后转归档存储,180天后删除 |
| bucket-backup | 数据库备份转存 | 私有读写 | 365天后删除 |
设计要点:
- 静态资源桶配置公共读策略,配合CDN回源至OBS桶的静态网站托管端点。
- 上传桶使用私有读写,应用通过临时AK/SK或预签名URL方式授权用户上传,不暴露永久AK/SK。
- 日志桶配置生命周期规则,自动转储和清理,控制存储成本。
- 所有桶开启版本管理(versioning),防止误删覆盖。
- 开启服务端加密(SSE-KMS),使用KMS托管密钥加密桶内对象。
3.6 安全设计
安全组规则
安全组采用白名单模式,默认拒绝全部,按需放通。
应用安全组(sg-web):
| 方向 | 协议 | 端口 | 源/目的 | 说明 |
|---|---|---|---|---|
| 入方向 | TCP | 8080 | sg-elb | 仅允许ELB访问应用端口 |
| 入方向 | TCP | 22 | subnet-mgmt | 仅允许跳板机SSH |
| 出方向 | TCP | 3306 | subnet-rds | 访问数据库 |
| 出方向 | TCP | 6379 | subnet-dcs | 访问缓存 |
| 出方向 | TCP | 443 | 0.0.0.0/0 | 访问OBS、外部API |
数据库安全组(sg-rds):
| 方向 | 协议 | 端口 | 源/目的 | 说明 |
|---|---|---|---|---|
| 入方向 | TCP | 3306 | sg-web | 仅允许应用安全组访问 |
| 入方向 | TCP | 3306 | sg-mgmt | 允许跳板机运维访问 |
缓存安全组(sg-dcs):
| 方向 | 协议 | 端口 | 源/目的 | 说明 |
|---|---|---|---|---|
| 入方向 | TCP | 6379 | sg-web | 仅允许应用安全组访问 |
WAF配置
- 防护模式:阻断模式(生产环境),拦截恶意请求并返回403。
- 防护规则:
- SQL注入检测:开启
- XSS检测:开启
- 路径穿越检测:开启
- CC攻击防护:开启,配置频率限制(单IP 60秒内请求超过120次触发人机验证)
- 恶意爬虫防护:开启,拦截已知恶意User-Agent
- 精准防护:对登录接口
/api/login配置更严格的CC规则(单IP 60秒内不超过10次),防止暴力破解。 - 地理位置访问控制:若业务仅面向国内,可配置封禁海外IP访问。
主机安全(HSS)
- 所有ECS安装HSS Agent,启用企业版防护。
- 开启功能:漏洞扫描(每周一次)、基线检查(CIS基准)、入侵检测(实时告警)、文件完整性监控。
- 告警通知配置:高危事件通过短信和邮件实时通知运维人员。
数据安全
- 传输加密:全站HTTPS,证书通过SCM管理,TLS版本不低于1.2。
- 存储加密:OBS服务端加密(SSE-KMS),RDS磁盘加密开启。
- 敏感数据:数据库中密码、身份证号等字段应用层加密存储,使用KMS管理加密密钥。
- AK/SK管理:使用IAM子账号,按最小权限原则分配策略,AK/SK定期轮换(建议每90天)。
3.7 监控运维设计
监控体系
基础监控(CES):
为以下资源配置告警规则:
| 监控对象 | 指标 | 阈值 | 告警动作 |
|---|---|---|---|
| ECS | CPU利用率 | 大于85%持续5分钟 | 通知运维组 |
| ECS | 内存利用率 | 大于90%持续5分钟 | 通知运维组 |
| RDS | CPU利用率 | 大于80%持续5分钟 | 通知运维组 |
| RDS | 连接数使用率 | 大于80% | 通知运维组 |
| RDS | 磁盘空间使用率 | 大于85% | 通知运维组(紧急) |
| DCS | 内存使用率 | 大于90% | 通知运维组 |
| ELB | 后端健康检查失败数 | 大于0持续2分钟 | 通知运维组(紧急) |
应用监控(AOM):
- 在ECS上安装ICAgent,采集应用日志和自定义指标。
- 关键业务指标自定义上报:订单创建成功率、支付回调延迟、接口P99响应时间。
- 配置日志告警规则:应用错误日志中出现
OOM、OutOfMemoryError、Connection refused等关键字时触发告警。
告警通知
- 创建告警通知主题,通知方式选择短信加邮件。
- 告警分级:
- 紧急(P1):服务不可用、数据库主备切换,通知方式短信加电话加邮件。
- 重要(P2):单实例不健康、CPU持续高,通知方式短信加邮件。
- 一般(P3):磁盘使用率预警、慢SQL增多,通知方式邮件。
运维流程
日常运维:
- 变更窗口:每周三凌晨1:00-4:00为计划变更窗口,非紧急变更不在窗口外执行。
- 发布流程:代码提交 → CI构建 → 镜像更新 → AS滚动替换(一次替换一台,健康检查通过后继续下一台)。
- 日志审计:关键操作(数据库变更、安全组修改、ECS登录)开启CTS审计,日志转存至OBS保留180天。
故障处理:
- 故障分级响应:
- P1故障:15分钟内响应,运维负责人牵头,目标30分钟内恢复或降级。
- P2故障:30分钟内响应,值班运维处理,目标2小时内恢复。
- P3故障:2小时内响应,工单流转处理。
- 故障复盘:每次P1/P2故障完成后48小时内输出复盘文档,包含故障时间线、根因分析、改进措施。
四、容灾与备份设计
4.1 容灾策略
本方案采用单Region跨AZ高可用策略,不涉及跨Region容灾。各组件容灾能力如下:
| 组件 | 容灾能力 | 故障影响 | 恢复时间 |
|---|---|---|---|
| ELB | 跨AZ多节点 | 单AZ故障:无感知 | 自动 |
| ECS | 跨AZ部署,AS自动替换 | 单AZ故障:流量自动切到健康AZ | 30秒-5分钟 |
| RDS | 主备跨AZ,自动切换 | 单AZ故障:备库提升为主 | 30秒以内 |
| DCS | 主备跨AZ,自动切换 | 单AZ故障:备节点提升为主 | 30秒以内 |
| OBS | 数据三副本跨AZ | 单AZ故障:无感知 | 自动 |
整个Region级故障不在本方案覆盖范围内。若有跨Region容灾需求,可在此基础上扩展:
- 在另一Region部署同架构,通过DNS权重轮询实现流量切换。
- 数据库通过DRS数据复制服务实现跨Region实时同步。
- OBS通过跨Region复制策略实现数据异地备份。
4.2 备份策略
| 数据类型 | 备份方式 | 频率 | 保留期 | 存储位置 |
|---|---|---|---|---|
| RDS数据库 | 自动全量+增量 | 每日全量,5分钟增量 | 7天 | RDS内置备份存储 |
| RDS数据库 | 手动全量快照 | 变更前手动触发 | 30天 | OBS bucket-backup |
| 应用配置 | 版本管理 | 随代码提交 | 永久 | 代码仓库 |
| OBS数据 | 版本管理+跨Region复制 | 实时 | 版本保留90天 | OBS多AZ+异地 |
| ECS系统盘 | CBR云备份 | 每日 | 14天 | CBR存储库 |
备份恢复演练:
- 每季度执行一次RDS按时间点恢复演练,验证备份有效性。
- 演练流程:创建恢复实例 → 恢复到指定时间点 → 数据一致性校验 → 清理恢复实例。
- 演练结果记录归档,发现问题及时调整备份策略。
五、成本估算
以单Region、2台ECS基线部署为例,月度成本估算如下(价格仅供参考,以华为云官网实际定价为准):
| 资源 | 规格 | 数量 | 预估月费(元) |
|---|---|---|---|
| ECS | s6.large.2 | 2台 | 400 |
| ELB | 独享型小型 | 1个 | 200 |
| EIP | 5Mbit/s | 1个(ELB用) | 100 |
| RDS | rds.mysql.s1.large主备 | 1套 | 800 |
| DCS | 2GB主备 | 1套 | 200 |
| OBS | 100GB标准存储 | - | 15 |
| WAF | 独享型 | 1个 | 500 |
| CDN | 100GB流量 | - | 20 |
| NAT网关 | 小型 | 1个 | 150 |
| CES/AOM | 基础监控 | - | 0(免费额度内) |
| HSS | 企业版 | 2台 | 120 |
| 合计 | 约2515元/月 |
说明:
- 以上为按需付费估算,包年包月可优惠约30%-50%。
- 弹性伸缩扩容期间额外ECS费用按实际运行时间计算。
- 流量增长后CDN和EIP带宽费用会上升,需根据实际流量调整预算。
- RDS只读实例、额外备份存储等按需添加,未计入基线估算。
六、部署实施步骤
阶段一:基础设施搭建(预计2天)
- 创建VPC及5个子网,配置路由表。
- 创建安全组并配置入方向/出方向规则。
- 创建NAT网关,配置SNAT规则。
- 创建ELB实例,配置监听器和后端服务器组。
- 创建RDS实例(主备),配置参数模板和备份策略。
- 创建DCS实例(主备),配置持久化策略。
- 创建OBS桶,配置生命周期规则和加密策略。
阶段二:应用环境准备(预计1天)
- 启动一台基础ECS,安装运行环境和应用依赖。
- 配置系统参数(文件句柄、内核参数、时区)。
- 制作自定义镜像。
- 创建AS伸缩组,关联自定义镜像和ELB后端组。
- 配置伸缩策略和告警规则。
阶段三:安全与接入配置(预计1天)
- 在SCM上传或申请SSL证书。
- 在ELB HTTPS监听器绑定证书。
- 配置WAF防护规则,将WAF接入ELB前端。
- 配置CDN加速域名,回源至OBS静态桶。
- 配置DNS解析,将域名指向WAF地址。
- 安装HSS Agent,配置主机安全策略。
阶段四:监控与验证(预计1天)
- 安装ICAgent,配置AOM应用监控。
- 创建CES告警规则和通知主题。
- 执行功能验证:全链路请求测试、健康检查验证。
- 执行高可用验证:模拟单台ECS故障、模拟RDS主备切换。
- 执行弹性伸缩验证:制造CPU压力,观察AS扩容行为。
- 执行安全验证:WAF规则测试、安全组隔离测试。
阶段五:正式上线(预计1天)
- 灰度放量:先放10%流量到新环境,观察监控指标。
- 逐步放量至100%,持续观察错误率和响应时间。
- 确认稳定后,清理旧环境资源。
- 输出运维手册和架构文档,交付运维团队。
七、优化建议
7.1 性能优化
- 数据库慢SQL治理:开启RDS慢SQL日志,定期分析Top10慢SQL,配合索引优化和SQL改写。慢SQL数量持续增多时考虑添加只读实例分担读压力。
- 缓存策略调优:监控DCS缓存命中率,低于90%时检查缓存键设计和过期策略。避免大Key(单个Key的Value超过10KB)和热Key(单Key访问量占总量超过10%)问题。
- CDN缓存优化:静态资源配置长缓存时间(CSS/JS 30天,图片 180天),通过文件名hash实现缓存更新。HTML文件设置短缓存或不缓存。
- 连接池调优:根据实际并发量和RDS连接数上限调整连接池大小,避免连接泄漏和连接池耗尽。
7.2 成本优化
- 包年包月:长期稳定资源(RDS、ELB、EIP)选择包年包月,可节省30%以上。
- 按需转包:通过CES分析资源利用率,利用率持续高于60%的资源转为包年包月。
- 伸缩优化:夜间低峰期通过AS定时策略缩容到最小实例数,高峰期提前扩容。
- 存储优化:OBS日志和备份通过生命周期规则自动转低频或归档存储,降低存储费用。
- 规格优化:定期评估ECS规格是否匹配实际负载,避免过度配置。
7.3 安全加固
- 网络隔离强化:生产环境与测试环境使用不同VPC,通过VPC对等连接按需打通。
- 权限收敛:定期审计IAM子账号权限,移除不再需要的策略。运维操作使用临时Token而非长期AK/SK。
- 补丁管理:EulerOS安全补丁通过CCE或手动方式定期更新,更新前在测试环境验证。RDS小版本升级在维护窗口内执行。
- 安全扫描:每月执行一次全量安全扫描,包括主机漏洞、Web漏洞(WAF日志分析)、配置基线检查。
- 日志留存:CTS审计日志、应用日志、WAF日志统一转存OBS,按合规要求保留至少180天。
八、风险与应对
| 风险 | 影响 | 概率 | 应对措施 |
|---|---|---|---|
| 单AZ故障 | 部分ECS不可用,RDS切换 | 低 | 跨AZ部署,AS自动替换,RDS自动切换 |
| RDS主备切换 | 连接短暂中断(30秒内) | 低 | 应用层实现重连机制,连接池配置自动重连 |
| DCS主备切换 | 缓存短暂不可用 | 低 | 应用层降级到直接查数据库,切换后自动恢复 |
| WAF误拦截 | 正常请求被拦截 | 中 | 先观察模式运行7天,确认无误拦截后切阻断模式 |
| AS扩容失败 | 高峰期容量不足 | 低 | 配置多规格伸缩配置,首选规格无库存时自动降级 |
| 流量突增超带宽 | 响应变慢 | 中 | EIP带宽配置自动扩容,CDN承载静态流量减轻源站压力 |
| 误操作删除资源 | 服务中断 | 中 | 关键资源开启删除保护,OBS开启版本管理,操作走CTS审计 |
| 数据库数据丢失 | 数据不可恢复 | 极低 | 多重备份(自动备份+手动快照+OBS转存),定期恢复演练 |
九、总结
本方案以华为云托管服务为核心,通过跨AZ部署、弹性伸缩、多层安全防护和完善的监控告警体系,构建了一套适合中型Web应用的高可用架构。方案的核心价值在于:
- 高可用:核心组件跨AZ冗余,单AZ故障对用户无感知或仅短暂影响,整体可用率目标99.95%以上。
- 弹性:AS自动伸缩应对流量波动,存储按需扩容,无需提前固定资源规格。
- 安全:从网络隔离到主机安全的纵深防御体系,满足常见安全合规要求。
- 低运维:数据库、缓存、负载均衡均为托管服务,运维团队聚焦应用本身而非基础设施。
- 可演进:架构清晰分层,后续可平滑扩展到多Region容灾、微服务化、容器化部署。
方案中涉及的规格、阈值、策略等参数均为参考值,实际部署时应根据业务压测结果和监控数据持续调优。建议在上线后建立每月一次的架构评审机制,根据业务发展和监控数据迭代优化架构设计。
- 点赞
- 收藏
- 关注作者
评论(0)