HertzBeat 开源软件 for Huawei 开源开发任务

举报
StanleyZhang 发表于 2024/12/03 18:11:46 2024/12/03
【摘要】 Apache HertzBeat 是一个易用友好的开源实时监控告警系统,无需 Agent,高性能集群,兼容 Prometheus,提供强大的自定义监控和状态页构建能力。本任务的主要目的是让 HertzBeat 能够通过 JDBC 协议支持 GaussDB 数据库,并完成功能验证。

1       背景介绍

开源for Huawei(https://developer.huaweicloud.cn/programs/opensource/contributing/)  通过和公司、高校、社区的开发者合作,完成鲲鹏、昇腾、欧拉、鸿蒙、高斯、云服务等与开源软件的适配开发,帮助繁荣Huawei的基础生态,同时让开源软件能够更加简单、高效的运行于华为云上。

开始之前,开发者可以下载 开源for Huawei Wiki(https://gitcode.com/HuaweiCloudDeveloper/OpenSourceForHuaweiWiki/overview) 了解详细的开发步骤,技术准备,以及开发过程需要的各种资源。

 

2       需求分析

2.1       开源软件基本情况

Apache HertzBeat (incubating)是一个易用友好的开源实时监控告警系统,无需 Agent,高性能集群,兼容 Prometheus,提供强大的自定义监控和状态页构建能力。

 ScreenShot_20241203171712.PNG


源码地址:https://github.com/apache/hertzbeat

官网主页:https://hertzbeat.apache.org/

主要开发语言:JAVA

LICENSE:Apache-2.0

维护者:Apache HertzBeat-开源社区

 

项目数据:Fork 1K, Star 5.8K, Contributor 231,最近一次提交:2024-11-30

star历史(https://star-history.com/):

 

star-history-2024123.png


 

2.2       任务目的和范围

HertzBeat 拥有自定义监控能力,您只需配置监控模版 YML 就能适配一款自定义的监控类型。目前自定义监控支持 HTTP 协议,JDBC 协议,SSH 协议,JMX 协议,SNMP 协议。本任务的主要目的是让 HertzBeat 能够通过 JDBC 协议支持 GaussDB 数据库,并完成功能验证。

 

  • 能力要求

完成该任务需要具备微服务开发经验,使用过 DevOps 工具,熟悉 HertzBeat 的设计原理和使用方法。开发过程中主要使用 Java 语言,演示 DEMO 会涉及少量的Vue、TypeScirpt前端(可选)。

 

  • 适配任务清单

 

生态

生态细类

是否需要验证

验证逻辑说明

是否需要适配

适配场景说明

昇腾生态

指令

否

使用昇腾处理器运行应用。

否

使用昇腾指令实现适配逻辑。

CANN

否

应用功能依赖于CANN运行。

否

使用CANN实现适配逻辑。

MindSpore

否

应用功能依赖于MindSpore运行。

否

使用MindSpore实现适配逻辑。

鲲鹏生态

指令

是

使用鲲鹏处理器运行应用。

否

使用鲲鹏指令实现适配逻辑。

Euler

是

使用Euler系统运行应用。

否

使用Euler系统调用实现适配逻辑。

数据库生态

GaussDB

是

使用GaussDB功能。

是

使用GaussDB的驱动和SQL实现适配逻辑。

 

GaussDB(DWS)

否

使用GaussDB(DWS)功能。

否

使用GaussDB(DWS)的驱动和SQL实现适配逻辑。

存储生态

OBS

否

使用OBS功能。

否

基于OBS API访问实现适配逻辑。

鸿蒙生态

HarmonyOS

否

使用HarmonyOS系统运行应用。

否

使用HarmonyOS系统调用实现适配逻辑。

3       工作量评估

任务

人/天

完成GaussDB数据库适配功能开发

2

完成DEMO设计和功能验证

1

基于CCE容器完成环境搭建和DEMO验证

2

输出开发资料和博客

1

代码推送上游社区和发布版本

2

总计

8人天

 

4       任务分解

 

4.1       完成GaussDB数据库适配功能开发

HertzBeat 提供的 JDBC 协议自定义监控,可以让我们很方便的通过写 SQL 查询语句就能监控到我们想监控的指标,目前 JDBC 协议支持 mysql, mariadb, postgresql, sqlserver 自定义指标监控。

JDBC 协议采集流程:

【系统直连MYSQL】->【运行SQL查询语句】->【响应数据解析:oneRow, multiRow, columns】->【指标数据提取】

由流程可见,我们可以自定义一个 JDBC 协议的监控类型来采集 GaussDB,然后配置 JDBC 请求参数,配置获取哪些指标,配置查询 SQL 语句。

 

ScreenShot_20241203171433.PNG


 

参考文档:https://hertzbeat.apache.org/zh-cn/docs/advanced/extend-jdbc

4.2       完成GaussDB演示DEMO设计

首先 fork 项目代码到本地仓库,然后根据上面介绍的 JDBC 协议采集流程,实现 GaussDB 的数据采集功能。根据需要采集 GaussDB 数据库的基本信息,比如:数据库版本号、编码格式、数据存储目录、最大连接数等;根据需要采集 GaussDB 数据库的指标数据,比如:运行状态、查询次数、冲突次数、死锁次数、活跃进程数、慢查询次数等。

 

4.3       DEMO开发、部署和验证

开发完成后,经本地测试无误,然后使用华为云 CodeArts 流水线部署该服务,要求使用CCE容器(Euler镜像)进行部署。访问 http://EIP:4200/dashboard 查看 GaussDB 数据库的指标。

ScreenShot_20241203175936.PNG


4.4       在华为云开发者论坛输出博客

访问华为云开发者论坛(参考:https://bbs.huaweicloud.cn/blogs)发表博客,介绍完成这些任务的过程和心得。

 

内容包括不限于如下内容:

  • 开源软件的功能介绍
  • 开发适配过程及解决的问题
  • DEMO设计、开发、部署过程
  • 代码推送开源社区及互动过程

 

博客打上如下标签:

  • 开源(必选)
  • 开发者(必选)
  • GaussDB数据库(可选)
  • 云数据库 GaussDB(可选)
  • 鲲鹏(可选)
  • 昇腾(可选)
  • 鸿蒙(可选)
  • 对象存储 OBS(可选)

 

4.5       代码推送上游社区

将代码合并到 HertzBeat 官网主干代码;更新 HertzBeat 官网资料,包括版本说明、开发指南等。

 

5       验收材料

验收细则

评分说明

是否为验收必选项

结果(通过/不通过)

开发者举证

功能开发:完成与华为三大根技术生态(鲲鹏云、昇腾云、鸿蒙)适配的功能开发和验证。

完成GaussDB数据库适配功能开发。举证提供PR链接。

是

 

 

代码质量:适配华为三大根技术生态的代码质量经过工具检测达标

推送给开源社区的代码符合开源社区关于代码风格、功能、自动化测试等要求。

是

 

 

提供相关文档,比如部署文档、使用文档、配置文档等

根据社区要求,完善相关的开发指南和部署指导

否

 

 

合入到开源项目主仓:代码推送上游社区

代码合并到当前主干分支。举证提供代码仓库链接。

是

 

 

Deomo设计&开发:完成功能演示Demo的开发

举证提供DEMO仓库地址和DEMO开发提交记录。

是

 

 

Demo部署&验证:完成功能演示DEMO基于华为云鲲鹏环境的部署和功能验证

提供DEMO部署验证结果的关键截图进行举证。提供DEMO运行环境和资源的规格清单。

是

 

 

发布博客:发布博客介绍适配心得。

提供博客的地址。

是

 

 

制作单机版无高危开源镜像。

上架云商店。

否

 

 

单机版镜像上架时支持模板部署。

 

否

 

 

制作集群版无高危开源镜像

上架云商店。

否

 

 

集群版镜像上架时支持模板部署

 

否

 

 

 

 

6       参考资料

  1. 开源for Huawei介绍、环境搭建、示例项目、开发和部署指南:https://gitcode.com/HuaweiCloudDeveloper/OpenSourceForHuaweiWiki/overview
  2. 完成任务过程中,碰到问题可以在这里查询或者提问:https://gitcode.com/HuaweiCloudDeveloper/OpenSourceForHuaweiWiki/issues
  3. Spring Data JPA适配GaussDB开源验证任务心得:https://bbs.huaweicloud.cn/blogs/438331
  4. GaussDB数据库驱动参考:https://support.huaweicloud.cn/distributed-devg-v3-gaussdb/gaussdb-12-0056.html
  5. 验收报告模板:https://gitcode.com/HuaweiCloudDeveloper/OpenSourceForHuaweiWiki/tree/main/zh_CN/docs/attachments

 

 

 

【声明】本内容来自华为云开发者社区博主,不代表华为云及华为云开发者社区的观点和立场。转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0)

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。