75 lines
3.6 KiB
Plaintext
75 lines
3.6 KiB
Plaintext
日志告警系统需求
|
||
该系统基于 Python 开发，并通过 Docker 运行，具备 Web 界面 进行配置和管理，主要用于从 Elasticsearch (ES) 读取日志数据并基于自定义规则触发告警，告警方式为 飞书机器人。
|
||
|
||
功能需求
|
||
1. ES 连接管理
|
||
Web 界面支持配置 Elasticsearch 连接信息，包括：
|
||
ES 地址
|
||
账号
|
||
密码
|
||
配置后可测试连接状态，确保可用性。
|
||
2. 告警方式
|
||
通过 飞书机器人 发送告警通知。
|
||
支持 多个飞书机器人，可以为不同的告警规则指定不同的机器人。
|
||
机器人配置项：
|
||
机器人名称
|
||
Webhook 地址
|
||
3. 告警规则管理
|
||
规则触发方式：
|
||
定时查询某条数据流在指定时间范围内的日志数据。
|
||
统计某个字段（如 level:error）的数量，超过设定阈值时触发告警。
|
||
规则配置项：
|
||
规则名称
|
||
数据流索引（ES 索引名称）
|
||
查询筛选条件（可基于多个字段筛选，如 level:error）
|
||
查询时间范围（如最近 10 分钟、1 小时）
|
||
统计字段（用于计数的字段，如 level）
|
||
阈值（超过该值触发告警）
|
||
查询周期（如每 1 分钟执行一次）
|
||
通知机器人（选择对应的飞书机器人）
|
||
消息模板（可自定义告警内容）
|
||
4. 消息模板管理
|
||
支持 多个自定义消息模板，可供告警规则选择。告警消息将包含 查询到的最新一条数据的某个字段内容（如 message），并在内容过长时进行截取，保证消息简洁可读。
|
||
模板内容支持变量，如：
|
||
复制
|
||
编辑
|
||
告警名称：{rule_name}
|
||
触发时间：{trigger_time}
|
||
统计字段：{field}
|
||
触发阈值：{threshold}
|
||
统计值：{count}
|
||
支持 Markdown 格式。
|
||
5. 存储方式
|
||
不依赖 MySQL 等外部数据库，建议使用 JSON/YAML/SQLite 进行存储，保证轻量级和易部署性。
|
||
6. 系统部署
|
||
Docker 运行，提供 Dockerfile 和 docker-compose.yml 以便部署。
|
||
|
||
|
||
|
||
|
||
|
||
|
||
|
||
|
||
|
||
mongodb://mongouser:DaF97f3B!FpG65zF@lb-14j1hk46-3od0grjufknbqvy6.clb.usw-tencentclb.cloud:32521,lb-14j1hk46-3od0grjufknbqvy6.clb.usw-tencentclb.cloud:32522/test?replicaSet=cmgo-f5bip9or_0&authSource=admin
|
||
|
||
|
||
|
||
log_format java_prod_agent '时间: $time_local | 用户: $remote_user | 客户端IP: $remote_addr | '
|
||
'请求方法和路径: "$request" | 状态码: $status | 响应大小: $body_bytes_sent | '
|
||
'来源页面: "$http_referer" | 客户端UA: "$http_user_agent" | '
|
||
'上游服务器: $upstream_addr | 上游响应耗时: $upstream_response_time | '
|
||
'请求总耗时: $request_time | Host: $host';
|
||
|
||
log_format app_lessie_ai_log '客户端IP: $remote_addr | 用户: $remote_user | 时间: $time_local | '
|
||
'请求方法和路径: "$request" | 状态码: $status | 响应大小: $body_bytes_sent | '
|
||
'来源页面: "$http_referer" | 客户端UA: "$http_user_agent" | '
|
||
'上游服务器: $upstream_addr | 上游响应耗时: $upstream_response_time | '
|
||
'请求总耗时: $request_time | Host: $host';
|
||
|
||
log_format s1_jennie_im_log '客户端IP: $remote_addr | 用户: $remote_user | 时间: $time_local | '
|
||
'请求方法和路径: "$request" | 状态码: $status | 响应大小: $body_bytes_sent | '
|
||
'来源页面: "$http_referer" | 客户端UA: "$http_user_agent" | '
|
||
'上游服务器: $upstream_addr | 上游响应耗时: $upstream_response_time | '
|
||
'请求总耗时: $request_time | Host: $host'; |