Java 应用通过日志分析跟踪异常指标

通常在业务中，我们记录的日志最多的一类应该是异常日志了，你有没有想过通过一个看板来监控各个业务模块的各类异常发生的频率呢？本节通过自定义日志分析规则，结合运维大盘 + 自定义告警，我们来演示如何基于日志分析，实现对业务异常数据的持续监控和告警。

明确需求

首先我们再明确下需求：

第一步我们需要创建一个日志分析规则，从日志数据中提取出异常类型信息，并转换为指标数据。

我们期望转换生成的指标数据能包含如下字段：

其中，timestamp 字段默认会自动从日志的 timestamp 转换过来，并不需要用户再次从日志中提取，因此，我们仅需要从日志中提取出异常类型的内容作为指标的字段即可。参考日志分析规则的指导，我们创建如下图所示分析规则：

①：指标名称，命名为 exception，表示转换成的指标就叫做这个命名，中文英文都可以，之后在创建运维大盘和创建告警规则时我们都将需要通过这个名字找到对应的指标
②：日志筛选，我们设置了项目名称和环境两个筛选条件，表示我们只关心 log-demo 项目的 prod 环境产生的异常日志
③：指标提取表达式，我们设置为 ([^\s]+Exception):，如下图所示对一条异常日志的示例可以看出，这个表达式可以匹配出异常类型的部分（当然，这个表达式约束条件比较少，可能会匹配到非预期的内容，但这里作为示例，我们不过分追求准确性）

填好后，点击页面最下面的确定按钮，完成日志分析规则的创建。

第二步我们前往 查询分析 > 仪表盘 菜单，创建一个大盘，这个大盘只需要包含一个能按照时间纬度分别展示各种类型异常发生的次数的时序图表。

按如下图所示操作进入大盘图表编辑页面：

然后配置图表：

我们对设置稍作说明：

确认后回到大盘页面，我们可以继续调整图表位置和大小，最后保存大盘，如下图所示：

如果没有可用的通知组，需要先到 DevOps平台 > 项目 > 项目设置 > 通知管理 页面创建通知组，如下图所示：

需要说明的是，由于我们的需求是通知到邮箱，因此 通知到 这里选择了 成员 的方式，你也可以选择其他方式，如 钉钉地址。

回到 微服务治理平台 > 项目列表 > 选择项目 > 告警管理 > 规则管理 页面，点击页面右上角 创建自定义规则。

首先设置触发规则定义部分，如下图所示：

①：名称，可以设置为任意能让你容易理解规则含义的标题，这里设置为 5分钟异常发生超10次
②：周期，单位是分钟，我们设置为 5
③：指标，选择我们刚才创建的日志分析规则指标 exception
④：过滤规则，这里我们不填写
⑤：分组规则，我们想针对每个应用分别统计告警，因此选择 应用ID
⑥：字段规则，相当于设置条件，如图所示的设置相当于条件 count(type) >= 10 同时我们给这个 count(type) 设置了个别名 ex_count，以便我们在发送告警消息时引用这个值

然后，设置下方的 消息模版定义 部分：

应用: {{application_name}}

服务: {{runtime_name}} - {{service_name}}

事件: {{window}}分钟内异常发生次数{{ex_count}}

时间: {{timestamp}} ```

最后点击确定，完成自定义告警规则的创建。

完成自定义告警规则后，我们还需要再创建告警策略：

到这里我们就完成了整个告警的配置，尝试触发一些异常，即可收到告警通知。