MySQL 性能巡检

背景

对于日益复杂的应用架构，当前的趋势是越来越多的客户采用免运维的云数据库，所以巡检 MySQL的性能巡检是重中之重，定期会对 MySQL 进行智能巡检，通过发现 MySQL 的性能问题来进行异常告警。

前置条件

1. 自建 DataFlux Func 的离线部署
2. 开启自建 DataFlux Func 的脚本市场
3. 在观测云「管理 / API Key 管理」中创建用于进行操作的 API Key
4. 在自建的 DataFlux Func 中，通过「脚本市场」安装「观测云自建巡检 Core 核心包」「观测云算法库」「观测云自建巡检（MYSQL 性能）」
5. 在自建的 DataFlux Func 中，编写自建巡检处理函数
6. 在自建的 DataFlux Func 中，通过「管理 / 自动触发配置」，为所编写的函数创建自动触发配置。

如果考虑采用云服务器来进行 DataFlux Func 离线部署的话，请考虑跟当前使用的观测云 SaaS 部署在 同一运营商同一地域

配置巡检

在自建 DataFlux Func 创建新的脚本集开启MySQL 性能巡检配置

from guance_monitor__register import self_hosted_monitor
from guance_monitor__runner import Runner
import guance_monitor_mysql_performance__main as main

# 观测云空间 API_KEY 配置(用户自行配置)
API_KEY_ID  = 'wsak_xxxx'
API_KEY     = '3LTcYxxxxx'

# 函数 filters 参数过滤器和观测云 studio 监控\智能巡检配置中存在调用优先级，配置了函数 filters 参数过滤器后则不需要在观测云 studio 监控\智能巡检中更改检测配置了，如果两边都配置的话则优先生效脚本中 filters 参数

def filter_host(host):
    '''
    过滤 host，自定义符合要求 host 的条件，匹配的返回 True，不匹配的返回 False
    return True｜False
    '''
    if host in ['196.168.0.0']:
        return True

'''
任务配置参数请使用：
@DFF.API('MYSQL 性能巡检', fixed_crontab='*/30 * * * *', timeout=900)

fixed_crontab：固定执行频率「每 30 分钟一次」
timeout：任务执行超时时长，控制在 15 分钟
'''
# 自定义巡检配置 用户无需修改
@self_hosted_monitor(API_KEY_ID, API_KEY)
@DFF.API('MYSQL 性能巡检', fixed_crontab='*/30 * * * *', timeout=900)
def run(configs=None):
    '''
    configs : 配置需要检测的 host 列表（可选，不配置默认检测当前工作空间下所有主机）
    configs = {
        "host": ["192.168.0.1", "192.168.0.0"]    # 主机 host 列表
    }

    '''
    checkers = [
        main.MysqlChecker(configs=configs, filters=[filter_host]),
    ]

    Runner(checkers, debug=False).run()

开启巡检

在观测云中注册检测项

在 DataFlux Func 中在配置好巡检之后可以通过直接再页面中选择 run() 方法进行点击运行进行测试，在点击发布之后就可以在观测云「监控 / 智能巡检」中查看并进行配置

在观测云中配置 MySQL 性能巡检

启用/禁用

MySQL 性能巡检默认是「开启」状态，可手动「关闭」，开启后，将对配置好的主机列表进行巡检。

导出

智能巡检支持“导出 JSON 配置”。在智能巡检列表右侧的操作菜单下，点击「导出」按钮，即可导出当前巡检的 JSON 代码，导出文件名格式：智能巡检名称.json 。

编辑

智能巡检「 MySQL 性能巡检」支持用户手动添加筛选条件，在智能巡检列表右侧的操作菜单下，点击「编辑」按钮，即可对巡检模版进行编辑。

• 筛选条件：配置需要巡检的主机 hosts
• 告警通知：支持选择和编辑告警策略，包括需要通知的事件等级、通知对象、以及告警沉默周期等

配置入口参数点击编辑后在参数配置中填写对应的检测对象点击保存开始巡检：

可以参考如下的 JSON 配置多个主机信息

// 配置示例：
configs = {
  "host": ["192.168.0.1", "192.168.0.0"] // 主机 host 列表
}

在自建的 DataFlux Func 中，编写自建巡检处理函数时也可以添加过滤条件（参考示例代码配置），要注意的是在观测云 Studio 中配置的参数会覆盖掉编写自建巡检处理函数时配置的参数

查看事件

本巡检会扫描最近 6 小时的内存使用率信息，一旦出现出现未来 2 小时会超过预警值时，智能巡检会生成相应的事件，在智能巡检列表右侧的操作菜单下，点击「查看相关事件」按钮，即可查看对应异常事件。

事件详情页

点击「事件」，可查看智能巡检事件的详情页，包括事件状态、异常发生的时间、异常名称、基础属性、事件详情、告警通知、历史记录和关联事件。

• 点击详情页右上角的「查看监控器配置」小图标，支持查看和编辑当前智能巡检的配置详情
• 点击详情页右上角的「导出事件 JSON」小图标，支持导出事件的详情内容

基础属性

• 检测维度：基于智能巡检配置的筛选条件，支持将检测维度 key/value 复制、添加到筛选、以及查看相关日志、容器、进程、安全巡检、链路、用户访问监测、可用性监测以及 CI 等数据
• 扩展属性：选择扩展属性后支持以 key/value 的形式复制、正向/反向筛选

事件详情

• 事件概览：描述异常巡检事件的对象、内容等。
• cpu 利用率折线图：可查看当前异常主机过去 30 分钟的 cpu 利用率情况。
• 内存利用率折线图：可查看当前异常主机过去 30 分钟的内存利用率情况。
• SQL 执行次数折线图：可查看当前异常主机过去 30 分钟的 replace、update、delete、insert、select 执行次数。
• 慢 SQL 折线图：可查看当前异常主机过去 30 分钟的发现的慢 SQL 次数。
• SQL 耗时排名：可显示异常的 MySQL Top 5 的慢 SQL 排名及相关信息，可以通过 digest 跳转查看相关日志

历史记录

支持查看检测对象、异常/恢复时间和持续时长。

关联事件

支持通过筛选字段和所选取的时间组件信息，查看关联事件。

常见问题

1.MySQL 性能巡检的检测频率如何配置

• 在自建的 DataFlux Func 中，编写自建巡检处理函数时在装饰器中添加fixed_crontab='*/30 * * * *', timeout=900 ， 后在「管理 / 自动触发配置」中配置。

2.MySQL 性能巡检触发时可能会没有异常分析

在出现巡检报告中没有异常分析时，请检查当前 datakit 的数据采集状态。

3.在何种情况下会产生 MySQL 性能巡检事件

如果当前配置主机出现 cpu 利用率持续超过 95% 达 10 分钟，内存利用率持续超过 95% 达 10 分钟，SQL 执行次数超过环比上涨 5 倍，慢 SQL 出现次数超过环比上涨 5 倍则生成告警事件。

4.在巡检过程中发现以前正常运行的脚本出现异常错误

请在 DataFlux Func 的脚本市场中更新所引用的脚本集，可以通过变更日志来查看脚本市场的更新记录方便即时更新脚本。