Elastic官网对于mysql query metricset介绍很少,也没有介绍其用法,但是在基于ELK实现mysql性能监控中,query metricset又是明显支持的指标集。本着探索学习精神,通过查阅了不少资料后,今天我们就针对query metricset来详细介绍。
1. query metricset使用场景Elastic官网对于mysql query metricset介绍很少,只有一句总结性介绍,对于其用法也没有解释
query metricset allows for custom execution of metric related queries in MySQL 查询指标集允许在MySQL中自定义执行指标相关的查询
通俗来讲,就是允许你自定义查询sql,然后metricbeat会针对你自定义的这个sql进行监控,并且将监控的相关结果指标输出到你指定的es或者logstash中。并且会生成对应的索引数据,其对应的索引为metricbeat-
+es 版本号
,如metricbeat-7.13.0
我们可以利用ELK+Metricbeat实现对mysql性能指标的监控,其中针对mysql module的指标集有status、galera_status、performance、query。status为mysql状态相关指标、galera_status为mysql集群相关指标、performance为mysql性能相关指标,这三者我们已经在之前的博客中演示过他们的使用。
而query指标集就是我们自定义的查询的相关指标,下面我们详细介绍它的用法
2. query metricset使用方法通过其定义我们可以知道query指标集要求了我们需要额外再声明我们自定义的查询语句。
使用query metricset的配置项由三部分组成:
- metricsets中声明query
- module: mysql
metricsets:
- query
- 声明命名空间namespace:相当于是给你的自定义查询起个名字
namespace: "my_namespace"
- 声明queries属性 queries属性中包含三个子属性: (1)query: 自定义的查询语句 (2)query_namespace:该子查询的命名空间,自定义,用于后续在索引中定位 (3)response_format:响应格式:table或者variables 这里的使用规则,我参考了官方sql module的解释,但是因为无从考证,所以仅提供出来供大家参考
variables: Expects a two-column table that looks like a key/value result. The left column is considered a key and the right column the value. This mode generates a single event on each fetch operation. variables: 期待一个两列的表格,看起来像一个键/值的结果。左栏被认为是键,右栏是值。这种模式在每次获取操作时都会产生一个单一的事件。 table: Expects any number of columns. This mode generates a single event for each row. table: 期望有任何数量的列。这种模式为每一行生成一个事件
样例:
queries:
- query: "select * from user_test.user"
response_format: "table"
query_namespace: "user query"
- query: "select * from order_test.order"
response_format: "variables"
query_namespace: "order query"
总体案例如下
- module: mysql
metricsets:
- status
- galera_status
- performance
- query
period: 10s
hosts: ["root:123456@tcp(127.0.0.1:3306)/"]
# query metricsets 额外配置项
namespace: "my_namespace"
queries:
- query: "select * from user_test.user"
response_format: "table"
query_namespace: "user query"
- query: "select * from order_test.order"
response_format: "table"
query_namespace: "order query"