本章将介绍show profile, performance_schema show processlist 等命令的常见用法
show profile (查询剖析) 要使用profiling功能, 首先确保其已开启会话变量:profiling. 默认是关闭OFF(0), 可以通过set指令进行开启.
1 show variables like '%profil%'
开启
1 set profiling ='ON'; -- 等号右边也可以是1, (0代表关闭, 1代表开启)
profiling设置是会话级别的, 关闭会话则profiling信息会消失.
官网给出的show profile 指令格式:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 SHOW PROFILE [type [, type] ... ] [FOR QUERY n] [LIMIT row_count [OFFSET offset]] type: { ALL | BLOCK IO | CONTEXT SWITCHES | CPU | IPC | MEMORY | PAGE FAULTS | SOURCE | SWAPS }
show profiles: 注意带s, 该指令会返回最近一批发送到服务端的查询语句的信息(包含query_id, duration, statements),具体返回多少条由profiling_history_size变量决定. 其默认值是15, 上限100. 如果设置为0, 等效于: set profiling ='OFF';
MySQL5.7版本官网提示, show profile有可能不会在未来版本中出现, 取而代之的将会是 performance schema 性能模式.
The SHOW PROFILE and SHOW PROFILES statements are deprecated and will be removed in a future MySQL release. Use the Performance Schema instead; see Section 25.19.1, “Query Profiling Using Performance Schema” .
1 show profile all for query 1; -- 查询性能详细信息
如果不指明for query n, 则返回最近一条查询语句的性能分析.

总结: show profile可以查看的信息有: 功能较少新版本即将被性能模式(Performance Schema)取代.
介绍 MySQL的performance schema 用于监控MySQL server在一个较低级别的运行过程中的资源消耗、资源等待等情况 。 特点如下: 1、提供了一种在数据库运行时实时检查server的内部执行情况的方法。performance_schema 数据库中的表使用performance_schema存储引擎。该数据库主要关注数据库运行过程中的性能相关的数据,与information_schema不同,information_schema主要关注server运行过程中的元数据信息 2、performance_schema通过监视server的事件来实现监视server内部运行情况, “事件”就是server内部活动中所做的任何事情以及对应的时间消耗,利用这些信息来判断server中的相关资源消耗在了哪里?一般来说,事件可以是函数调用、操作系统的等待、SQL语句执行的阶段(如sql语句执行过程中的parsing 或 sorting阶段)或者整个SQL语句与SQL语句集合。事件的采集可以方便的提供server中的相关存储引擎对磁盘文件、表I/O、表锁等资源的同步调用信息。 3、performance_schema中的事件与写入二进制日志中的事件(描述数据修改的events)、事件计划调度程序(这是一种存储程序)的事件不同。performance_schema中的事件记录的是server执行某些活动对某些资源的消耗、耗时、这些活动执行的次数等情况。 4、performance_schema中的事件只记录在本地server的performance_schema中,其下的这些表中数据发生变化时不会被写入binlog中,也不会通过复制机制被复制到其他server中。 5、 当前活跃事件、历史事件和事件摘要相关的表中记录的信息。能提供某个事件的执行次数、使用时长。进而可用于分析某个特定线程、特定对象(如mutex或file)相关联的活动。 6、PERFORMANCE_SCHEMA存储引擎使用server源代码中的“检测点”来实现事件数据的收集。对于performance_schema实现机制本身的代码没有相关的单独线程来检测,这与其他功能(如复制或事件计划程序)不同 7、收集的事件数据存储在performance_schema数据库的表中。这些表可以使用SELECT语句查询,也可以使用SQL语句更新performance_schema数据库中的表记录(如动态修改performance_schema的setup_*开头的几个配置表,但要注意:配置表的更改会立即生效,这会影响数据收集) 8、performance_schema的表中的数据不会持久化存储在磁盘中,而是保存在内存中,一旦服务器重启,这些数据会丢失(包括配置表在内的整个performance_schema下的所有数据) 9、MySQL支持的所有平台中事件监控功能都可用,但不同平台中用于统计事件时间开销的计时器类型可能会有所差异。
在mysql的5.7版本中Performance Schemap配置是默认开启的. 如果想要显式的关闭的话需要修改配置文件,不能直接进行修改,会报错Variable ‘performance_schema’ is a read only variable。可以通过修改MySQL服务端配置文件my.cnf,在其中添加如下配置行显示地开启或者关闭该配置.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 --查看performance_schema的属性 mysql> SHOW VARIABLES LIKE 'performance_schema'; +--------------------+-------+ | Variable_name | Value | +--------------------+-------+ | performance_schema | ON | +--------------------+-------+ 1 row in set (0.01 sec) --在配置文件中修改performance_schema的属性值,on表示开启,off表示关闭 [mysqld] performance_schema=ON --切换数据库 use performance_schema; --查看当前数据库下的所有表,会看到有很多表存储着相关的信息 show tables; --可以通过show create table tablename来查看创建表的时候的表结构 mysql> show create table setup_consumers; +-----------------+--------------------------------- | Table | Create Table +-----------------+--------------------------------- | setup_consumers | CREATE TABLE `setup_consumers` ( `NAME` varchar(64) NOT NULL, `ENABLED` enum('YES','NO') NOT NULL ) ENGINE=PERFORMANCE_SCHEMA DEFAULT CHARSET=utf8 | +-----------------+--------------------------------- 1 row in set (0.00 sec)
想要搞明白后续的内容,需要理解两个基本概念: instruments: 生产者,用于采集mysql中各种各样的操作产生的事件信息,对应配置表中的配置项我们可以称为监控采集配置项。 consumers: 消费者,对应的消费者表用于存储来自instruments采集的数据,对应配置表中的配置项我们可以称为消费存储配置项。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 show tables like '%statement%' ;show tables like '%wait%' ;show tables like '%stage%' ;show tables like '%transaction%' ;show tables like '%file%' ;show tables like '%memory%' ;show tables like '%setup%' ;
1 2 [mysqld] performance_schema=ON
通过如下命令可以验证performance schema开启与否:
1 2 3 4 5 6 mysql> SHOW VARIABLES LIKE 'performance_schema'; +--------------------+-------+ | Variable_name | Value | +--------------------+-------+ | performance_schema | ON | +--------------------+-------+
ON表示开启成功, OFF表示有错误, 此时应该查看错误日志.Performance Schema 本质上是存储引擎的一种实现, 所以执行如下命令会有响应的输出:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 mysql> SELECT * FROM INFORMATION_SCHEMA.ENGINES WHERE ENGINE='PERFORMANCE_SCHEMA'\G *************************** 1. row *************************** ENGINE: PERFORMANCE_SCHEMA SUPPORT: YES COMMENT: Performance Schema TRANSACTIONS: NO XA: NO SAVEPOINTS: NO mysql> SHOW ENGINES\G ... Engine: PERFORMANCE_SCHEMA Support: YES Comment: Performance Schema Transactions: NO XA: NO Savepoints: NO ...
performance_schema存储引擎作用于performance_schema库中的表.performance_schema库及其中表的结构信息可以从INFORMATION_SCHEMA库中获取. 一下两种方式都能查看performance_schema库中的表
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 mysql> SELECT TABLE_NAME FROM INFORMATION_SCHEMA.TABLES WHERE TABLE_SCHEMA = 'performance_schema'; +------------------------------------------------------+ | TABLE_NAME | +------------------------------------------------------+ | accounts | | cond_instances | ... | events_stages_current | | events_stages_history | | events_stages_history_long | | events_stages_summary_by_account_by_event_name | | events_stages_summary_by_host_by_event_name | | events_stages_summary_by_thread_by_event_name | | events_stages_summary_by_user_by_event_name | | events_stages_summary_global_by_event_name | | events_statements_current | | events_statements_history | | events_statements_history_long | ... | file_instances | | file_summary_by_event_name | | file_summary_by_instance | | host_cache | | hosts | | memory_summary_by_account_by_event_name | | memory_summary_by_host_by_event_name | | memory_summary_by_thread_by_event_name | | memory_summary_by_user_by_event_name | | memory_summary_global_by_event_name | | metadata_locks | | mutex_instances | | objects_summary_global_by_type | | performance_timers | | replication_connection_configuration | | replication_connection_status | | replication_applier_configuration | | replication_applier_status | | replication_applier_status_by_coordinator | | replication_applier_status_by_worker | | rwlock_instances | | session_account_connect_attrs | | session_connect_attrs | | setup_actors | | setup_consumers | | setup_instruments | | setup_objects | | socket_instances | | socket_summary_by_event_name | | socket_summary_by_instance | | table_handles | | table_io_waits_summary_by_index_usage | | table_io_waits_summary_by_table | | table_lock_waits_summary_by_table | | threads | | users | +------------------------------------------------------+ mysql> SHOW TABLES FROM performance_schema; +------------------------------------------------------+ | Tables_in_performance_schema | +------------------------------------------------------+ | accounts | | cond_instances | | events_stages_current | | events_stages_history | | events_stages_history_long | ...
performance_schema库中的表会随着时间 的推移而越来越多. 因为会有越来越多的instrument生产者事件. 根据采集信息的类别,
performance_schema库下的表可以按收集信息类型可以进行如下分组: 当前事件表(Current events), 历史事件和总结表(event histories and summaries), 对象实例表(object instances), and 配置信息表(setup (configuration) information) 下面简单展示了几个这些表的部分操作, 详细操作信息可以参考官网Section 26.12, “Performance Schema Table Descriptions”.
首先, 并非所有生产者和消费者配置项都是开启的, 所以performance schema并非默认搜集所有事件信息. 要想开启所有事件采集和消费的配置并开启计时配置, 执行下面的两行命令即可:
1 2 3 4 5 6 mysql> UPDATE performance_schema.setup_instruments SET ENABLED = 'YES', TIMED = 'YES'; Query OK, 560 rows affected (0.04 sec) mysql> UPDATE performance_schema.setup_consumers SET ENABLED = 'YES'; Query OK, 10 rows affected (0.00 sec)
要查看服务器当前正在执行说明可以执行下面的命令, 输出结果每一行代表一个线程最近执行的操作:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 mysql> SELECT * FROM performance_schema.events_waits_current\G *************************** 1. row *************************** THREAD_ID: 0 EVENT_ID: 5523 END_EVENT_ID: 5523 EVENT_NAME: wait/synch/mutex/mysys/THR_LOCK::mutex SOURCE: thr_lock.c:525 TIMER_START: 201660494489586 TIMER_END: 201660494576112 TIMER_WAIT: 86526 SPINS: NULL OBJECT_SCHEMA: NULL OBJECT_NAME: NULL INDEX_NAME: NULL OBJECT_TYPE: NULL OBJECT_INSTANCE_BEGIN: 142270668 NESTING_EVENT_ID: NULL NESTING_EVENT_TYPE: NULL OPERATION: lock NUMBER_OF_BYTES: NULL FLAGS: 0 ...
上述输出结果的说明:
历史表和当前事件表的结构信息类似,只是历史表记录的是服务器最近(recently)执行的操作, 而不是当前(currently) .
events_waits_history表: 显示每个线程最近的十个事件信息. events_waits_history_long表: 显示最近的1000个事件. For example, to see information for recent events produced by thread 13, do this: 若想查看线程13最近执行的事件信息, 可以执行命令:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 mysql> SELECT EVENT_ID, EVENT_NAME, TIMER_WAIT FROM performance_schema.events_waits_history WHERE THREAD_ID = 13 ORDER BY EVENT_ID; +----------+-----------------------------------------+------------+ | EVENT_ID | EVENT_NAME | TIMER_WAIT | +----------+-----------------------------------------+------------+ | 86 | wait/synch/mutex/mysys/THR_LOCK::mutex | 686322 | | 87 | wait/synch/mutex/mysys/THR_LOCK_malloc | 320535 | | 88 | wait/synch/mutex/mysys/THR_LOCK_malloc | 339390 | | 89 | wait/synch/mutex/mysys/THR_LOCK_malloc | 377100 | | 90 | wait/synch/mutex/sql/LOCK_plugin | 614673 | | 91 | wait/synch/mutex/sql/LOCK_open | 659925 | | 92 | wait/synch/mutex/sql/THD::LOCK_thd_data | 494001 | | 93 | wait/synch/mutex/mysys/THR_LOCK_malloc | 222489 | | 94 | wait/synch/mutex/mysys/THR_LOCK_malloc | 214947 | | 95 | wait/synch/mutex/mysys/LOCK_alarm | 312993 | +----------+-----------------------------------------+------------+
当历史表存满后, 新来的时间会被插入, 而历史事件会被清除. select thread_id,event_id,event_name,timer_wait from events_waits_history order by thread_id limit 21;
总结表(Summary tables)存储的是所有事件按时间聚合的信息, 聚合的方式可以是多样的.为了查看哪个instruments事件执行次数最多, 或者等待时长最长,查询events_waits_summary_global_by_event_name表, 并按COUNT_STAR 或 SUM_TIMER_WAIT列进行排序即可.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 mysql> SELECT EVENT_NAME, COUNT_STAR FROM performance_schema.events_waits_summary_global_by_event_name ORDER BY COUNT_STAR DESC LIMIT 10; +---------------------------------------------------+------------+ | EVENT_NAME | COUNT_STAR | +---------------------------------------------------+------------+ | wait/synch/mutex/mysys/THR_LOCK_malloc | 6419 | | wait/io/file/sql/FRM | 452 | | wait/synch/mutex/sql/LOCK_plugin | 337 | | wait/synch/mutex/mysys/THR_LOCK_open | 187 | | wait/synch/mutex/mysys/LOCK_alarm | 147 | | wait/synch/mutex/sql/THD::LOCK_thd_data | 115 | | wait/io/file/myisam/kfile | 102 | | wait/synch/mutex/sql/LOCK_global_system_variables | 89 | | wait/synch/mutex/mysys/THR_LOCK::mutex | 89 | | wait/synch/mutex/sql/LOCK_open | 88 | +---------------------------------------------------+------------+ mysql> SELECT EVENT_NAME, SUM_TIMER_WAIT FROM performance_schema.events_waits_summary_global_by_event_name ORDER BY SUM_TIMER_WAIT DESC LIMIT 10; +----------------------------------------+----------------+ | EVENT_NAME | SUM_TIMER_WAIT | +----------------------------------------+----------------+ | wait/io/file/sql/MYSQL_LOG | 1599816582 | | wait/synch/mutex/mysys/THR_LOCK_malloc | 1530083250 | | wait/io/file/sql/binlog_index | 1385291934 | | wait/io/file/sql/FRM | 1292823243 | | wait/io/file/myisam/kfile | 411193611 | | wait/io/file/myisam/dfile | 322401645 | | wait/synch/mutex/mysys/LOCK_alarm | 145126935 | | wait/io/file/sql/casetest | 104324715 | | wait/synch/mutex/sql/LOCK_plugin | 86027823 | | wait/io/file/sql/pid | 72591750 | +----------------------------------------+----------------+
instance表记录了哪些类型的对象会被检测。这些对象在被server使用时,在该表中将会产生一条事件记录,这些表提供了事件名称和一些解释信息, 状态信息等. 例如,file_instances表列出了文件I/O操作及其关联文件名
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 mysql> SELECT * FROM performance_schema.file_instances\G *************************** 1. row *************************** FILE_NAME: /opt/mysql-log/60500/binlog.000007 EVENT_NAME: wait/io/file/sql/binlog OPEN_COUNT: 0 *************************** 2. row *************************** FILE_NAME: /opt/mysql/60500/data/mysql/tables_priv.MYI EVENT_NAME: wait/io/file/myisam/kfile OPEN_COUNT: 1 *************************** 3. row *************************** FILE_NAME: /opt/mysql/60500/data/mysql/columns_priv.MYI EVENT_NAME: wait/io/file/myisam/kfile OPEN_COUNT: 1 ...
setup表用来配置和展示监控特征.例如, 表setup_instruments 罗列了哪些instruments事件被采集, 被计时等.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 mysql> SELECT NAME, ENABLED, TIMED FROM performance_schema.setup_instruments; +---------------------------------------------------+---------+-------+ | NAME | ENABLED | TIMED | +---------------------------------------------------+---------+-------+ ... | stage/sql/end | NO | NO | | stage/sql/executing | NO | NO | | stage/sql/init | NO | NO | | stage/sql/insert | NO | NO | ... | statement/sql/load | YES | YES | | statement/sql/grant | YES | YES | | statement/sql/check | YES | YES | | statement/sql/flush | YES | YES | ... | wait/synch/mutex/sql/LOCK_global_read_lock | YES | YES | | wait/synch/mutex/sql/LOCK_global_system_variables | YES | YES | | wait/synch/mutex/sql/LOCK_lock_db | YES | YES | | wait/synch/mutex/sql/LOCK_manager | YES | YES | ... | wait/synch/rwlock/sql/LOCK_grant | YES | YES | | wait/synch/rwlock/sql/LOGGER::LOCK_logger | YES | YES | | wait/synch/rwlock/sql/LOCK_sys_init_connect | YES | YES | | wait/synch/rwlock/sql/LOCK_sys_init_slave | YES | YES | ... | wait/io/file/sql/binlog | YES | YES | | wait/io/file/sql/binlog_index | YES | YES | | wait/io/file/sql/casetest | YES | YES | | wait/io/file/sql/dbopt | YES | YES | ...
To control whether events are collected for an instrument, set its ENABLED value to YES or NO. For example: 通过修改performance_schema.setup_instruments表的enable列的值, 可以达到配置事件是否被采集.
1 2 3 mysql> UPDATE performance_schema.setup_instruments SET ENABLED = 'NO' WHERE NAME = 'wait/synch/mutex/sql/LOCK_mysql_create_db';
性能模式通过采集到的事件信息去更新performance schema库下的表, 这个就是”消费者”的操作. setup_consumers列出了可用的消费者及其开启情况.
为了控制性能模式是否维护事件信息到消费者, 可以设置上图中的enable为yes. 更多setup表的详细配置信息参见官网Section 26.4.2, “Performance Schema Event Filtering”
解释: instrument name命名规则参见官网Section 26.6, “Performance Schema Instrument Naming Conventions”. An instrument name consists of a sequence of elements separated by ‘/‘ characters. Example names: 一个生产者名称由一串以/分割的字符串元素组成, 如:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 wait/io/file/myisam/log wait/io/file/mysys/charset wait/lock/table/sql/handler wait/synch/cond/mysys/COND_alarm wait/synch/cond/sql/BINLOG::update_cond wait/synch/mutex/mysys/BITMAP_mutex wait/synch/mutex/sql/LOCK_delete wait/synch/rwlock/sql/Query_cache_query::lock stage/sql/closing tables stage/sql/Sorting result statement/com/Execute statement/com/Query statement/sql/create_table statement/sql/lock_tables errors
该树形结构的名称从左往右逐步具象化.一个instruments所拥有的元素的个数由其类型决定. 给定元素的意义由其左边所有元素一起决定. 例如, myisam出现在如下两个instruments名称中, 但是, 一个与文件io有关, 而第二个则与同步有关.
1 2 wait/io/file/myisam/log wait/synch/cond/myisam/MI_SORT_INFO::cond
生产者名称(instrument name)是由一个前缀(其结构由Performance Schema而定)和一个后缀(程序自定义的)构成. 前缀的顶层元素表明了生产者的类型. 可以有如下家中形式: idle: 空闲事件. 该生产者没有更深层的元素. error: 错误事件.该生产者没有更深层的元素. memory: 内存事件. stage: 阶段事件. statement: 语句事件. transaction: 事务事件. 该生产者没有更深层的元素. wait: 等待事件.
常用配置项的参数说明(重点) 1、启动选项
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 performance_schema_consumer_events_statements_current=TRUE -- 是否在mysql server启动时就开启events_statements_current表的记录功能(该表记录当前的语句事件信息),启动之后也可以在setup_consumers表中使用UPDATE语句进行动态更新setup_consumers配置表中的events_statements_current配置项,默认值为TRUE performance_schema_consumer_events_statements_history=TRUE -- 与performance_schema_consumer_events_statements_current选项类似,但该选项是用于配置是否记录语句事件短历史信息,默认为TRUE performance_schema_consumer_events_stages_history_long=FALSE -- 与performance_schema_consumer_events_statements_current选项类似,但该选项是用于配置是否记录语句事件长历史信息,默认为FALSE -- 除了statement(语句)事件之外,还支持:wait(等待)事件、state(阶段)事件、transaction(事务)事件,他们与statement事件一样都有三个启动项分别进行配置,但这些等待事件默认未启用,如果需要在MySQL Server启动时一同启动,则通常需要写进my.cnf配置文件中 -- performance_schema_consumer_global_instrumentation=TRUE -- 是否在MySQL Server启动时就开启全局表(如:mutex_instances、rwlock_instances、cond_instances、file_instances、users、hostsaccounts、socket_summary_by_event_name、file_summary_by_instance等大部分的全局对象计数统计和事件汇总统计信息表 )的记录功能,启动之后也可以在setup_consumers表中使用UPDATE语句进行动态更新全局配置项 -- 默认值为TRUE performance_schema_consumer_statements_digest=TRUE -- 是否在MySQL Server启动时就开启events_statements_summary_by_digest 表的记录功能,启动之后也可以在setup_consumers表中使用UPDATE语句进行动态更新digest配置项 -- 默认值为TRUE performance_schema_consumer_thread_instrumentation=TRUE -- 是否在MySQL Server启动时就开启 events_xxx_summary_by_yyy_by_event_name表的记录功能,启动之后也可以在setup_consumers表中使用UPDATE语句进行动态更新线程配置项 默认值为TRUE performance_schema_instrument[=name] -- 是否在MySQL Server启动时就启用某些采集器,由于instruments配置项多达数千个,所以该配置项支持key-value模式,还支持%号进行通配等,如下: -- [=name]可以指定为具体的Instruments名称(但是这样如果有多个需要指定的时候,就需要使用该选项多次),也可以使用通配符,可以指定instruments相同的前缀+通配符,也可以使用%代表所有的instruments -- 指定开启单个instruments performance-schema-instrument= 'instrument_name=value' -- 使用通配符指定开启多个instruments performance-schema-instrument= 'wait/synch/cond/%=COUNTED' -- 开关所有的instruments -- performance-schema-instrument= '%=ON' -- performance-schema-instrument= '%=OFF' -- 注意,这些启动选项要生效的前提是,需要设置performance_schema=ON。另外,这些启动选项虽然无法使用show variables语句查看,但我们可以通过setup_instruments和setup_consumers表查询这些选项指定的值。
2、系统变量
控制performance_schema功能的开关,要使用MySQL的performance_schema,需要在mysqld启动时启用,以启用事件收集功能 该参数在5.7.x之前支持performance_schema的版本中默认关闭,5.7.x版本开始默认开启 注意:如果mysqld在初始化performance_schema时发现无法分配任何相关的内部缓冲区,则performance_schema将自动禁用,并将performance_schema设置为OFF
1 2 3 show variables like '%performance_schema%'; -- 重要的属性解释 performance_schema=ON
控制events_statements_summary_by_digest表中的最大行数。如果产生的语句摘要信息超过此最大值,便无法继续存入该表,此时performance_schema会增加状态变量
1 performance_schema_digests_size=10000
控制events_statements_history_long表中的最大行数,该参数控制所有会话在events_statements_history_long表中能够存放的总事件记录数,超过这个限制之后,最早的记录将被覆盖 全局变量,只读变量,整型值,5.6.3版本引入 * 5.6.x版本中,5.6.5及其之前的版本默认为10000,5.6.6及其之后的版本默认值为-1,通常情况下,自动计算的值都是10000 * 5.7.x版本中,默认值为-1,通常情况下,自动计算的值都是10000
1 performance_schema_events_statements_history_long_size=10000
控制events_statements_history表中单个线程(会话)的最大行数,该参数控制单个会话在events_statements_history表中能够存放的事件记录数,超过这个限制之后,单个会话最早的记录将被覆盖 全局变量,只读变量,整型值,5.6.3版本引入 * 5.6.x版本中,5.6.5及其之前的版本默认为10,5.6.6及其之后的版本默认值为-1,通常情况下,自动计算的值都是10 * 5.7.x版本中,默认值为-1,通常情况下,自动计算的值都是10 除了statement(语句)事件之外,wait(等待)事件、state(阶段)事件、transaction(事务)事件,他们与statement事件一样都有三个参数分别进行存储限制配置,有兴趣的同学自行研究,这里不再赘述
1 performance_schema_events_statements_history_size=10
用于控制标准化形式的SQL语句文本在存入performance_schema时的限制长度,该变量与max_digest_length变量相关(max_digest_length变量含义请自行查阅相关资料) 全局变量,只读变量,默认值1024字节,整型值,取值范围0~1048576
1 performance_schema_max_digest_length=1024
控制存入events_statements_current,events_statements_history和events_statements_history_long语句事件表中的SQL_TEXT列的最大SQL长度字节数。 超出系统变量performance_schema_max_sql_text_length的部分将被丢弃,不会记录,一般情况下不需要调整该参数,除非被截断的部分与其他SQL比起来有很大差异 全局变量,只读变量,整型值,默认值为1024字节,取值范围为0~1048576,5.7.6版本引入 降低系统变量performance_schema_max_sql_text_length值可以减少内存使用,但如果汇总的SQL中,被截断部分有较大差异,会导致没有办法再对这些有较大差异的SQL进行区分。 增加该系统变量值会增加内存使用,但对于汇总SQL来讲可以更精准地区分不同的部分。
1 performance_schema_max_sql_text_length=1024
重要配置表的相关说明 配置表之间存在相互关联关系,按照配置影响的先后顺序,可添加为
performance_timers表中记录了server中有哪些可用的事件计时器 字段解释: timer_name:表示可用计时器名称,CYCLE是基于CPU周期计数器的定时器 timer_frequency:表示每秒钟对应的计时器单位的数量,CYCLE计时器的换算值与CPU的频率相关、 timer_resolution:计时器精度值,表示在每个计时器被调用时额外增加的值 timer_overhead:表示在使用定时器获取事件时开销的最小周期值
1 select * from performance_timers;
setup_timers表中记录当前使用的事件计时器信息
字段解释: name:计时器类型,对应某个事件类别 timer_name:计时器类型名称
1 select * from setup_timers;
setup_consumers表中列出了consumers可配置列表项 字段解释: NAME:consumers配置名称 ENABLED:consumers是否启用,有效值为YES或NO,此列可以使用UPDATE语句修改。
1 select * from setup_consumers;
setup_instruments 表列出了instruments 列表配置项,即代表了哪些事件支持被收集: 字段解释: NAME:instruments名称,instruments名称可能具有多个部分并形成层次结构 ENABLED:instrumetns是否启用,有效值为YES或NO,此列可以使用UPDATE语句修改。如果设置为NO,则这个instruments不会被执行,不会产生任何的事件信息 TIMED:instruments是否收集时间信息,有效值为YES或NO,此列可以使用UPDATE语句修改,如果设置为NO,则这个instruments不会收集时间信息
1 SELECT * FROM setup_instruments;
setup_actors表的初始内容是匹配任何用户和主机,因此对于所有前台线程,默认情况下启用监视和历史事件收集功能 字段解释: HOST:与grant语句类似的主机名,一个具体的字符串名字,或使用“%”表示“任何主机” USER:一个具体的字符串名称,或使用“%”表示“任何用户” ROLE:当前未使用,MySQL 8.0中才启用角色功能 ENABLED:是否启用与HOST,USER,ROLE匹配的前台线程的监控功能,有效值为:YES或NO HISTORY:是否启用与HOST, USER,ROLE匹配的前台线程的历史事件记录功能,有效值为:YES或NO
1 SELECT * FROM setup_actors;
setup_objects表控制performance_schema是否监视特定对象。默认情况下,此表的最大行数为100行。 字段解释: OBJECT_TYPE:instruments类型,有效值为:“EVENT”(事件调度器事件)、“FUNCTION”(存储函数)、“PROCEDURE”(存储过程)、“TABLE”(基表)、“TRIGGER”(触发器),TABLE对象类型的配置会影响表I/O事件(wait/io/table/sql/handler instrument)和表锁事件(wait/lock/table/sql/handler instrument)的收集 OBJECT_SCHEMA:某个监视类型对象涵盖的数据库名称,一个字符串名称,或“%”(表示“任何数据库”) OBJECT_NAME:某个监视类型对象涵盖的表名,一个字符串名称,或“%”(表示“任何数据库内的对象”) ENABLED:是否开启对某个类型对象的监视功能,有效值为:YES或NO。此列可以修改 TIMED:是否开启对某个类型对象的时间收集功能,有效值为:YES或NO,此列可以修改
1 SELECT * FROM setup_objects;
threads表对于每个server线程生成一行包含线程相关的信息, 字段解释: THREAD_ID:线程的唯一标识符(ID) NAME:与server中的线程检测代码相关联的名称(注意,这里不是instruments名称) TYPE:线程类型,有效值为:FOREGROUND、BACKGROUND。分别表示前台线程和后台线程 PROCESSLIST_ID:对应INFORMATION_SCHEMA.PROCESSLIST表中的ID列。 PROCESSLIST_USER:与前台线程相关联的用户名,对于后台线程为NULL。 PROCESSLIST_HOST:与前台线程关联的客户端的主机名,对于后台线程为NULL。 PROCESSLIST_DB:线程的默认数据库,如果没有,则为NULL。 PROCESSLIST_COMMAND:对于前台线程,该值代表着当前客户端正在执行的command类型,如果是sleep则表示当前会话处于空闲状态 PROCESSLIST_TIME:当前线程已处于当前线程状态的持续时间(秒) PROCESSLIST_STATE:表示线程正在做什么事情。 PROCESSLIST_INFO:线程正在执行的语句,如果没有执行任何语句,则为NULL。 PARENT_THREAD_ID:如果这个线程是一个子线程(由另一个线程生成),那么该字段显示其父线程ID ROLE:暂未使用 INSTRUMENTED:线程执行的事件是否被检测。有效值:YES、NO HISTORY:是否记录线程的历史事件。有效值:YES、NO * THREAD_OS_ID:由操作系统层定义的线程或任务标识符(ID):
注意:在performance_schema库中还包含了很多其他的库和表,能对数据库的性能做完整的监控,具体需要参考官网详细了解。
基本了解了表的相关信息之后,可以通过这些表进行实际的查询操作来进行实际的分析。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 SELECT DIGEST_TEXT,COUNT_STAR,FIRST_SEEN,LAST_SEEN FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC SELECT DIGEST_TEXT,AVG_TIMER_WAIT FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC SELECT DIGEST_TEXT,SUM_SORT_ROWS FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC SELECT DIGEST_TEXT,SUM_ROWS_EXAMINED FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC SELECT DIGEST_TEXT,SUM_CREATED_TMP_TABLES,SUM_CREATED_TMP_DISK_TABLES FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC SELECT DIGEST_TEXT,SUM_ROWS_SENT FROM events_statements_summary_by_digest ORDER BY COUNT_STAR DESC SELECT file_name,event_name,SUM_NUMBER_OF_BYTES_READ,SUM_NUMBER_OF_BYTES_WRITE FROM file_summary_by_instance ORDER BY SUM_NUMBER_OF_BYTES_READ + SUM_NUMBER_OF_BYTES_WRITE DESC SELECT object_name,COUNT_READ,COUNT_WRITE,COUNT_FETCH,SUM_TIMER_WAIT FROM table_io_waits_summary_by_table ORDER BY sum_timer_wait DESC SELECT OBJECT_NAME,INDEX_NAME,COUNT_FETCH,COUNT_INSERT,COUNT_UPDATE,COUNT_DELETE FROM table_io_waits_summary_by_index_usage ORDER BY SUM_TIMER_WAIT DESC SELECT OBJECT_SCHEMA,OBJECT_NAME,INDEX_NAME FROM table_io_waits_summary_by_index_usage WHERE INDEX_NAME IS NOT NULL AND COUNT_STAR = 0 AND OBJECT_SCHEMA <> 'mysql' ORDER BY OBJECT_SCHEMA,OBJECT_NAME;SELECT EVENT_NAME,COUNT_STAR,SUM_TIMER_WAIT,AVG_TIMER_WAIT FROM events_waits_summary_global_by_event_name WHERE event_name != 'idle' ORDER BY SUM_TIMER_WAIT DESC SELECT EVENT_ID,sql_text FROM events_statements_history WHERE sql_text LIKE '%count(*)%' ;SELECT event_id,EVENT_NAME,SOURCE ,TIMER_END - TIMER_START FROM events_stages_history_long WHERE NESTING_EVENT_ID = 1553 ;SELECT event_id,event_name,source ,timer_wait,object_name,index_name,operation,nesting_event_id FROM events_waits_history_longWHERE nesting_event_id = 1553 ;
与性能模式有关的状态变量有如下这些:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 mysql> SHOW STATUS LIKE 'perf%'; +-----------------------------------------------+-------+ | Variable_name | Value | +-----------------------------------------------+-------+ | Performance_schema_accounts_lost | 0 | | Performance_schema_cond_classes_lost | 0 | | Performance_schema_cond_instances_lost | 0 | | Performance_schema_digest_lost | 0 | | Performance_schema_file_classes_lost | 0 | | Performance_schema_file_handles_lost | 0 | | Performance_schema_file_instances_lost | 0 | | Performance_schema_hosts_lost | 0 | | Performance_schema_locker_lost | 0 | | Performance_schema_memory_classes_lost | 0 | | Performance_schema_metadata_lock_lost | 0 | | Performance_schema_mutex_classes_lost | 0 | | Performance_schema_mutex_instances_lost | 0 | | Performance_schema_nested_statement_lost | 0 | | Performance_schema_program_lost | 0 | | Performance_schema_rwlock_classes_lost | 0 | | Performance_schema_rwlock_instances_lost | 0 | | Performance_schema_session_connect_attrs_lost | 0 | | Performance_schema_socket_classes_lost | 0 | | Performance_schema_socket_instances_lost | 0 | | Performance_schema_stage_classes_lost | 0 | | Performance_schema_statement_classes_lost | 0 | | Performance_schema_table_handles_lost | 0 | | Performance_schema_table_instances_lost | 0 | | Performance_schema_thread_classes_lost | 0 | | Performance_schema_thread_instances_lost | 0 | | Performance_schema_users_lost | 0 | +-----------------------------------------------+-------+
例如, 当服务端某生产者采集到一个互斥对象,但是服务器又无法在运行时为采集动作分配内存, 那么Performance_schema_mutex_classes_lost值就会+1. 这种情况下, 互斥对象依旧正常以同步方式正常运行(即服务器正常运行), 但是该对象的性能表现数据就不会被采集到.
加入有如下场景: 服务端起始变量设置为performance_schema_max_mutex_classes=200, 并且已经加载了150个互斥对象,此时有两个plugin a和b分别持有40和20个互斥对象采集器. 当服务器加载了plugin a后再加载plugin b时就会有10个乎此对象采集器无法加载.
1 2 3 4 5 6 7 mysql> SHOW STATUS LIKE "perf%mutex_classes_lost"; +---------------------------------------+-------+ | Variable_name | Value | +---------------------------------------+-------+ | Performance_schema_mutex_classes_lost | 10 | +---------------------------------------+-------+ 1 row in set (0.10 sec)
注意, 采集动作对plugin b仍然部分有效, 只是有10个Performance_schema_mutex_classes_lost . 当服务器无法创建互斥对象采集器时, 将不会有数据写入setup_instruments. Performance_schema_mutex_classes_lost 增量步长为 1.
以上所有模式对所有采集器都适用, 而非仅仅mutex.
show processlist (查看连接的线程个数) 1 show [full] processlist;
指令的输出列官网解释译文 :
id: 连接标识符. 与 INFORMATION_SCHEMA.PROCESSLIST表的ID列一致.
user: 执行查询的用户名. 如果其值为system user, 则说明发对应查询非客户端发起的.
Host: 客户端主机端口信息
db: 当前查询所用的库. 如果职位NULL, 表示没有指定库.
Command: 客户端线程指令的类型. 如果当前连接为空闲状态则该列返回值为sleep.
Time: 该线程已处于当前状态的持续时间. 单位为秒
State: 当前线程所执行的内容: 可以是操作, 事件, 状态.[详见](https://dev.mysql.com/doc/refman/5.7/en/thread-information.html)如果某县城处于同一状态很多秒, 就可能有问题需要排查.
线程正(最近)执行的语句信息. NULL表示空闲,未执行任何语句.