performance_schema全方位介绍

原标题:初相识|performance_schema全方位介绍(一)

原标题:数据库对象事件与属性统计 | performance_schema全方位介绍(五)

MySQL Performance-Schema(二) 理论篇,performanceschema

     MySQL
Performance-Schema中总共包含52个表,主要分为几类:Setup表,Instance表,Wait
Event表,Stage Event表Statement
Event表,Connection表和Summary表。上一篇文章已经着重讲了Setup表,这篇文章将会分别就每种类型的表做详细的描述。

Instance表
   
 instance中主要包含了5张表:cond_instances,file_instances,mutex_instances,rwlock_instances和socket_instances。
(1)cond_instances:条件等待对象实例
表中记录了系统中使用的条件变量的对象,OBJECT_INSTANCE_BEGIN为对象的内存地址。比如线程池的timer_cond实例的name为:wait/synch/cond/threadpool/timer_cond

(2)file_instances:文件实例
表中记录了系统中打开了文件的对象,包括ibdata文件,redo文件,binlog文件,用户的表文件等,比如redo日志文件:/u01/my3306/data/ib_logfile0。open_count显示当前文件打开的数目,如果重来没有打开过,不会出现在表中。

(3)mutex_instances:互斥同步对象实例
表中记录了系统中使用互斥量对象的所有记录,其中name为:wait/synch/mutex/*。比如打开文件的互斥量:wait/synch/mutex/mysys/THR_LOCK_open。LOCKED_BY_THREAD_ID显示哪个线程正持有mutex,若没有线程持有,则为NULL。

(4)rwlock_instances: 读写锁同步对象实例
表中记录了系统中使用读写锁对象的所有记录,其中name为
wait/synch/rwlock/*。WRITE_LOCKED_BY_THREAD_ID为正在持有该对象的thread_id,若没有线程持有,则为NULL,READ_LOCKED_BY_COUNT为记录了同时有多少个读者持有读锁。通过
events_waits_current
表可以知道,哪个线程在等待锁;通过rwlock_instances知道哪个线程持有锁。rwlock_instances的缺陷是,只能记录持有写锁的线程,对于读锁则无能为力。

(5)socket_instances:活跃会话对象实例
表中记录了thread_id,socket_id,ip和port,其它表可以通过thread_id与socket_instance进行关联,获取IP-PORT信息,能够与应用对接起来。
event_name主要包含3类:
wait/io/socket/sql/server_unix_socket,服务端unix监听socket
wait/io/socket/sql/server_tcpip_socket,服务端tcp监听socket
wait/io/socket/sql/client_connection,客户端socket

Wait Event表
     
Wait表主要包含3个表,events_waits_current,events_waits_history和events_waits_history_long,通过thread_id+event_id可以唯一确定一条记录。current表记录了当前线程等待的事件,history表记录了每个线程最近等待的10个事件,而history_long表则记录了最近所有线程产生的10000个事件,这里的10和10000都是可以配置的。这三个表表结构相同,history和history_long表数据都来源于current表。current表和history表中可能会有重复事件,并且history表中的事件都是完成了的,没有结束的事件不会加入到history表中。
THREAD_ID:线程ID
EVENT_ID:当前线程的事件ID,和THREAD_ID组成一个Primary Key。
END_EVENT_ID:当事件开始时,这一列被设置为NULL。当事件结束时,再更新为当前的事件ID。
SOURCE:该事件产生时的源码文件
TIMER_START, TIMER_END,
TIMER_WAIT:事件开始/结束和等待的时间,单位为皮秒(picoseconds)

OBJECT_SCHEMA, OBJECT_NAME, OBJECT_TYPE视情况而定
对于同步对象(cond, mutex, rwlock),这个3个值均为NULL
对于文件IO对象,OBJECT_SCHEMA为NULL,OBJECT_NAME为文件名,OBJECT_TYPE为FILE
对于SOCKET对象,OBJECT_NAME为该socket的IP:SOCK值
对于表I/O对象,OBJECT_SCHEMA是表的SCHEMA名,OBJECT_NAME是表名,OBJECT_TYPE为TABLE或者TEMPORARY
TABLE
NESTING_EVENT_ID:该事件对应的父事件ID
NESTING_EVENT_TYPE:父事件类型(STATEMENT, STAGE, WAIT)
OPERATION:操作类型(lock, read, write)

Stage Event表 

     
 Stage表主要包含3个表,events_stages_current,events_stages_history和events_stages_history_long,通过thread_id+event_id可以唯一确定一条记录。表中记录了当前线程所处的执行阶段,由于可以知道每个阶段的执行时间,因此通过stage表可以得到SQL在每个阶段消耗的时间。

THREAD_ID:线程ID
EVENT_ID:事件ID
END_EVENT_澳门威斯尼人平台,ID:刚结束的事件ID
SOURCE:源码位置
TIMER_START, TIMER_END,
TIMER_WAIT:事件开始/结束和等待的时间,单位为皮秒(picoseconds)
NESTING_EVENT_ID:该事件对应的父事件ID
NESTING_EVENT_TYPE:父事件类型(STATEMENT, STAGE, WAIT)

Statement Event表
     
Statement表主要包含3个表,events_statements_current,events_statements_history和events_statements_history_long。通过thread_id+event_id可以唯一确定一条记录。Statments表只记录最顶层的请求,SQL语句或是COMMAND,每条语句一行,对于嵌套的子查询或者存储过程不会单独列出。event_name形式为statement/sql/*,或statement/com/*
SQL_TEXT:记录SQL语句
DIGEST:对SQL_TEXT做MD5产生的32位字符串。如果为consumer表中没有打开statement_digest选项,则为NULL。
DIGEST_TEXT:将语句中值部分用问号代替,用于SQL语句归类。如果为consumer表中没有打开statement_digest选项,则为NULL。
CURRENT_SCHEMA:默认的数据库名
OBJECT_SCHEMA,OBJECT_NAME,OBJECT_TYPE:保留字段,全部为NULL
ROWS_AFFECTED:影响的数目
ROWS_SENT:返回的记录数
ROWS_EXAMINED:读取的记录数目
CREATED_TMP_DISK_TABLES:创建物理临时表数目
CREATED_TMP_TABLES:创建临时表数目
SELECT_FULL_JOIN:join时,第一个表为全表扫描的数目
SELECT_FULL_RANGE_JOIN:join时,引用表采用range方式扫描的数目
SELECT_RANGE:join时,第一个表采用range方式扫描的数目
SELECT_SCAN:join时,第一个表位全表扫描的数目
SORT_ROWS:排序的记录数目
NESTING_EVENT_ID,NESTING_EVENT_TYPE,保留字段,为NULL。

Connection表
   
 Connection表记录了客户端的信息,主要包括3张表:users,hosts和account表,accounts包含hosts和users的信息。
USER:用户名
HOST:用户的IP

Summary表
   
Summary表聚集了各个维度的统计信息包括表维度,索引维度,会话维度,语句维度和锁维度的统计信息。
(1).wait-summary表
events_waits_summary_global_by_event_name
场景:按等待事件类型聚合,每个事件一条记录。
events_waits_summary_by_instance
场景:按等待事件对象聚合,同一种等待事件,可能有多个实例,每个实例有不同的内存地址,因此
event_name+object_instance_begin唯一确定一条记录。
events_waits_summary_by_thread_by_event_name
场景:按每个线程和事件来统计,thread_id+event_name唯一确定一条记录。
COUNT_STAR:事件计数
SUM_TIMER_WAIT:总的等待时间
MIN_TIMER_WAIT:最小等待时间
MAX_TIMER_WAIT:最大等待时间
AVG_TIMER_WAIT:平均等待时间

(2).stage-summary表
events_stages_summary_by_thread_by_event_name
events_stages_summary_global_by_event_name
与前面类似

(3).statements-summary表
events_statements_summary_by_thread_by_event_name表和events_statements_summary_global_by_event_name表与前面类似。对于events_statements_summary_by_digest表,
FIRST_SEEN_TIMESTAMP:第一个语句执行的时间
LAST_SEEN_TIMESTAMP:最后一个语句执行的时间
场景:用于统计某一段时间内top SQL

(4).file I/O summary表
file_summary_by_event_name [按事件类型统计]
file_summary_by_instance [按具体文件统计]
场景:物理IO维度
FILE_NAME:具体文件名,比如:/u01/my3306/data/tcbuyer_0168/tc_biz_order_2695.ibd
EVENT_NAME:事件名,比如:wait/io/file/innodb/innodb_data_file
COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT
统计IO操作
COUNT_READ,SUM_TIMER_READ,MIN_TIMER_READ,AVG_TIMER_READ,MAX_TIMER_READ,
SUM_NUMBER_OF_BYTES_READ
统计读
COUNT_WRITE,SUM_TIMER_WRITE,MIN_TIMER_WRITE,AVG_TIMER_WRITE,MAX_TIMER_WRITE,
SUM_NUMBER_OF_BYTES_WRITE
统计写
COUNT_MISC,SUM_TIMER_MISC,MIN_TIMER_MISC,AVG_TIMER_MISC,MAX_TIMER_MISC
统计其他IO事件,比如create,delete,open,close等

(5).Table I/O and Lock Wait Summaries-表
table_io_waits_summary_by_table
根据wait/io/table/sql/handler,聚合每个表的I/O操作,[逻辑IO]
COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT
统计IO操作
COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT
统计读
COUNT_WRITE,SUM_TIMER_WRITE,MIN_TIMER_WRITE,AVG_TIMER_WRITE,
MAX_TIMER_WRITE
统计写
COUNT_FETCH,SUM_TIMER_FETCH,MIN_TIMER_FETCH,AVG_TIMER_FETCH,
MAX_TIMER_FETCH
与读相同
COUNT_INSERT,SUM_TIMER_INSERT,MIN_TIMER_INSERT,AVG_TIMER_INSERT,MAX_TIMER_INSERT
INSERT统计,相应的还有DELETE和UPDATE统计。

(6).table_io_waits_summary_by_index_usage
与table_io_waits_summary_by_table类似,按索引维度统计

(7).table_lock_waits_summary_by_table
聚合了表锁等待事件,包括internal lock 和 external lock。
internal lock通过SQL层函数thr_lock调用,OPERATION值为:
read normal
read with shared locks
read high priority
read no insert
write allow write
write concurrent insert
write delayed
write low priority
write normal

external lock则通过接口函数handler::external_lock调用存储引擎层,
OPERATION列的值为:
read external
write external

(8).Connection Summaries表
events_waits_summary_by_account_by_event_name
events_waits_summary_by_user_by_event_name
events_waits_summary_by_host_by_event_name
events_stages_summary_by_account_by_event_name
events_stages_summary_by_user_by_event_name
events_stages_summary_by_host_by_event_name
events_statements_summary_by_account_by_event_name
events_statements_summary_by_user_by_event_name
events_statements_summary_by_host_by_event_name

(9).socket-summaries表
socket_summary_by_instance
socket_summary_by_event_name

其它表
performance_timers: 系统支持的统计时间单位
threads: 监视服务端的当前运行的线程

Performance-Schema(二)
理论篇,performanceschema MySQL
Performance-Schema中总共包含52个表,主要分为几类:Setup表,Instance表,Wait
Event表,Stage Ev…

澳门威斯尼人平台 1

澳门威斯尼人平台 2

罗小波·沃趣科技高级数据库技术专家

上一篇 《事件统计 |
performance_schema全方位介绍》详细介绍了performance_schema的事件统计表,但这些统计数据粒度太粗,仅仅按照事件的5大类别+用户、线程等维度进行分类统计,但有时候我们需要从更细粒度的维度进行分类统计,例如:某个表的IO开销多少、锁开销多少、以及用户连接的一些属性统计信息等。此时就需要查看数据库对象事件统计表与属性统计表了。今天将带领大家一起踏上系列第五篇的征程(全系共7个篇章),本期将为大家全面讲解performance_schema中对象事件统计表与属性统计表。下面,请跟随我们一起开始performance_schema系统的学习之旅吧~

出品:沃趣科技

友情提示:下文中的统计表中大部分字段含义与上一篇
《事件统计 | performance_schema全方位介绍》
中提到的统计表字段含义相同,下文中不再赘述。此外,由于部分统计表中的记录内容过长,限于篇幅会省略部分文本,如有需要请自行安装MySQL
5.7.11以上版本跟随本文进行同步操作查看。

IT从业多年,历任运维工程师、高级运维工程师、运维经理、数据库工程师,曾参与版本发布系统、轻量级监控系统、运维管理平台、数据库管理平台的设计与编写,熟悉MySQL体系结构,Innodb存储引擎,喜好专研开源技术,追求完美。

01

|目
1、什么是performance_schema

数据库对象统计表

2、performance_schema使用快速入门

1.数据库表级别对象等待事件统计

2.1. 检查当前数据库版本是否支持

按照数据库对象名称(库级别对象和表级别对象,如:库名和表名)进行统计的等待事件。按照OBJECT_TYPE、OBJECT_SCHEMA、OBJECT_NAME列进行分组,按照COUNT_STAR、xxx_TIMER_WAIT字段进行统计。包含一张objects_summary_global_by_type表。

2.2. 启用performance_schema

我们先来看看表中记录的统计信息是什么样子的。

2.3. performance_schema表的分类

admin@localhost : performance _schema 11:10:42> select * from
objects_summary _global_by _type where SUM_TIMER_WAIT!=0G;

2.4.
performance_schema简单配置与使用

*************************** 1. row
***************************

|导
很久之前,当我还在尝试着系统地学习performance_schema的时候,通过在网上各种搜索资料进行学习,但很遗憾,学习的效果并不是很明显,很多标称类似
“深入浅出performance_schema”
的文章,基本上都是那种动不动就贴源码的风格,然后深入了之后却出不来了。对系统学习performance_schema的作用甚微。

OBJECT_TYPE: TABLE

现在,很高兴的告诉大家,我们基于 MySQL
官方文档加上我们的验证,整理了一份可以系统学习 performance_schema
的资料分享给大家,为了方便大家阅读,我们整理为了一个系列,一共7篇文章。下面,请跟随我们一起开始performance_schema系统的学习之旅吧。

OBJECT_SCHEMA: xiaoboluo

本文首先,大致介绍了什么是performance_schema?它能做什么?

OBJECT_NAME: test

然后,简单介绍了如何快速上手使用performance_schema的方法;

COUNT_STAR: 56

最后,简单介绍了performance_schema中由哪些表组成,这些表大致的作用是什么。

SUM _TIMER_WAIT: 195829830101250

PS:本系列文章所使用的数据库版本为 MySQL
官方 5.7.17版本

MIN _TIMER_WAIT: 2971125

|1、**什么是performance_schema**

AVG _TIMER_WAIT: 3496961251500

MySQL的performance schema 用于监控MySQL
server在一个较低级别的运行过程中的资源消耗、资源等待等情况,它具有以下特点:

MAX _TIMER_WAIT: 121025235946125

  1. 提供了一种在数据库运行时实时检查server的内部执行情况的方法。performance_schema
    数据库中的表使用performance_schema存储引擎。该数据库主要关注数据库运行过程中的性能相关的数据,与information_schema不同,information_schema主要关注server运行过程中的元数据信息
  2. performance_schema通过监视server的事件来实现监视server内部运行情况,
    “事件”就是server内部活动中所做的任何事情以及对应的时间消耗,利用这些信息来判断server中的相关资源消耗在了哪里?一般来说,事件可以是函数调用、操作系统的等待、SQL语句执行的阶段(如sql语句执行过程中的parsing

    sorting阶段)或者整个SQL语句与SQL语句集合。事件的采集可以方便的提供server中的相关存储引擎对磁盘文件、表I/O、表锁等资源的同步调用信息。
  3. performance_schema中的事件与写入二进制日志中的事件(描述数据修改的events)、事件计划调度程序(这是一种存储程序)的事件不同。performance_schema中的事件记录的是server执行某些活动对某些资源的消耗、耗时、这些活动执行的次数等情况。
  4. performance_schema中的事件只记录在本地server的performance_schema中,其下的这些表中数据发生变化时不会被写入binlog中,也不会通过复制机制被复制到其他server中。
  5. 当前活跃事件、历史事件和事件摘要相关的表中记录的信息。能提供某个事件的执行次数、使用时长。进而可用于分析某个特定线程、特定对象(如mutex或file)相关联的活动。
  6. PERFORMANCE_SCHEMA存储引擎使用server源代码中的“检测点”来实现事件数据的收集。对于performance_schema实现机制本身的代码没有相关的单独线程来检测,这与其他功能(如复制或事件计划程序)不同
  7. 收集的事件数据存储在performance_schema数据库的表中。这些表可以使用SELECT语句查询,也可以使用SQL语句更新performance_schema数据库中的表记录(如动态修改performance_schema的setup_*开头的几个配置表,但要注意:配置表的更改会立即生效,这会影响数据收集)
  8. performance_schema的表中的数据不会持久化存储在磁盘中,而是保存在内存中,一旦服务器重启,这些数据会丢失(包括配置表在内的整个performance_schema下的所有数据)
  9. MySQL支持的所有平台中事件监控功能都可用,但不同平台中用于统计事件时间开销的计时器类型可能会有所差异。

1 row in set (0.00 sec)

performance_schema实现机制遵循以下设计目标:

从表中的记录内容可以看到,按照库xiaoboluo下的表test进行分组,统计了表相关的等待事件调用次数,总计、最小、平均、最大延迟时间信息,利用这些信息,我们可以大致了解InnoDB中表的访问效率排行统计情况,一定程度上反应了对存储引擎接口调用的效率。

  1. 启用performance_schema不会导致server的行为发生变化。例如,它不会改变线程调度机制,不会导致查询执行计划(如EXPLAIN)发生变化
  2. 启用performance_schema之后,server会持续不间断地监测,开销很小。不会导致server不可用
  3. 在该实现机制中没有增加新的关键字或语句,解析器不会变化
  4. 即使performance_schema的监测机制在内部对某事件执行监测失败,也不会影响server正常运行
  5. 如果在开始收集事件数据时碰到有其他线程正在针对这些事件信息进行查询,那么查询会优先执行事件数据的收集,因为事件数据的收集是一个持续不断的过程,而检索(查询)这些事件数据仅仅只是在需要查看的时候才进行检索。也可能某些事件数据永远都不会去检索
  6. 需要很容易地添加新的instruments监测点
  7. instruments(事件采集项)代码版本化:如果instruments的代码发生了变更,旧的instruments代码还可以继续工作。
  8. 注意:MySQL sys
    schema是一组对象(包括相关的视图、存储过程和函数),可以方便地访问performance_schema收集的数据。同时检索的数据可读性也更高(例如:performance_schema中的时间单位是皮秒,经过sys
    schema查询时会转换为可读的us,ms,s,min,hour,day等单位),sys
    schem在5.7.x版本默认安装

2.表I/O等待和锁等待事件统计

|2、performance_schema使用快速入门

与objects_summary_global_by_type
表统计信息类似,表I/O等待和锁等待事件统计信息更为精细,细分了每个表的增删改查的执行次数,总等待时间,最小、最大、平均等待时间,甚至精细到某个索引的增删改查的等待时间,表IO等待和锁等待事件instruments(wait/io/table/sql/handler和wait/lock/table/sql/handler
)默认开启,在setup_consumers表中无具体的对应配置,默认表IO等待和锁等待事件统计表中就会统计相关事件信息。包含如下几张表:

现在,是否觉得上面的介绍内容太过枯燥呢?如果你这么想,那就对了,我当初学习的时候也是这么想的。但现在,对于什么是performance_schema这个问题上,比起更早之前更清晰了呢?如果你还没有打算要放弃阅读本文的话,那么,请跟随我们开始进入到”边走边唱”环节吧!

admin@localhost : performance_schema 06:50:03> show tables like
‘%table%summary%’;

2.1检查当前数据库版本是否支持

+————————————————+

performance_schema被视为存储引擎。如果该引擎可用,则应该在INFORMATION_SCHEMA.ENGINES表或SHOW
ENGINES语句的输出中都可以看到它的SUPPORT值为YES,如下:

| Tables_in_performance_schema (%table%summary%) |

使用
INFORMATION_SCHEMA.ENGINES表来查询你的数据库实例是否支持INFORMATION_SCHEMA引擎

+————————————————+

qogir_env@localhost :
performance_schema 02:41:41>
SELECT * FROM INFORMATION_SCHEMA.ENGINES WHERE ENGINE =’PERFORMANCE_SCHEMA’;

| table_io_waits_summary_by_index_usage |#
按照每个索引进行统计的表I/O等待事件

+——————–+———+——————–+————–+——+————+

| table_io_waits_summary_by_table |#
按照每个表进行统计的表I/O等待事件

| ENGINE |SUPPORT | COMMENT |TRANSACTIONS | XA |SAVEPOINTS |

| table_lock_waits_summary_by_table |#
按照每个表进行统计的表锁等待事件

+——————–+———+——————–+————–+——+————+

+————————————————+

|PERFORMANCE_SCHEMA | YES
|Performance Schema | NO
|NO | NO |

3rows inset ( 0. 00sec)

+——————–+———+——————–+————–+——+————+

我们先来看看表中记录的统计信息是什么样子的。

1row inset (0.00sec)

# table_io_waits_summary_by_index_usage表

使用show命令来查询你的数据库实例是否支持INFORMATION_SCHEMA引擎

admin@localhost : performance _schema 01:55:49> select * from
table_io _waits_summary _by_index _usage where
SUM_TIMER_WAIT!=0G;

qogir_env@localhost :
performance_schema 02:41:54>
show engines;

*************************** 1. row
***************************

+——————–+———+—————————————————————-+————–+——+————+

OBJECT_TYPE: TABLE

| Engine |Support | Comment

OBJECT_SCHEMA: xiaoboluo

|Transactions | XA |Savepoints
|

OBJECT_NAME: test

+——————–+———+—————————————————————-+————–+——+————+

INDEX_NAME: PRIMARY

……

COUNT_STAR: 1

|PERFORMANCE_SCHEMA | YES
|Performance Schema

SUM _TIMER_WAIT: 56688392

| NO |NO | NO |

MIN _TIMER_WAIT: 56688392

……

AVG _TIMER_WAIT: 56688392

9rows inset (0.00sec)

MAX _TIMER_WAIT: 56688392

当我们看到PERFORMANCE_SCHEMA
对应的Support
字段输出为YES时就表示我们当前的数据库版本是支持performance_schema的。但知道我们的实例支持performance_schema引擎就可以使用了吗?NO,很遗憾,performance_schema在5.6及其之前的版本中,默认没有启用,从5.7及其之后的版本才修改为默认启用。现在,我们来看看如何设置performance_schema默认启用吧!

COUNT_READ: 1

2.2. 启用performance_schema

SUM _TIMER_READ: 56688392

从上文中我们已经知道,performance_schema在5.7.x及其以上版本中默认启用(5.6.x及其以下版本默认关闭),如果要显式启用或关闭时,我们需要使用参数performance_schema=ON|OFF设置,并在my.cnf中进行配置:

MIN _TIMER_READ: 56688392

[mysqld]

AVG _TIMER_READ: 56688392

performance_schema= ON#
注意:该参数为只读参数,需要在实例启动之前设置才生效

MAX _TIMER_READ: 56688392

mysqld启动之后,通过如下语句查看performance_schema是否启用生效(值为ON表示performance_schema已初始化成功且可以使用了。如果值为OFF表示在启用performance_schema时发生某些错误。可以查看错误日志进行排查):

……

qogir_env@localhost :
performance_schema 03:13:10>
SHOW VARIABLES LIKE ‘performance_schema’;

1 row in set (0.00 sec)

+——————–+——-+

# table_io_waits_summary_by_table表

| Variable_name |Value |

admin@localhost : performance _schema 01:56:16> select * from
table_io _waits_summary _by_table where SUM _TIMER_WAIT!=0G;

+——————–+——-+

*************************** 1. row
***************************

|performance_schema | ON |

OBJECT_TYPE: TABLE

+——————–+——-+

OBJECT_SCHEMA: xiaoboluo

1row inset (0.00sec)

OBJECT_NAME: test

现在,你可以在performance_schema下使用show
tables语句或者通过查询
INFORMATION_SCHEMA.TABLES表中performance_schema引擎相关的元数据来了解在performance_schema下存在着哪些表:

COUNT_STAR: 1

通过从INFORMATION_SCHEMA.tables表查询有哪些performance_schema引擎的表:

…………

qogir_env@localhost :
performance_schema 03:13:22>
SELECT TABLE_NAME FROM INFORMATION_SCHEMA.TABLES

1 row in set (0.00 sec)

WHERE TABLE_SCHEMA =’performance_schema’andengine=’performance_schema’;

# table_lock_waits_summary_by_table表

+——————————————————+

admin@localhost : performance _schema 01:57:20> select * from
table_lock _waits_summary _by_table where SUM _TIMER_WAIT!=0G;

| TABLE_NAME |

*************************** 1. row
***************************

+——————————————————+

OBJECT_TYPE: TABLE

| accounts |

OBJECT_SCHEMA: xiaoboluo

| cond_instances |

OBJECT_NAME: test

……

…………

| users |

COUNT_READ_NORMAL: 0

| variables_by_thread |

SUM_TIMER_READ_NORMAL: 0

+——————————————————+

MIN_TIMER_READ_NORMAL: 0

87rows inset (0.00sec)

AVG_TIMER_READ_NORMAL: 0

直接在performance_schema库下使用show
tables语句来查看有哪些performance_schema引擎表:

MAX_TIMER_READ_NORMAL: 0

qogir_env@localhost :
performance_schema 03:20:43>
use performance_schema

COUNT _READ_WITH _SHARED_LOCKS: 0

Database changed

SUM _TIMER_READ _WITH_SHARED_LOCKS: 0

qogir_env@localhost : performance_schema 03:21:06> show tables from
performance_schema;

MIN _TIMER_READ _WITH_SHARED_LOCKS: 0

+——————————————————+

AVG _TIMER_READ _WITH_SHARED_LOCKS: 0

| Tables_in_performance_schema
|

MAX _TIMER_READ _WITH_SHARED_LOCKS: 0

+——————————————————+

……

| accounts |

1 row in set (0.00 sec)

| cond_instances |

从上面表中的记录信息我们可以看到,table_io_waits_summary_by_index_usage表和table_io_waits_summary_by_table有着类似的统计列,但table_io_waits_summary_by_table表是包含整个表的增删改查等待事件分类统计,table_io_waits_summary_by_index_usage区分了每个表的索引的增删改查等待事件分类统计,而table_lock_waits_summary_by_table表统计纬度类似,但它是用于统计增删改查对应的锁等待时间,而不是IO等待时间,这些表的分组和统计列含义请大家自行举一反三,这里不再赘述,下面针对这三张表做一些必要的说明:

……

table_io_waits_summary_by_table表:

| users |

该表允许使用TRUNCATE
TABLE语句。只将统计列重置为零,而不是删除行。对该表执行truncate还会隐式truncate
table_io_waits_summary_by_index_usage表

| variables_by_thread |

table_io_waits_summary_by_index_usage表:

+——————————————————+

按照与table_io_waits_summary_by_table的分组列+INDEX_NAME列进行分组,INDEX_NAME有如下几种

87rows inset (0.00sec)

·如果使用到了索引,则这里显示索引的名字,如果为PRIMARY,则表示表I/O使用到了主键索引

现在,我们知道了在 MySQL 5.7.17
版本中,performance_schema
下一共有87张表,那么,这87帐表都是存放什么数据的呢?我们如何使用他们来查询我们想要查看的数据呢?先别着急,我们先来看看这些表是如何分类的。

·如果值为NULL,则表示表I/O没有使用到索引

2.3.
performance_schema表的分类

·如果是插入操作,则无法使用到索引,此时的统计值是按照INDEX_NAME =
NULL计算的

performance_schema库下的表可以按照监视不同的纬度进行了分组,例如:或按照不同数据库对象进行分组,或按照不同的事件类型进行分组,或在按照事件类型分组之后,再进一步按照帐号、主机、程序、线程、用户等,如下:

该表允许使用TRUNCATE
TABLE语句。只将统计列重置为零,而不是删除行。该表执行truncate时也会隐式触发table_io_waits_summary_by_table表的truncate操作。另外使用DDL语句更改索引结构时,会导致该表的所有索引统计信息被重置

按照事件类型分组记录性能事件数据的表

table_lock_waits_summary_by_table表:

语句事件记录表,这些表记录了语句事件信息,当前语句事件表events_statements_current、历史语句事件表events_statements_history和长语句历史事件表events_statements_history_long、以及聚合后的摘要表summary,其中,summary表还可以根据帐号(account),主机(host),程序(program),线程(thread),用户(user)和全局(global)再进行细分)

该表的分组列与table_io_waits_summary_by_table表相同

qogir_env@localhost :
performance_schema 03:51:36>
show tables like ‘events_statement%’;

该表包含有关内部和外部锁的信息:

+—————————————————-+

·内部锁对应SQL层中的锁。是通过调用thr_lock()函数来实现的。(官方手册上说有一个OPERATION列来区分锁类型,该列有效值为:read
normal、read with shared locks、read high priority、read no
insert、write allow write、write concurrent insert、write delayed、write
low priority、write normal。但在该表的定义上并没有看到该字段)

| Tables_in_performance_schema
(%statement%) |

·外部锁对应存储引擎层中的锁。通过调用handler::external_lock()函数来实现。(官方手册上说有一个OPERATION列来区分锁类型,该列有效值为:read
external、write external。但在该表的定义上并没有看到该字段)

+—————————————————-+

该表允许使用TRUNCATE TABLE语句。只将统计列重置为零,而不是删除行。

| events_statements_current |

3.文件I/O事件统计

| events_statements_history |

文件I/O事件统计表只记录等待事件中的IO事件(不包含table和socket子类别),文件I/O事件instruments默认开启,在setup_consumers表中无具体的对应配置。它包含如下两张表:

| events_statements_history_long
|

admin@localhost : performance_schema 06:48:12> show tables like
‘%file_summary%’;

|
events_statements_summary_by_account_by_event_name |

+———————————————–+

| events_statements_summary_by_digest
|

| Tables_in_performance_schema (%file_summary%) |

|
events_statements_summary_by_host_by_event_name |

+———————————————–+

|
events_statements_summary_by_program |

| file_summary_by_event_name |

|
events_statements_summary_by_thread_by_event_name |

| file_summary_by_instance |

|
events_statements_summary_by_user_by_event_name |

+———————————————–+

|
events_statements_summary_global_by_event_name |

2rows inset ( 0. 00sec)

+—————————————————-+

两张表中记录的内容很相近:

11rows inset (0.00sec)

·file_summary_by_event_name:按照每个事件名称进行统计的文件IO等待事件

等待事件记录表,与语句事件类型的相关记录表类似:

·file_summary_by_instance:按照每个文件实例(对应具体的每个磁盘文件,例如:表sbtest1的表空间文件sbtest1.ibd)进行统计的文件IO等待事件

qogir_env@localhost :
performance_schema 03:53:51>
show tables like ‘events_wait%’;

我们先来看看表中记录的统计信息是什么样子的。

+———————————————–+

# file_summary_by_event_name表

| Tables_in_performance_schema
(%wait%) |

admin@localhost : performance _schema 11:00:44> select * from
file_summary _by_event _name where SUM_TIMER _WAIT !=0 and
EVENT_NAME like ‘%innodb%’ limit 1G;

+———————————————–+

*************************** 1. row
***************************

| events_waits_current |

EVENT_NAME: wait/io/file/innodb/innodb_data_file

| events_waits_history |

COUNT_STAR: 802

| events_waits_history_long |

SUM_TIMER_WAIT: 412754363625

|
events_waits_summary_by_account_by_event_name |

MIN_TIMER_WAIT: 0

|
events_waits_summary_by_host_by_event_name |

AVG_TIMER_WAIT: 514656000

| events_waits_summary_by_instance
|

MAX_TIMER_WAIT: 9498247500

|
events_waits_summary_by_thread_by_event_name |

COUNT_READ: 577

|
events_waits_summary_by_user_by_event_name |

SUM_TIMER_READ: 305970952875

|
events_waits_summary_global_by_event_name |

MIN_TIMER_READ: 15213375

+———————————————–+

AVG_TIMER_READ: 530278875

12rows inset (0.01sec)

MAX_TIMER_READ: 9498247500

阶段事件记录表,记录语句执行的阶段事件的表,与语句事件类型的相关记录表类似:

SUM _NUMBER_OF _BYTES_READ: 11567104

qogir_env@localhost :
performance_schema 03:55:07>
show tables like ‘events_stage%’;

……

+————————————————+

1 row in set (0.00 sec)

| Tables_in_performance_schema
(%stage%) |

# file_summary_by_instance表

+————————————————+

admin@localhost : performance _schema 11:01:23> select * from
file_summary _by_instance where SUM _TIMER_WAIT!=0 and EVENT_NAME
like ‘%innodb%’ limit 1G;

| events_stages_current |

*************************** 1. row
***************************

| events_stages_history |

FILE_NAME: /data/mysqldata1/innodb_ts/ibdata1

| events_stages_history_long |

EVENT_NAME: wait/io/file/innodb/innodb_data_file

|
events_stages_summary_by_account_by_event_name |

OBJECT _INSTANCE_BEGIN: 139882156936704

|
events_stages_summary_by_host_by_event_name |

COUNT_STAR: 33

|
events_stages_summary_by_thread_by_event_name |

…………

|
events_stages_summary_by_user_by_event_name |

1 row in set (0.00 sec)

|
events_stages_summary_global_by_event_name |

从上面表中的记录信息我们可以看到:

+————————————————+

·每个文件I/O统计表都有一个或多个分组列,以表明如何统计这些事件信息。这些表中的事件名称来自setup_instruments表中的name字段:

8rows inset (0.00sec)

* file_summary_by_event_name表:按照EVENT_NAME列进行分组 ;

事务事件记录表,记录事务相关的事件的表,与语句事件类型的相关记录表类似:

*
file_summary_by_instance表:有额外的FILE_NAME、OBJECT_INSTANCE_BEGIN列,按照FILE_NAME、EVENT_NAME列进行分组,与file_summary_by_event_name
表相比,file_summary_by_instance表多了FILE_NAME和OBJECT_INSTANCE_BEGIN字段,用于记录具体的磁盘文件相关信息。

qogir_env@localhost :
performance_schema 03:55:30>
show tables like ‘events_transaction%’;

·每个文件I/O事件统计表有如下统计字段:

+——————————————————+

*
COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT:这些列统计所有I/O操作数量和操作时间

| Tables_in_performance_schema
(%transaction%) |

*
COUNT_READ,SUM_TIMER_READ,MIN_TIMER_READ,AVG_TIMER_READ,MAX_TIMER_READ,SUM_NUMBER_OF_BYTES_READ:这些列统计了所有文件读取操作,包括FGETS,FGETC,FREAD和READ系统调用,还包含了这些I/O操作的数据字节数

+——————————————————+

*
COUNT_WRITE,SUM_TIMER_WRITE,MIN_TIMER_WRITE,AVG_TIMER_WRITE,MAX_TIMER_WRITE,SUM_NUMBER_OF_BYTES_WRITE:这些列统计了所有文件写操作,包括FPUTS,FPUTC,FPRINTF,VFPRINTF,FWRITE和PWRITE系统调用,还包含了这些I/O操作的数据字节数

| events_transactions_current |

*
COUNT_MISC,SUM_TIMER_MISC,MIN_TIMER_MISC,AVG_TIMER_MISC,MAX_TIMER_MISC:这些列统计了所有其他文件I/O操作,包括CREATE,DELETE,OPEN,CLOSE,STREAM_OPEN,STREAM_CLOSE,SEEK,TELL,FLUSH,STAT,FSTAT,CHSIZE,RENAME和SYNC系统调用。注意:这些文件I/O操作没有字节计数信息。

| events_transactions_history |

文件I/O事件统计表允许使用TRUNCATE
TABLE语句。但只将统计列重置为零,而不是删除行。

| events_transactions_history_long
|

PS:MySQL
server使用几种缓存技术通过缓存从文件中读取的信息来避免文件I/O操作。当然,如果内存不够时或者内存竞争比较大时可能导致查询效率低下,这个时候您可能需要通过刷新缓存或者重启server来让其数据通过文件I/O返回而不是通过缓存返回。

|
events_transactions_summary_by_account_by_event_name |

4.套接字事件统计

|
events_transactions_summary_by_host_by_event_name |

套接字事件统计了套接字的读写调用次数和发送接收字节计数信息,socket事件instruments默认关闭,在setup_consumers表中无具体的对应配置,包含如下两张表:

|
events_transactions_summary_by_thread_by_event_name |

·socket_summary_by_instance:针对每个socket实例的所有 socket
I/O操作,这些socket操作相关的操作次数、时间和发送接收字节信息由wait/io/socket/*
instruments产生。但当连接中断时,在该表中对应socket连接的信息行将被删除(这里的socket是指的当前活跃的连接创建的socket实例)

|
events_transactions_summary_by_user_by_event_name |

·socket_summary_by_event_name:针对每个socket I/O
instruments,这些socket操作相关的操作次数、时间和发送接收字节信息由wait/io/socket/*
instruments产生(这里的socket是指的当前活跃的连接创建的socket实例)

|
events_transactions_summary_global_by_event_name |

可通过如下语句查看:

+——————————————————+

admin@localhost : performance_schema 06:53:42> show tables like
‘%socket%summary%’;

8rows inset (0.00sec)

+————————————————-+

监视文件系统层调用的表:

| Tables_in_performance_schema (%socket%summary%) |

qogir_env@localhost :
performance_schema 03:58:27>
show tables like ‘%file%’;

+————————————————-+

+—————————————+

| socket_summary_by_event_name |

| Tables_in_performance_schema
(%file%) |

| socket_summary_by_instance |

+—————————————+

+————————————————-+

| file_instances |

2rows inset ( 0. 00sec)

| file_summary_by_event_name |

我们先来看看表中记录的统计信息是什么样子的。

| file_summary_by_instance |

# socket_summary_by_event_name表

+—————————————+

root@localhost : performance _schema 04:44:00> select * from
socket_summary _by_event_nameG;

3rows inset (0.01sec)

*************************** 1. row
***************************

监视内存使用的表:

EVENT_NAME: wait/io/socket/sql/server_tcpip_socket

qogir_env@localhost :
performance_schema 03:58:38>
show tables like ‘%memory%’;

COUNT_STAR: 2560

+—————————————–+

SUM_TIMER_WAIT: 62379854922

| Tables_in_performance_schema
(%memory%) |

MIN_TIMER_WAIT: 1905016

+—————————————–+

AVG_TIMER_WAIT: 24366870

|
memory_summary_by_account_by_event_name |

MAX_TIMER_WAIT: 18446696808701862260

|
memory_summary_by_host_by_event_name |

COUNT_READ: 0

|
memory_summary_by_thread_by_event_name |

SUM_TIMER_READ: 0

|
memory_summary_by_user_by_event_name |

MIN_TIMER_READ: 0

|
memory_summary_global_by_event_name |

AVG_TIMER_READ: 0

+—————————————–+

MAX_TIMER_READ: 0

5rows inset (0.01sec)

SUM _NUMBER_OF _BYTES_READ: 0

动态对performance_schema进行配置的配置表:

……

root@localhost : performance_schema
12:18:46> show tables like
‘%setup%’;

*************************** 2. row
***************************

+—————————————-+

EVENT_NAME: wait/io/socket/sql/server_unix_socket

| Tables_in_performance_schema
(%setup%) |

COUNT_STAR: 24

+—————————————-+

……

| setup_actors |

*************************** 3. row
***************************

| setup_consumers |

EVENT_NAME: wait/io/socket/sql/client_connection

| setup_instruments |

COUNT_STAR: 213055844

| setup_objects |

……

| setup_timers |

3 rows in set (0.00 sec)

+—————————————-+

# socket_summary_by_instance表

5rows inset (0.00sec)

root@localhost : performance _schema 05:11:45> select * from
socket_summary _by_instance where COUNT_STAR!=0G;

现在,我们已经大概知道了performance_schema中的主要表的分类,但,如何使用他们来为我们提供需要的性能事件数据呢?下面,我们介绍如何通过performance_schema下的配置表来配置与使用performance_schema。

*************************** 1. row
***************************

2.4.
performance_schema简单配置与使用

EVENT_NAME: wait/io/socket/sql/server_tcpip_socket

数据库刚刚初始化并启动时,并非所有instruments(事件采集项,在采集项的配置表中每一项都有一个开关字段,或为YES,或为NO)和consumers(与采集项类似,也有一个对应的事件类型保存表配置项,为YES就表示对应的表保存性能数据,为NO就表示对应的表不保存性能数据)都启用了,所以默认不会收集所有的事件,可能你需要检测的事件并没有打开,需要进行设置,可以使用如下两个语句打开对应的instruments和consumers(行计数可能会因MySQL版本而异),例如,我们以配置监测等待事件数据为例进行说明:

OBJECT _INSTANCE_BEGIN: 2655350784

打开等待事件的采集器配置项开关,需要修改setup_instruments
配置表中对应的采集器配置项

……

qogir_env@localhost: performance_schema 03:34:40> UPDATE setup_instruments SET
ENABLED = ‘YES’, TIMED = ‘YES’where name like ‘wait%’;;

*************************** 2. row
***************************

QueryOK, 0 rowsaffected(0.00sec)

EVENT_NAME: wait/io/socket/sql/server_unix_socket

Rowsmatched: 323 Changed: 0 Warnings: 0

OBJECT _INSTANCE_BEGIN: 2655351104

打开等待事件的保存表配置开关,修改修改setup_consumers
配置表中对应的配置i向

……

qogir_env@localhost: performance_schema 04:23:40> UPDATE setup_consumers SET
ENABLED = ‘YES’where name like
‘%wait%’;

*************************** 3. row
***************************

QueryOK, 3 rowsaffected(0.04sec)

EVENT_NAME: wait/io/socket/sql/client_connection

Rowsmatched: 3 Changed: 3 Warnings: 0

OBJECT _INSTANCE_BEGIN: 2658003840

配置好之后,我们就可以查看server当前正在做什么,可以通过查询events_waits_current表来得知,该表中每个线程只包含一行数据,用于显示每个线程的最新监视事件(正在做的事情):

……

qogir_env@localhost : performance_schema
04:23:52> SELECT * FROM events_waits_current limit 1G

*************************** 4. row
***************************

相关文章