performance_schema全方位介绍,事件计算【金沙国际

2019-07-19 08:28栏目:金沙国际官网

* COUNT_MISC,SUM_TIMER_MISC,MIN_TIMER_MISC,AVG_TIMER_MISC,MAX_TIMER_MISC:这些列统计了所有其他文件I/O操作,包括CREATE,DELETE,OPEN,CLOSE,STREAM_OPEN,STREAM_CLOSE,SEEK,TELL,FLUSH,STAT,FSTAT,CHSIZE,RENAME和SYNC系统调用。注意:这些文件I/O操作没有字节计数信息。

SUM _TIMER_WAIT: 0

MySQL Performance-Schema(二) 理论篇,performanceschema

     MySQL Performance-Schema中总共包含52个表,主要分为几类:Setup表,Instance表,Wait Event表,Stage Event表Statement Event表,Connection表和Summary表。上一篇文章已经着重讲了Setup表,这篇文章将会分别就每种类型的表做详细的描述。

Instance表
     instance中主要包含了5张表:cond_instances,file_instances,mutex_instances,rwlock_instances和socket_instances。
(1)cond_instances:条件等待对象实例
表中记录了系统中使用的条件变量的对象,OBJECT_INSTANCE_BEGIN为对象的内存地址。比如线程池的timer_cond实例的name为:wait/synch/cond/threadpool/timer_cond

(2)file_instances:文件实例
表中记录了系统中打开了文件的对象,包括ibdata文件,redo文件,binlog文件,用户的表文件等,比如redo日志文件:/u01/my3306/data/ib_logfile0。open_count显示当前文件打开的数目,如果重来没有打开过,不会出现在表中。

(3)mutex_instances:互斥同步对象实例
表中记录了系统中使用互斥量对象的所有记录,其中name为:wait/synch/mutex/*。比如打开文件的互斥量:wait/synch/mutex/mysys/THR_LOCK_open。LOCKED_BY_THREAD_ID显示哪个线程正持有mutex,若没有线程持有,则为NULL。

(4)rwlock_instances: 读写锁同步对象实例
表中记录了系统中使用读写锁对象的所有记录,其中name为 wait/synch/rwlock/*。WRITE_LOCKED_BY_THREAD_ID为正在持有该对象的thread_id,若没有线程持有,则为NULL,READ_LOCKED_BY_COUNT为记录了同时有多少个读者持有读锁。通过 events_waits_current 表可以知道,哪个线程在等待锁;通过rwlock_instances知道哪个线程持有锁。rwlock_instances的缺陷是,只能记录持有写锁的线程,对于读锁则无能为力。

(5)socket_instances:活跃会话对象实例
表中记录了thread_id,socket_id,ip和port,其它表可以通过thread_id与socket_instance进行关联,获取IP-PORT信息,能够与应用对接起来。
event_name主要包含3类:
wait/io/socket/sql/server_unix_socket,服务端unix监听socket
wait/io/socket/sql/server_tcpip_socket,服务端tcp监听socket
wait/io/socket/sql/client_connection,客户端socket

Wait Event表
      Wait表主要包含3个表,events_waits_current,events_waits_history和events_waits_history_long,通过thread_id event_id可以唯一确定一条记录。current表记录了当前线程等待的事件,history表记录了每个线程最近等待的10个事件,而history_long表则记录了最近所有线程产生的10000个事件,这里的10和10000都是可以配置的。这三个表表结构相同,history和history_long表数据都来源于current表。current表和history表中可能会有重复事件,并且history表中的事件都是完成了的,没有结束的事件不会加入到history表中。
THREAD_ID:线程ID
EVENT_ID:当前线程的事件ID,和THREAD_ID组成一个Primary Key。
END_EVENT_ID:当事件开始时,这一列被设置为NULL。当事件结束时,再更新为当前的事件ID。
SOURCE:该事件产生时的源码文件
TIMER_START, TIMER_END, TIMER_WAIT:事件开始/结束和等待的时间,单位为皮秒(picoseconds)

OBJECT_SCHEMA, OBJECT_NAME, OBJECT_TYPE视情况而定
对于同步对象(cond, mutex, rwlock),这个3个值均为NULL
对于文件IO对象,OBJECT_SCHEMA为NULL,OBJECT_NAME为文件名,OBJECT_TYPE为FILE
对于SOCKET对象,OBJECT_NAME为该socket的IP:SOCK值
对于表I/O对象,OBJECT_SCHEMA是表的SCHEMA名,OBJECT_NAME是表名,OBJECT_TYPE为TABLE或者TEMPORARY TABLE
NESTING_EVENT_ID:该事件对应的父事件ID
NESTING_EVENT_TYPE:父事件类型(STATEMENT, STAGE, WAIT)
OPERATION:操作类型(lock, read, write)

Stage Event表 

       Stage表主要包含3个表,events_stages_current,events_stages_history和events_stages_history_long,通过thread_id event_id可以唯一确定一条记录。表中记录了当前线程所处的执行阶段,由于可以知道每个阶段的执行时间,因此通过stage表可以得到SQL在每个阶段消耗的时间。

THREAD_ID:线程ID
EVENT_ID:事件ID
END_EVENT_ID:刚结束的事件ID
SOURCE:源码位置
TIMER_START, TIMER_END, TIMER_WAIT:事件开始/结束和等待的时间,单位为皮秒(picoseconds)
NESTING_EVENT_ID:该事件对应的父事件ID
NESTING_EVENT_TYPE:父事件类型(STATEMENT, STAGE, WAIT)

Statement Event表
      Statement表主要包含3个表,events_statements_current,events_statements_history和events_statements_history_long。通过thread_id event_id可以唯一确定一条记录。Statments表只记录最顶层的请求,SQL语句或是COMMAND,每条语句一行,对于嵌套的子查询或者存储过程不会单独列出。event_name形式为statement/sql/*,或statement/com/*
SQL_TEXT:记录SQL语句
DIGEST:对SQL_TEXT做MD5产生的32位字符串。如果为consumer表中没有打开statement_digest选项,则为NULL。
DIGEST_TEXT:将语句中值部分用问号代替,用于SQL语句归类。如果为consumer表中没有打开statement_digest选项,则为NULL。
CURRENT_SCHEMA:默认的数据库名
OBJECT_SCHEMA,OBJECT_NAME,OBJECT_TYPE:保留字段,全部为NULL
ROWS_AFFECTED:影响的数目
ROWS_SENT:返回的记录数
ROWS_EXAMINED:读取的记录数目
CREATED_TMP_DISK_TABLES:创建物理临时表数目
CREATED_TMP_TABLES:创建临时表数目
SELECT_FULL_JOIN:join时,第一个表为全表扫描的数目
SELECT_FULL_RANGE_JOIN:join时,引用表采用range方式扫描的数目
SELECT_RANGE:join时,第一个表采用range方式扫描的数目
SELECT_SCAN:join时,第一个表位全表扫描的数目
SORT_ROWS:排序的记录数目
NESTING_EVENT_ID,NESTING_EVENT_TYPE,保留字段,为NULL。

Connection表
     Connection表记录了客户端的信息,主要包括3张表:users,hosts和account表,accounts包含hosts和users的信息。
USER:用户名
HOST:用户的IP

Summary表
    Summary表聚集了各个维度的统计信息包括表维度,索引维度,会话维度,语句维度和锁维度的统计信息。
(1).wait-summary表
events_waits_summary_global_by_event_name
场景:按等待事件类型聚合,每个事件一条记录。
events_waits_summary_by_instance
场景:按等待事件对象聚合,同一种等待事件,可能有多个实例,每个实例有不同的内存地址,因此
event_name object_instance_begin唯一确定一条记录。
events_waits_summary_by_thread_by_event_name
场景:按每个线程和事件来统计,thread_id event_name唯一确定一条记录。
COUNT_STAR:事件计数
SUM_TIMER_WAIT:总的等待时间
MIN_TIMER_WAIT:最小等待时间
MAX_TIMER_WAIT:最大等待时间
AVG_TIMER_WAIT:平均等待时间

(2).stage-summary表
events_stages_summary_by_thread_by_event_name
events_stages_summary_global_by_event_name
与前面类似

(3).statements-summary表
events_statements_summary_by_thread_by_event_name表和events_statements_summary_global_by_event_name表与前面类似。对于events_statements_summary_by_digest表,
FIRST_SEEN_TIMESTAMP:第一个语句执行的时间
LAST_SEEN_TIMESTAMP:最后一个语句执行的时间
场景:用于统计某一段时间内top SQL

(4).file I/O summary表
file_summary_by_event_name [按事件类型统计]
file_summary_by_instance [按具体文件统计]
场景:物理IO维度
FILE_NAME:具体文件名,比如:/u01/my3306/data/tcbuyer_0168/tc_biz_order_2695.ibd
EVENT_NAME:事件名,比如:wait/io/file/innodb/innodb_data_file
COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT
统计IO操作
COUNT_READ,SUM_TIMER_READ,MIN_TIMER_READ,AVG_TIMER_READ,MAX_TIMER_READ, SUM_NUMBER_OF_BYTES_READ
统计读
COUNT_WRITE,SUM_TIMER_WRITE,MIN_TIMER_WRITE,AVG_TIMER_WRITE,MAX_TIMER_WRITE, SUM_NUMBER_OF_BYTES_WRITE
统计写
COUNT_MISC,SUM_TIMER_MISC,MIN_TIMER_MISC,AVG_TIMER_MISC,MAX_TIMER_MISC
统计其他IO事件,比如create,delete,open,close等

(5).Table I/O and Lock Wait Summaries-表
table_io_waits_summary_by_table
根据wait/io/table/sql/handler,聚合每个表的I/O操作,[逻辑IO]
COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT
统计IO操作
COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT
统计读
COUNT_WRITE,SUM_TIMER_WRITE,MIN_TIMER_WRITE,AVG_TIMER_WRITE, MAX_TIMER_WRITE
统计写
COUNT_FETCH,SUM_TIMER_FETCH,MIN_TIMER_FETCH,AVG_TIMER_FETCH, MAX_TIMER_FETCH
与读相同
COUNT_INSERT,SUM_TIMER_INSERT,MIN_TIMER_INSERT,AVG_TIMER_INSERT,MAX_TIMER_INSERT
INSERT统计,相应的还有DELETE和UPDATE统计。

(6).table_io_waits_summary_by_index_usage
与table_io_waits_summary_by_table类似,按索引维度统计

(7).table_lock_waits_summary_by_table
聚合了表锁等待事件,包括internal lock 和 external lock。
internal lock通过SQL层函数thr_lock调用,OPERATION值为:
read normal
read with shared locks
read high priority
read no insert
write allow write
write concurrent insert
write delayed
write low priority
write normal

external lock则通过接口函数handler::external_lock调用存储引擎层,
OPERATION列的值为:
read external
write external

(8).Connection Summaries表
events_waits_summary_by_account_by_event_name
events_waits_summary_by_user_by_event_name
events_waits_summary_by_host_by_event_name
events_stages_summary_by_account_by_event_name
events_stages_summary_by_user_by_event_name
events_stages_summary_by_host_by_event_name
events_statements_summary_by_account_by_event_name
events_statements_summary_by_user_by_event_name
events_statements_summary_by_host_by_event_name

(9).socket-summaries表
socket_summary_by_instance
socket_summary_by_event_name

其它表
performance_timers: 系统支持的统计时间单位
threads: 监视服务端的当前运行的线程

Performance-Schema(二) 理论篇,performanceschema MySQL Performance-Schema中总共包含52个表,主要分为几类:Setup表,Instance表,Wait Event表,Stage Ev...

·TOTAL_CONNECTIONS:某帐号的总连接数(新增加一个连接累计一个,不会像当前连接数那样连接断开会减少)。

# events_waits_summary_by_host_by_event_name表

MAX_TIMER_READ: 9498247500

EVENT_NAME: statement/sql/select

COUNT_STAR: 802

| Tables_in_performance_schema (%events_waits_summary%) |

(1)metadata_locks表

我们先来看看这些表中记录的统计信息是什么样子的。

* 如果log_error_verbosity系统变量设置值大于1,则performance_schema还会将错误信息写入错误日志:

*************************** 1. row ***************************

从上面表中的记录信息我们可以看到:

MIN _TIMER_READ_WRITE: 87193000

|4| _platform |x86_64 | 4 |

1 row in set (0.01 sec)

OBJECT_NAME: test

1 row in set (0.00 sec)

·PORT:TCP/IP端口号,取值范围为0〜65535;

COUNT_STAR: 0

* COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT:这些列统计所有I/O操作数量和操作时间 ;

THREAD_ID: 1

------------- --------------- ------------- ----------------------- ----------------- ---------------- --------------- ---------------

MAX _TIMER_WAIT: 0

metadata_locks表是只读的,无法更新。默认保留行数会自动调整,如果要配置该表大小,可以在server启动之前设置系统变量performance_schema_max_metadata_locks的值。

root@localhost : performance _schema 11:53:24> select * from memory_summary _by_account _by_event _name where COUNT_ALLOC!=0 limit 1G

当在server中同时执行的两个线程(例如,同时执行查询的两个用户会话)需要访问相同的资源(例如:文件、缓冲区或某些数据)时,这两个线程相互竞争,因此第一个成功获取到互斥体的查询将会阻塞其他会话的查询,直到成功获取到互斥体的会话执行完成并释放掉这个互斥体,其他会话的查询才能够被执行。

AVG _TIMER_WAIT: 0

1 rows in set (0.00 sec)

USER: root

rwlock_instances表字段含义如下:

SUM _SELECT_FULL _RANGE_JOIN: 0

------- --------------------- -------------------

| 阶段事件统计表

TIMER_PREPARE: 896167000

events_statements_summary_by_digest表有自己额外的统计列:

·CURRENT_CONNECTIONS:某帐号的当前连接数;

......

......

| events_waits_summary_by_host_by_event_name |

* _pid:客户端进程ID

AVG _TIMER_WAIT: 0

[Warning] Connection attributes oflength N were truncated

COUNT_STAR: 59

·如果是插入操作,则无法使用到索引,此时的统计值是按照INDEX_NAME = NULL计算的

root@localhost : performance _schema 12:34:43> select * from events_statements _summary_by_programG;

OBJECT _INSTANCE_BEGIN: 2658004160

root@localhost : performance _schema 11:08:53> select * from events_waits _summary_global _by_event_name limit 1G

AVG _TIMER_WAIT: 56688392

MAX _TIMER_READ_ONLY: 57571000

- END -

root@localhost : performance _schema 11:04:31> select * from events_statements _summary_global _by_event_name limit 1G

cond_instances表字段含义如下:

* COUNT_ALLOC,COUNT_FREE:对内存分配和释放内存函数的调用总次数

该表包含有关内部和外部锁的信息:

EVENT_NAME: transaction

mutex_instances表不允许使用TRUNCATE TABLE语句。

admin@localhost : performance_schema 06:23:02> show tables like '%events_stages_summary%';

MIN _TIMER_WAIT: 2971125

| events_statements_summary_by_digest |

* _os:操作系统类型(例如Linux,Win64)

HOST: NULL

(4)rwlock_instances表

原标题:事件统计 | performance_schema全方位介绍(四)

| NULL |41| 45 |

* 读写事务通常比只读事务占用更多资源,因此事务统计表包含了用于读写和只读事务的单独统计列

6 rows inset (0.00 sec)

COUNT_ALLOC: 193

PS:什么是prepare语句?prepare语句实际上就是一个预编译语句,先把SQL语句进行编译,且可以设定参数占位符(例如:?符号),然后调用时通过用户变量传入具体的参数值(叫做变量绑定),如果一个语句需要多次执行而仅仅只是where条件不同,那么使用prepare语句可以大大减少硬解析的开销,prepare语句有三个步骤,预编译prepare语句,执行prepare语句,释放销毁prepare语句,prepare语句支持两种协议,前面已经提到过了,binary协议一般是提供给应用程序的mysql c api接口方式访问,而文本协议提供给通过客户端连接到mysql server的方式访问,下面以文本协议的方式访问进行演示说明:

从上面表中的示例记录信息中,我们可以看到,同样与等待事件类似,按照用户、主机、用户 主机、线程等纬度进行分组与统计的列,这些列的含义与等待事件类似,这里不再赘述,但对于事务统计事件,针对读写事务和只读事务还单独做了统计(xx_READ_WRITE和xx_READ_ONLY列,只读事务需要设置只读事务变量transaction_read_only=on才会进行统计)。

MAX_TIMER_WAIT: 18446696808701862260

MAX_TIMER_WAIT: 80968744000

在服务器端面,会对连接属性数据进行长度检查:

root@localhost : performance _schema 01:27:32> select * from events_transactions _summary_global _by_event _name where SUM_TIMER_WAIT!=0G

* 复制slave连接的program_name属性值被定义为mysqld、定义了_client_role属性,值为binary_log_listener、_client_replication_channel_name属性,值为通道名称字符串

# events_statements_summary_by_account_by_event_name表

* _runtime_vendor:Java运行环境(JRE)供应商名称

COUNT_STAR: 3

socket_instances表字段含义如下:

SUM _NUMBER_OF _BYTES_FREE: 3296

------- ------------- --------------------- -------------------

每个内存统计表都有如下统计列:

·cond_instances:wait sync相关的condition对象实例;

......

*************************** 3. row ***************************

MAX _TIMER_WAIT: 0

OBJECT _INSTANCE_BEGIN: 2655350784

罗小波·沃趣科技高级数据库技术专家

*************************** 1. row ***************************

* LOW_NUMBER_OF_BYTES_USED和HIGH_NUMBER_OF_BYTES_USED将重置为CURRENT_NUMBER_OF_BYTES_USED列值

------------------------------------ -------------------------------------- ------------

OBJECT_SCHEMA: sys

与objects_summary_global_by_type 表统计信息类似,表I/O等待和锁等待事件统计信息更为精细,细分了每个表的增删改查的执行次数,总等待时间,最小、最大、平均等待时间,甚至精细到某个索引的增删改查的等待时间,表IO等待和锁等待事件instruments(wait/io/table/sql/handler和wait/lock/table/sql/handler )默认开启,在setup_consumers表中无具体的对应配置,默认表IO等待和锁等待事件统计表中就会统计相关事件信息。包含如下几张表:

| events_waits_summary_by_account_by_event_name |

| wait/io/socket/sql/client_connection |110667840 | 45 |51| ::ffff:10.10.20.15 |56842| ACTIVE |

--------------------------------------------------------------

·OBJECT_INSTANCE_BEGIN:mutex instruments实例的内存地址;

root@localhost : performance _schema 01:25:27> select * from events_transactions _summary_by _thread_by _event_name where SUM _TIMER_WAIT!=0G

·table_handles:表锁的持有和请求记录。

EVENT_NAME: transaction

* FEDERATED存储引擎连接的program_name属性值被定义为mysqld、定义了_client_role属性,值为federated_storage

# events_stages_summary_by_thread_by_event_name表

SUM_TIMER_READ: 305970952875

# memory_summary_global_by_event_name表

1row inset ( 0. 00sec)

当某给定对象被执行时,其对应的统计信息将记录在events_statements_summary_by_program表中并进行统计。

table_handles表不允许使用TRUNCATE TABLE语句。

*************************** 1. row ***************************

2.表I/O等待和锁等待事件统计

------------------------------------------------------------

-------------------------------------- ----------------------- ---------------------

| Tables_in_performance_schema (%prepare%) |

·accounts:按照user@host的形式来对每个客户端的连接进行统计;

# events_statements_summary_by_program表(需要调用了存储过程或函数之后才会有数据)

需要持有互斥体的工作负载可以被认为是处于一个关键位置的工作,多个查询可能需要以序列化的方式(一次一个串行)执行这个关键部分,但这可能是一个潜在的性能瓶颈。

LOW_COUNT_USED: 0

performance_schema通过table_handles表记录表锁信息,以对当前每个打开的表所持有的表锁进行追踪记录。table_handles输出表锁instruments采集的内容。这些信息显示server中已打开了哪些表,锁定方式是什么以及被哪个会话持有。

SUM _TIMER_WAIT: 0

------------------------------------------------------- ----------------------- --------------------------- ----------------------

CURRENT_COUNT_USED: 0

MIN_TIMER_READ: 15213375

COUNT_ALLOC: 216

* mysqlbinlog定义了_client_role属性,值为binary_log_listener

root@localhost : performance _schema 11:07:14> select * from events_waits _summary_by _host_by _event_name limit 1G

责任编辑:

| events_stages_summary_by_thread_by_event_name |

·socket_summary_by_event_name:针对每个socket I/O instruments,这些socket操作相关的操作次数、时间和发送接收字节信息由wait/io/socket/* instruments产生(这里的socket是指的当前活跃的连接创建的socket实例)

对于内存统计表中的低水位估算值,在memory_summary_global_by_event_name表中如果内存所有权在线程之间传输,则该估算值可能为负数

---------------------------------------- ----------------------- ----------- ----------- -------------------- ------- --------

* COUNT_FREE:增加1

·OBJECT_INSTANCE_BEGIN:instruments对象的内存地址;

*************************** 1. row ***************************

3 rows in set (0.00 sec)

HOST: localhost

·file_summary_by_instance:按照每个文件实例(对应具体的每个磁盘文件,例如:表sbtest1的表空间文件sbtest1.ibd)进行统计的文件IO等待事件

EVENT_NAME: stage/sql/After create

·OBJECT_INSTANCE_BEGIN:instruments对象的内存地址;

prepared_statements_instances:按照每个prepare语句实例聚合的统计信息

·USER:某个连接的用户名,如果是一个内部线程创建的连接,或者是无法验证的用户创建的连接,则该字段为NULL;

# memory_summary_by_user_by_event_name表

·setup_instruments表列出了instruments名称,这些互斥体都带有wait/synch/mutex/前缀;

COUNT_STAR: 7

连接属性记录在如下两张表中:

| events_stages_summary_by_account_by_event_name |

OBJECT_TYPE: TABLE

PS:对这些表使用truncate语句,影响与等待事件类似。

·READ_LOCKED_BY_COUNT:当一个线程在共享(读)模式下持有一个rwlock时,READ_LOCKED_BY_COUNT列值增加1,所以该列只是一个计数器,不能直接用于查找是哪个线程持有该rwlock,但它可以用来查看是否存在一个关于rwlock的读争用以及查看当前有多少个读模式线程处于活跃状态。

EVENT_NAME: stage/sql/After create

| NAME |OBJECT_INSTANCE_BEGIN | WRITE_LOCKED_BY_THREAD_ID |READ_LOCKED_BY_COUNT |

SUM _TIMER_WAIT: 0

连接信息表accounts中的user和host字段含义与mysql系统数据库中的MySQL grant表(user表)中的字段含义类似。

责任编辑:

OBJECT_SCHEMA: xiaoboluo

我们先来看看这些表中记录的统计信息是什么样子的。

# socket_summary_by_instance表

当server中的某线程执行了内存分配操作时,按照如下规则进行检测与聚合:

1row inset ( 0. 00sec)

1 row in set (0.00 sec)

AVG _TIMER_READ: 56688392

* 通常,truncate操作会重置统计信息的基准数据(即清空之前的数据),但不会修改当前server的内存分配等状态。也就是说,truncate内存统计表不会释放已分配内存

套接字统计表允许使用TRUNCATE TABLE语句(除events_statements_summary_by_digest之外),只将统计列重置为零,而不是删除行。

THREAD_ID: 37

*************************** 2. row ***************************

SUM _TIMER_WAIT: 0

COUNT_READ: 0

AVG _TIMER_WAIT: 0

EVENT_金沙国际官网,NAME: wait/io/socket/sql/server_unix_socket

--------------------------------------------------------

---------------------------------------- ----------------------- ----------- ----------- -------------------- ------- --------

| memory_summary_by_host_by_event_name |

LOCK_TYPE: SHARED_READ

MIN _TIMER_WAIT: 0

table_io_waits_summary_by_table表:

EVENT_NAME: memory/innodb/fil0fil

OPEN_COUNT:文件当前已打开句柄的计数。如果文件打开然后关闭,则打开1次,但OPEN_COUNT列将加一然后减一,因为OPEN_COUNT列只统计当前已打开的文件句柄数,已关闭的文件句柄会从中减去。要列出server中当前打开的所有文件信息,可以使用where WHERE OPEN_COUNT> 0子句进行查看。

MAX _TIMER_READ_WRITE: 2427645000

(2)table_handles表

root@localhost : performance _schema 11:08:23> select * from events_waits _summary_by _thread_by _event_name limit 1G

COUNT_STAR: 1

# events_waits_summary_by_thread_by_event_name表

root@localhost : performance _schema 05:11:45> select * from socket_summary _by_instance where COUNT_STAR!=0G;

EVENT _NAME: wait/synch/mutex/sql/TC_LOG _MMAP::LOCK_tc

· OBJECT_INSTANCE_BEGIN:instruments condition的内存地址;

AVG _TIMER_WAIT: 0

* _runtime_version:Java运行环境(JRE)版本

USER: root

·当线程成功锁定(持有)互斥体时:

| events_stages_summary_by_user_by_event_name |

·当互斥体被销毁时,从mutex_instances表中删除相应的互斥体行。

对于较高级别的聚合(全局,按帐户,按用户,按主机)统计表中,低水位和高水位适用于如下规则 :

·INTERNAL_LOCK:在SQL级别使用的表锁。有效值为:READ、READ WITH SHARED LOCKS、READ HIGH PRIORITY、READ NO INSERT、WRITE ALLOW WRITE、WRITE CONCURRENT INSERT、WRITE LOW PRIORITY、WRITE。有关这些锁类型的详细信息,请参阅include/thr_lock.h源文件;

| events_waits_summary_by_instance |

admin@localhost : performance_schema 09 :50:01> select * from users;

# events_stages_summary_global_by_event_name表

* _thread:客户端线程ID(仅适用于Windows)

DIGEST: 4fb483fe710f27d1d06f83573c5ce11c

SUM_ROWS_SENT: 0

Rows matched: 377 Changed: 377 Warnings: 0

我们先来看看表中记录的统计信息是什么样子的。

*************************** 1. row ***************************

·NAME:与rwlock关联的instruments名称;

# memory_summary_by_host_by_event_name表

3.文件I/O事件统计

--------------------------------------------------------

·SQL_TEXT:prepare的语句文本,带“?”的表示是占位符标记,后续execute语句可以对该标记进行传参。

USER: NULL

| file_summary_by_instance |

COUNT_STAR: 7

每个套接字统计表都包含如下统计列:

HIGH _NUMBER_OF _BYTES_USED: 32

......

| Tables_in_performance_schema (%events_stages_summary%) |

我们先来看看表中记录的统计信息是什么样子的。

对于每个线程的统计信息,适用以下规则。

instance表记录了哪些类型的对象被检测。这些表中记录了事件名称(提供收集功能的instruments名称)及其一些解释性的状态信息(例如:file_instances表中的FILE_NAME文件名称和OPEN_COUNT文件打开次数),instance表主要有如下几个:

1 row in set (0.00 sec)

(1)cond_instances表

HOST: localhost

· 当行信息中CURRENT_CONNECTIONS 字段值为0时,执行truncate语句会删除这些行;

EVENT_NAME: stage/sql/After create

通过对以下两个表执行查询,可以实现对应用程序的监控或DBA可以检测到涉及互斥体的线程之间的瓶颈或死锁信息(events_waits_current可以查看到当前正在等待互斥体的线程信息,mutex_instances可以查看到当前某个互斥体被哪个线程持有)。

7rows inset ( 0. 00sec)

OBJECT_SCHEMA: xiaoboluo

root@localhost : performance _schema 11:03:19> select * from events_statements _summary_by _thread_by _event_name where COUNT_STAR!=0 limit 1G

admin@localhost : performance_schema 10:49:34> select * from socket_instances;

* 以前缀memory/performance_schema命名的instruments可以收集performance_schema自身消耗的内部缓存区大小等信息。memory/performance_schema/* instruments默认启用,无法在启动时或运行时关闭。performance_schema自身相关的内存统计信息只保存在memory_summary_global_by_event_name表中,不会保存在按照帐户,主机,用户或线程分类聚合的内存统计表中

......

root@localhost : performance _schema 11:55:11> select * from memory_summary _by_thread _by_event _name where COUNT_ALLOC!=0 limit 1G

admin@localhost : performance _schema 11:01:23> select * from file_summary _by_instance where SUM _TIMER_WAIT!=0 and EVENT_NAME like '%innodb%' limit 1G;

*************************** 1. row ***************************

·OBJECT_NAME:instruments对象的名称,表级别对象;

COUNT _READ_ONLY: 1

PS:MySQL server使用几种缓存技术通过缓存从文件中读取的信息来避免文件I/O操作。当然,如果内存不够时或者内存竞争比较大时可能导致查询效率低下,这个时候您可能需要通过刷新缓存或者重启server来让其数据通过文件I/O返回而不是通过缓存返回。

1 row in set (0.00 sec)

| OBJECT_TYPE |OBJECT_SCHEMA | OBJECT_NAME |OBJECT_INSTANCE_BEGIN | OWNER_THREAD_ID |OWNER_EVENT_ID | INTERNAL_LOCK |EXTERNAL_LOCK |

| 温馨提示

(1)accounts表

COUNT_ALLOC: 1

3rows inset ( 0. 00sec)

......

MIN _TIMER_READ _WITH_SHARED_LOCKS: 0

# events_statements_summary_global_by_event_name表

------- --------------------- -------------------

AVG _TIMER_WAIT: 0

一个连接可见的连接属性集合取决于与mysql server建立连接的客户端平台类型和MySQL连接的客户端类型。

root@localhost : performance _schema 11:43:03> select * from events_stages _summary_global _by_event_name limit 1G

admin@localhost : performance _schema 04:55:42> select * from metadata_locksG;

MAX _TIMER_WAIT: 0

·当之前请求不能立即获得的锁在这之后被授予时,其锁信息行状态更新为GRANTED;

events_statements_summary_by_program:按照每个存储程序(存储过程和函数,触发器和事件)的事件名称进行统计的Statement事件

# file_summary_by_event_name表

EVENT_NAME: memory/innodb/fil0fil

OBJECT _INSTANCE_BEGIN: 2655351104

由于performance_schema表内存限制,所以维护了DIGEST = NULL的特殊行。 当events_statements_summary_by_digest表限制容量已满的情况下,且新的语句统计信息在需要插入到该表时又没有在该表中找到匹配的DIGEST列值时,就会把这些语句统计信息都统计到 DIGEST = NULL的行中。此行可帮助您估算events_statements_summary_by_digest表的限制是否需要调整

1 row in set (0.00 sec)

5rows inset ( 0. 00sec)

5.prepare语句实例统计表

| events_statements_summary_by_host_by_event_name |

·OBJECT_SCHEMA:该锁来自于哪个库级别的对象;

EVENT _NAME: wait/synch/mutex/sql/TC_LOG _MMAP::LOCK_tc

admin@localhost : performance_schema 05:47:55> select * from table_handles;

*************************** 1. row ***************************

·session_account_connect_attrs:记录当前会话及其相关联的其他会话的连接属性;

# events_statements_summary_by_host_by_event_name表

SUM _TIMER_WAIT: 56688392

| Tables_in_performance_schema (%events_transactions_summary%) |

·PROCESSLIST_ID:会话的连接标识符,与show processlist结果中的ID字段相同;

我们先来看看这些表中记录的统计信息是什么样子的(由于单行记录较长,这里只列出events_transactions_summary_by_account_by_event_name表中的示例数据,其余表的示例数据省略掉部分相同字段)。

友情提示:下文中的统计表中大部分字段含义与上一篇 《事件统计 | performance_schema全方位介绍》 中提到的统计表字段含义相同,下文中不再赘述。此外,由于部分统计表中的记录内容过长,限于篇幅会省略部分文本,如有需要请自行安装MySQL 5.7.11以上版本跟随本文进行同步操作查看。

AVG _TIMER_WAIT: 0

3rows inset ( 0. 00sec)

下一篇将为大家分享 《数据库对象事件统计与属性统计 | performance_schema全方位介绍》 ,谢谢你的阅读,我们不见不散!返回搜狐,查看更多

·USER:某连接的客户端用户名。如果是一个内部线程创建的连接,或者是无法验证的用户创建的连接,则该字段为NULL;

* 对于memory instruments,setup_instruments表中的TIMED列无效,因为内存操作不支持时间统计

------------------------------------ -------------------------------------- ------------

root@localhost : performance _schema 01:19:07> select * from events_transactions _summary_by _account_by _event_name where COUNT_STAR!=0 limit 1G

MAX _TIMER_WAIT: 56688392

* COUNT_STATEMENTS,SUM_STATEMENTS_WAIT,MIN_STATEMENTS_WAIT,AVG_STATEMENTS_WAIT,MAX_STATEMENTS_WAIT:关于存储程序执行期间调用的嵌套语句的统计信息

-------------------------------------------------

内存行为监控设置:

·对于通过TCP/IP 套接字(client_connection)的客户端连接,端口是server随机分配的,但不会为0值. IP是源主机的IP(127.0.0.1或本地主机的:: 1)。

COUNT_STAR: 0

4rows inset ( 0. 00sec)

MIN _TIMER_WAIT: 0

应用程序可以使用mysql_options()和mysql_options4()C API函数在连接时提供一些要传递到server的键值对连接属性。

SUM_TIMER_WAIT:统计给定计时事件的总等待时间。此值仅针对有计时功能的事件instruments或开启了计时功能事件的instruments,如果某事件的instruments不支持计时或者没有开启计时功能,则该字段为NULL。其他xxx_TIMER_WAIT字段值类似

mutex_instances表字段含义如下:

LOW _NUMBER_OF _BYTES_USED: 0

------- ------------- --------------------- -------------------

SUM_SELECT_SCAN: 45

| wait/io/socket/sql/server_tcpip_socket |110667200| 1 |32| :: |3306| ACTIVE |

*************************** 1. row ***************************

------------------------------------------------

我们先来看看这些表中记录的统计信息是什么样子的(由于单行记录较长,这里只列出memory_summary_by_account_by_event_name 表中的示例数据,其余表的示例数据省略掉部分相同字段)。

file_instances表列出执行文件I/O instruments时performance_schema所见的所有文件。 如果磁盘上的文件从未打开,则不会在file_instances中记录。当文件从磁盘中删除时,它也会从file_instances表中删除对应的记录。

# events_transactions_summary_by_host_by_event_name表

-------------------------------------- ----------------------- ---------------------

* 如果一个线程开启了采集功能,但是内存相关的instruments没有启用,则该内存释放操作不会被监控到,统计数据也不会发生改变

3rows inset ( 0. 00sec)

SUM _SELECT_FULL_JOIN: 21

OWNER _THREAD_ID: 46

MIN _TIMER_WAIT: 0

· NAME:与condition相关联的instruments名称;

EVENT_NAME: transaction

table_io_waits_summary_by_index_usage表:

  • SUM_NUMBER_OF_BYTES_FREE

·EVENT_NAME:生成事件信息的instruments 名称。与setup_instruments表中的NAME值对应;

| events_transactions_summary_by_account_by_event_name |

EVENT_NAME: wait/io/socket/sql/server_unix_socket

MAX _TIMER_WAIT: 0

* COUNT_WRITE,SUM_TIMER_WRITE,MIN_TIMER_WRITE,AVG_TIMER_WRITE,MAX_TIMER_WRITE,SUM_NUMBER_OF_BYTES_WRITE:这些列统计了所有文件写操作,包括FPUTS,FPUTC,FPRINTF,VFPRINTF,FWRITE和PWRITE系统调用,还包含了这些I/O操作的数据字节数 ;

* COUNT_EXECUTE,SUM_TIMER_EXECUTE,MIN_TIMER_EXECUTE,AVG_TIMER_EXECUTE,MAX_TIMER_EXECUTE:执行prepare语句对象的统计信息

MIN_TIMER_EXECUTE: 0

6rows inset ( 0. 00sec)

·已被死锁检测器检测到并被杀死的锁,或者锁请求超时正在等待锁请求会话被丢弃。

# events_stages_summary_by_user_by_event_name表

*************************** 4. row ***************************

COUNT_STAR: 7

1. 连接信息统计表

* COUNT_ALLOC:增加1

| USER |HOST | CURRENT_CONNECTIONS |TOTAL_CONNECTIONS |

Query OK, 377 rows affected (0.00 sec)

------- --------------------- -------------------

PS3:对这些表使用truncate语句,影响与等待事件类似。

·许多MySQL客户端程序设置的属性值与客户端名称相等的一个program_name属性。例如:mysqladmin和mysqldump分别将program_name连接属性设置为mysqladmin和mysqldump,另外一些MySQL客户端程序还定义了附加属性:

EVENT_NAME: memory/innodb/fil0fil

(1) session_account_connect_attrs表

| 事务事件统计表

SUM _TIMER_READ _WITH_SHARED_LOCKS: 0

-------------------------------------------------------

* file_summary_by_instance表:有额外的FILE_NAME、OBJECT_INSTANCE_BEGIN列,按照FILE_NAME、EVENT_NAME列进行分组,与file_summary_by_event_name 表相比,file_summary_by_instance表多了FILE_NAME和OBJECT_INSTANCE_BEGIN字段,用于记录具体的磁盘文件相关信息。

# events_transactions_summary_by_account_by_event_name表

·MySQL Connector/Net定义了如下属性:

*************************** 1. row ***************************

OBJECT_TYPE: TABLE

EVENT_NAME: memory/innodb/fil0fil

EVENT_NAME: wait/io/socket/sql/server_tcpip_socket

MAX _TIMER_WAIT: 0

* events_waits_current表中可以查看到当前正在等待互斥体的线程时间信息(例如:TIMER_WAIT列表示已经等待的时间) ;

* 如果给定语句的统计信息行在events_statements_summary_by_digest表中已经存在,则将该语句的统计信息进行更新,并更新LAST_SEEN列值为当前时间

MAX_TIMER_EXECUTE: 0

| memory_summary_global_by_event_name |

file_instances表不允许使用TRUNCATE TABLE语句。

* CURRENT_COUNT_USED:减少1

|admin | localhost |1| 1 |

# events_statements_summary_by_user_by_event_name表

------------- --------------------- -------------------

1 row in set (0.00 sec)

| wait/io/socket/sql/server_unix_socket |110667520| 1 |34| |0| ACTIVE |

CURRENT _NUMBER_OF _BYTES_USED: 0

COUNT_STAR: 213055844

| events_transactions_summary_by_host_by_event_name |

MAX _TIMER_READ _WITH_SHARED_LOCKS: 0

SUM _TIMER_WAIT: 0

·OBJECT_TYPE:显示handles锁的类型,表示该表是被哪个table handles打开的;

SUM _TIMER_WAIT: 0

| NAME |OBJECT_INSTANCE_BEGIN |

*************************** 1. row ***************************

OBJECT_TYPE: TABLE

COUNT_STAR: 0

AVG_TIMER_READ_NORMAL: 0

*************************** 1. row ***************************

admin@localhost : performance _schema 01:55:49> select * from table_io _waits_summary _by_index _usage where SUM_TIMER_WAIT!=0G;

# memory_summary_by_thread_by_event_name表

·COUNT_READ,SUM_TIMER_READ,MIN_TIMER_READ,AVG_TIMER_READ,MAX_TIMER_READ,SUM_NUMBER_OF_BYTES_READ:这些列统计所有接收操作(socket的RECV、RECVFROM、RECVMS类型操作,即以server为参照的socket读取数据的操作)相关的次数、时间、接收字节数等信息

EVENT_NAME: statement/sql/select

COUNT_STAR: 33

MIN_TIMER_WAIT:给定计时事件的最小等待时间

| admin |1| 1 |

* LOW_COUNT_USED和LOW_NUMBER_OF_BYTES_USED是较低的低水位估算值。performance_schema输出的低水位值可以保证统计表中的内存分配次数和内存小于或等于当前server中真实的内存分配值

MIN_TIMER_WAIT: 1905016

1 row in set (0.00 sec)

MAX_TIMER_READ_NORMAL: 0

AVG_TIMER_WAIT:给定计时事件的平均等待时间

admin@localhost : performance_schema 03:23:47> select * from mutex_instances limit 1;

HIGH_COUNT_USED: 1

·当一个线程正在等待某事发生时,condition NAME列显示了线程正在等待什么condition(但该表中并没有其他列来显示对应哪个线程等信息),但是目前还没有直接的方法来判断某个线程或某些线程会导致condition发生改变。

COUNT_STAR: 0

·OWNER_EVENT_ID:触发table handles被打开的事件ID,即持有该handles锁的事件ID;

SCHEMA_NAME: NULL

COUNT_READ_NORMAL: 0

OBJECT_NAME: ps_setup_enable_consumer

......

1 row in set (0.00 sec)

*************************** 1. row ***************************

------------------------------------------

·OWNER_EVENT_ID:请求元数据锁的事件ID。

SUM _TIMER_READ_ONLY: 57571000

performance_schema通过如下表来记录相关的锁信息:

* 如果DIGEST = NULL行的COUNT_STAR列值占据整个表中所有统计信息的COUNT_STAR列值的比例大于0%,则表示存在由于该表限制已满导致部分语句统计信息无法分类保存,如果你需要保存所有语句的统计信息,可以在server启动之前调整系统变量performance_schema_digests_size的值,默认大小为200

·PS:cond_instances表不允许使用TRUNCATE TABLE语句。

events_statements_summary_by_account_by_event_name:按照每个帐户和语句事件名称进行统计

| wait/io/socket/sql/client_connection |110668160 | 46 |53| |0| ACTIVE |

AVG _TIMER_WAIT: 0

| 4 |program_name | mysql |5|

THREAD_ID: 1

连接统计信息表允许使用TRUNCATE TABLE。它会同时删除统计表中没有连接的帐户,主机或用户对应的行,重置有连接的帐户,主机或用户对应的行的并将其他行的CURRENT_CONNECTIONS和TOTAL_CONNECTIONS列值。

COUNT_ALLOC: 103

OBJECT_SCHEMA: xiaoboluo

......

版权声明:本文由金沙国际登录网址发布于金沙国际官网,转载请注明出处:performance_schema全方位介绍,事件计算【金沙国际