百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

用Oracle的眼光来学习MySQL 5.7的sys(上)

mhr18 2024-10-13 03:08 17 浏览 0 评论

sys的初衷

MySQL 5.7的sys自从推出以来,整体的反响似乎没有预期的那么高,而我看到这个sys库的时候,第一感觉是越发和Oracle像了,不是里面的内容像,而是很多设计的方式越来相似。所以按照这种方式,我感觉离AWR这样的工具推出也不远了。

对于实时全面的抓取性能信息,MySQL依旧还在不断进步的路上。因为开源,所以有很多非常不错的工具,产品推出。myawr算是其中的一个,现在看来当初的设计方式和现在sys库很有相似之处,感兴趣的可以自行搜索查看。

所以对于sys库的学习,我是用Oracle的眼光来学习的,准备好了吗,老司机开车了。

我的总结是基于5.7.13-6这个版本,首先sys是对于information_schema,performance_schema的一个补充,在sys里面是做了整合,把一些信息通过视图的方式汇总起来,让很多信息的展现更合理一些。

化繁为简,sys下的对象分布情况

sys下的对象分布其实信息量很大,除了我们关心关心的视图和表意外,还有函数,存储过程和触发器。这些信息可以通过sys下的视图schema_object_overview来查看。

> select * from schema_object_overview where db='sys';

+-----+---------------+-------+

| db | object_type | count |

+-----+---------------+-------+

| sys | VIEW | 100 |

| sys | BASE TABLE | 1 |

| sys | INDEX (BTREE) | 1 |

| sys | TRIGGER | 2 |

| sys | FUNCTION | 21 |

| sys | PROCEDURE | 26 |

+-----+---------------+-------+

6 rows in set (0.10 sec)

sys下唯一的表

如果你观察仔细其实会发现里面的table只有一个,那就是sys_config,使用命令show tables显示出来的除了这个表都是视图。

这个视图有什么特别之处呢。

> select * from sys_config;

+--------------------------------------+-------+---------------------+--------+

| variable | value | set_time | set_by |

+--------------------------------------+-------+---------------------+--------+

| diagnostics.allow_i_s_tables | OFF | 2016-11-09 11:21:12 | NULL |

| diagnostics.include_raw | OFF | 2016-11-09 11:21:12 | NULL |

| ps_thread_trx_info.max_length | 65535 | 2016-11-09 11:21:12 | NULL |

| statement_performance_analyzer.limit | 100 | 2016-11-09 11:21:12 | NULL |

| statement_performance_analyzer.view | NULL | 2016-11-09 11:21:12 | NULL |

| statement_truncate_len | 64 | 2016-11-09 11:21:12 | NULL |

+--------------------------------------+-------+---------------------+--------+

6 rows in set (0.00 sec)

可以看到里面是一个基础参数的设置,比如一些范围,基数的设置。而且值得一提的是这个表里设置了几个触发器,对这个表的DML操作都会触发里面的数据级联变化。

Oracle中类似的实现

这个和awr里面的设置非常相似,Oracle中是使用dba_hist_wr_control来得到。

select *from dba_hist_wr_control DBID SNAP_INTERVAL RETENTION TOPNSQL

---------- -------------------- -------------------- ----------

3645037571 +00000 01:00:00.0 +00008 00:00:00.0 DEFAULT

然后我们继续查看,还是使用show tables来看,会看到整个sys下的表/视图有101个,其中x$开头的对象有48个,所以简单换算一下,里面的表/视图有53个。

x$视图

x$的视图是什么意思,这个通过Oracle的角度来看,就很容易理解,不知道这样类比对不对,在Oracle中,数据字典分为两种类型,一类是数据字典表,像dba_tables这样的,基表都是tab$这种的表,数据是存放在sys下的,这些信息在MySQL中就有些类似information_schema下的数据字典,而另外一类数据字典是动态性能视图,Oracle是以v$开头的,比如v$session,它的基表是x$开头的“内存表”,在MySQL sys中也是类似的意思,只是这些信息MySQL都毫无保留的开放出来了。按照官方的说法,是x$的信息是没有经过格式化的,比如下面的两个视图对比。

# mysql -e "use sys; desc waits_global_by_latency\g"

Logging to file '/home/mysql/query.log'

+---------------+---------------------+------+-----+---------+-------+

| Field | Type | Null | Key | Default | Extra |

+---------------+---------------------+------+-----+---------+-------+

| events | varchar(128) | NO | | NULL | |

| total | bigint(20) unsigned | NO | | NULL | |

| total_latency | text | YES | | NULL | |

| avg_latency | text | YES | | NULL | |

| max_latency | text | YES | | NULL | |

+---------------+---------------------+------+-----+---------+-------+

x$的视图的定义如下:

# mysql -e "use sys; desc x\$waits_global_by_latency\g"

Logging to file '/home/mysql/query.log'

+---------------+---------------------+------+-----+---------+-------+

| Field | Type | Null | Key | Default | Extra |

+---------------+---------------------+------+-----+---------+-------+

| events | varchar(128) | NO | | NULL | |

| total | bigint(20) unsigned | NO | | NULL | |

| total_latency | bigint(20) unsigned | NO | | NULL | |

| avg_latency | bigint(20) unsigned | NO | | NULL | |

| max_latency | bigint(20) unsigned | NO | | NULL | |

+---------------+---------------------+------+-----+---------+-------+

可以看到数据类型也有一些差别。如果是时间字段,在x$视图中可能精度是picosecond(皮秒,万亿分之一秒),而在普通视图中,就会显示为秒。

sys下的session视图

我们抽取一个视图来看,就session吧,使用show create view session可以看到引用的基表为`sys`.`processlist`,我们继续查看sys.processlist,可以发现它的基表是performance_schema下的`events_waits_current`,`events_stages_current`,`events_statements_current`,`events_transactions_current`,`session_connect_attrs`和sys下的基表`x$memory_by_thread_by_current_bytes` ,通过引用的这些视图其实可以看到也分了很多的层面。

sys下的视图分类

sys下的视图分了哪些层面呢。我简单来总结一下,大体分为一下几个层面

host_summary,这个是服务器层面的,比如里面的视图host_summary_by_file_io

user_summary,这个是用户层级的,比如里面的视图user_summary_by_file_io

innodb,这个是innodb层面的,比如innodb_buffer_stats_by_schema

io,这个是I/O层的统计,比如视图 io_global_by_file_by_bytes

memory,关于内存的使用情况,比如视图memory_by_host_by_current_bytes

schema,关于schema级别的统计信息,比如schema_table_lock_waits

session,关于会话级别的,这个视图少一些,就两个,session和session_ssl_status

statement,关于语句级别的,比如statements_with_errors_or_warnings

wait,关于等待的,这个还是处于起步阶段,等待模型有待完善,目前只有基于io/file, lock/table, io/table这三个方面,提升空间还很大。

> select *from wait_classes_global_by_avg_latency\g

+-----------------+--------------+---------------+-------------+-------------+-------------+

| event_class | total | total_latency | min_latency | avg_latency | max_latency |

+-----------------+--------------+---------------+-------------+-------------+-------------+

| wait/io/file | 12228640 | 25.66 m | 0 ps | 125.88 us | 5.96 s |

| wait/lock/table | 1320560 | 2.64 s | 125.25 ns | 2.00 us | 228.54 us |

| wait/io/table | 144689737016 | 22.78 h | 114.23 ns | 566.77 ns | 3.92 s |

+-----------------+--------------+---------------+-------------+-------------+-------------+

这个sys的使用其实还是比较灵活的,在5.6及以上版本都可以,是完全独立的。和Oracle里面的statspack,awr非常相似。

sys的备份和重建

如果查看sys的版本,可以使用视图version来得到。可见是把它当做一个独立的组件一样来维护的。

[sys]> select *from version;

+-------------+---------------+

| sys_version | mysql_version |

+-------------+---------------+

| 1.5.0 | 5.7.13-6-log |

+-------------+---------------+

如果要导出,可以使用 mysqlpump sys > sys_dump.sql 或者mysqldump --databases --routines sys > sys_dump.sql来得到sys的创建语句,如果需要重建则更简单 mysql<sys_dump.sql 即可。

相关推荐

一文读懂Prometheus架构监控(prometheus监控哪些指标)

介绍Prometheus是一个系统监控和警报工具包。它是用Go编写的,由Soundcloud构建,并于2016年作为继Kubernetes之后的第二个托管项目加入云原生计算基金会(C...

Spring Boot 3.x 新特性详解:从基础到高级实战

1.SpringBoot3.x简介与核心特性1.1SpringBoot3.x新特性概览SpringBoot3.x是建立在SpringFramework6.0基础上的重大版...

「技术分享」猪八戒基于Quartz分布式调度平台实践

点击原文:【技术分享】猪八戒基于Quartz分布式调度平台实践点击关注“八戒技术团队”,阅读更多技术干货1.背景介绍1.1业务场景调度任务是我们日常开发中非常经典的一个场景,我们时常会需要用到一些不...

14. 常用框架与工具(使用的框架)

本章深入解析Go生态中的核心开发框架与工具链,结合性能调优与工程化实践,提供高效开发方案。14.1Web框架(Gin,Echo)14.1.1Gin高性能实践//中间件链优化router:=...

SpringBoot整合MyBatis-Plus:从入门到精通

一、MyBatis-Plus基础介绍1.1MyBatis-Plus核心概念MyBatis-Plus(简称MP)是一个MyBatis的增强工具,在MyBatis的基础上只做增强不做改变,为简化开发、提...

Seata源码—5.全局事务的创建与返回处理

大纲1.Seata开启分布式事务的流程总结2.Seata生成全局事务ID的雪花算法源码3.生成xid以及对全局事务会话进行持久化的源码4.全局事务会话数据持久化的实现源码5.SeataServer创...

Java开发200+个学习知识路线-史上最全(框架篇)

1.Spring框架深入SpringIOC容器:BeanFactory与ApplicationContextBean生命周期:实例化、属性填充、初始化、销毁依赖注入方式:构造器注入、Setter注...

OpenResty 入门指南:从基础到动态路由实战

一、引言1.1OpenResty简介OpenResty是一款基于Nginx的高性能Web平台,通过集成Lua脚本和丰富的模块,将Nginx从静态反向代理转变为可动态编程的应用平台...

你还在为 Spring Boot3 分布式锁实现发愁?一文教你轻松搞定!

作为互联网大厂后端开发人员,在项目开发过程中,你有没有遇到过这样的问题:多个服务实例同时访问共享资源,导致数据不一致、业务逻辑混乱?没错,这就是分布式环境下常见的并发问题,而分布式锁就是解决这类问题的...

近2万字详解JAVA NIO2文件操作,过瘾

原创:小姐姐味道(微信公众号ID:xjjdog),欢迎分享,转载请保留出处。从classpath中读取过文件的人,都知道需要写一些读取流的方法,很是繁琐。最近使用IDEA在打出.这个符号的时候,一行代...

学习MVC之租房网站(十二)-缓存和静态页面

在上一篇<学习MVC之租房网站(十一)-定时任务和云存储>学习了Quartz的使用、发邮件,并将通过UEditor上传的图片保存到云存储。在项目的最后,再学习优化网站性能的一些技术:缓存和...

Linux系统下运行c++程序(linux怎么运行c++文件)

引言为什么要在Linux下写程序?需要更多关于Linux下c++开发的资料请后台私信【架构】获取分享资料包括:C/C++,Linux,Nginx,ZeroMQ,MySQL,Redis,fastdf...

2022正确的java学习顺序(文末送java福利)

对于刚学习java的人来说,可能最大的问题是不知道学习方向,每天学了什么第二天就忘了,而课堂的讲解也是很片面的。今天我结合我的学习路线为大家讲解下最基础的学习路线,真心希望能帮到迷茫的小伙伴。(有很多...

一个 3 年 Java 程序员 5 家大厂的面试总结(已拿Offer)

前言15年毕业到现在也近三年了,最近面试了阿里集团(菜鸟网络,蚂蚁金服),网易,滴滴,点我达,最终收到点我达,网易offer,蚂蚁金服二面挂掉,菜鸟网络一个月了还在流程中...最终有幸去了网易。但是要...

多商户商城系统开发全流程解析(多商户商城源码免费下载)

在数字化商业浪潮中,多商户商城系统成为众多企业拓展电商业务的关键选择。这类系统允许众多商家在同一平台销售商品,不仅丰富了商品种类,还为消费者带来更多样的购物体验。不过,开发一个多商户商城系统是个复杂的...

取消回复欢迎 发表评论: