percona-toolkit工具包的使用教程之开发类工具

percona-toolkit工具包的使用教程之开发类工具

1.  pt-duplicate-key-checker

l  功能介绍:

功能为从mysql表中找出重复的索引和外键,这个工具会将重复的索引和外键都列出来,并生成了删除重复索引的语句,非常方便

l  用法介绍:

pt-duplicate-key-checker [OPTION...] [DSN]

包含比较多的选项,具体的可以通过命令pt-duplicate-key-checker  --help来查看具体支持那些选项,我这里就不一一列举了。DNS为数据库或者表。

l  使用示例:

查看test数据库的重复索引和外键使用情况使用如下命令

pt-duplicate-key-checker  --host=localhost --user=root --password=zhang@123  --databases=test

2. pt-online-schema-change

l  功能介绍:

功能为在alter操作更改表结构的时候不用锁定表,也就是说执行alter的时候不会阻塞写和读取操作,注意执行这个工具的时候必须做好备份,操作之前最好详细读一下官方文档http://www.percona.com/doc/percona-toolkit/2.1/pt-online-schema-change.html。

工作原理是创建一个和你要执行alter操作的表一样的空表结构,执行表结构修改,然后从原表中copy原始数据到表结构修改后的表,当数据copy完成以后就会将原表移走,用新表代替原表,默认动作是将原表drop掉。在copy数据的过程中,任何在原表的更新操作都会更新到新表,因为这个工具在会在原表上创建触发器,触发器会将在原表上更新的内容更新到新表。如果表中已经定义了触发器这个工具就不能工作了。

l  用法介绍:

pt-online-schema-change [OPTIONS] DSN

options可以自行查看help,DNS为你要操作的数据库和表。

这里有两个参数需要介绍一下:

--dry-run  这个参数不建立触发器,不拷贝数据,也不会替换原表。只是创建和更改新表。

--execute  这个参数的作用和前面工作原理的介绍的一样,会建立触发器,来保证最新变更的数据会影响至新表。注意:如果不加这个参数,这个工具会在执行一些检查后退出。这一举措是为了让使用这充分了解了这个工具的原理,同时阅读了官方文档。

l  使用示例:

在线更改表的的引擎,这个尤其在整理innodb表的时候非常有用,示例如下:

pt-online-schema-change --user=root --password=zhang@123 --host=localhost --lock-wait-time=120 --alter="ENGINE=InnoDB" D=test,t=oss_pvinfo2 --execute

从下面的日志中可以看出它的执行过程:

Altering `test`.`oss_pvinfo2`...

Creating new table...

Created new table test._oss_pvinfo2_new OK.

Altering new table...

Altered `test`.`_oss_pvinfo2_new` OK.

Creating triggers...

Created triggers OK.

Copying approximately 995696 rows...

Copied rows OK.

Swapping tables...

Swapped original and new tables OK.

Dropping old table...

Dropped old table `test`.`_oss_pvinfo2_old` OK.

Dropping triggers...

Dropped triggers OK.

Successfully altered `test`.`oss_pvinfo2`.

在来一个范例,大表添加字段的,语句如下:

pt-online-schema-change --user=root --password=zhang@123 --host=localhost --lock-wait-time=120 --alter="ADD COLUMN domain_id INT" D=test,t=oss_pvinfo2 --execute

3. pt-query-advisor

l  功能介绍:

根据一些规则分析查询语句,对可能的问题提出建议,这些评判规则大家可以看一下官网的链接:http://www.percona.com/doc/percona-toolkit/2.1/pt-query-advisor.html,这里就不详细列举了。那些查询语句可以来自慢查询文件、general日志文件或者使用pt-query-digest截获的查询语句。目前这个版本有bug,当日志文件非常大的时候会需要很长时间甚至进入死循环。

l  用法介绍:

pt-query-advisor /path/to/slow-query.log

pt-query-advisor --type genlog mysql.log

pt-query-digest --type tcpdump.txt --print --no-report | pt-query-advisor

l  使用示例:

分析一个语句的例子:

pt-query-advisor --query "select * from aaa"

分析general log中的查询语句的例子:

pt-query-advisor /data/dbdata/general.log

分析慢查询中的查询语句的例子:

pt-query-advisor /data/dbdata/localhost-slow.log

4.  pt-show-grants

l  功能介绍:

规范化和打印mysql权限,让你在复制、比较mysql权限以及进行版本控制的时候更有效率!

l  用法介绍:

pt-show-grants [OPTION...] [DSN]

选项自行用help查看,DSN选项也请查看help,选项区分大小写。

l  使用示例:

查看指定mysql的所有用户权限:

pt-show-grants --host='localhost' --user='root' --password='zhang@123'

查看执行数据库的权限:

pt-show-grants --host='localhost' --user='root' --password='zhang@123'  --database='hostsops'

查看每个用户权限生成revoke收回权限的语句:

pt-show-grants --host='localhost' --user='root' --password='zhang@123'  --revoke

5.  pt-upgrade

l  功能介绍:

在多台服务器上执行查询,并比较有什么不同!这在升级服务器的时候非常有用,可以先安装并导数据到新的服务器上,然后使用这个工具跑一下sql看看有什么不同,可以找出不同版本之间的差异。

l  用法介绍:

pt-upgrade [OPTION...] DSN [DSN...] [FILE]

比较文件中每一个查询语句在两个主机上执行的结果,并检查在每个服务器上执行的结果、错误和警告。

l  使用示例:

只查看某个sql在两个服务器的运行结果范例:

pt-upgrade h='localhost' h=192.168.3.92 --user=root --password=zhang@123 --query="select * from user_data.collect_data limit 5"

查看文件中的对应sql在两个服务器的运行结果范例:

pt-upgrade h='localhost' h=192.168.3.92 --user=root --password=zhang@123  aaa.sql

查看慢查询中的对应的查询SQL在两个服务器的运行结果范例:

pt-upgrade h='localhost' h=192.168.3.92 --user=root --password=zhang@123  slow.log

此外还可以执行compare的类型,主要包含三个query_times,results,warnings,比如下面的例子,只比较sql的执行时间

pt-upgrade h=192.168.3.91 h=192.168.3.92 --user=root --password=zhang@123 --query="select * from user_data.collect_data" --compare query_times

percona-toolkit工具包的使用教程之开发类工具的相关教程结束。

相关推荐:

如何在 Vespa 中正确集成 ONNX 模型(PyVespa 教程)

本文详解在pyvespa中部署onnx模型时常见的路径引用错误,指出应用包内不可使用宿主机或docker卷路径,所有模型文件必须打包进应用zip并通过相对路径引用,同时提供可运行的schema配置与部署实践要点。 本文详解在pyvespa中部署onnx模型时常见的路径引用错误,指出应用包内不可使用宿...

Python Textual 教程:正确获取 Input 组件的用户输入值

本文详解如何在textual框架中正确访问input小部件的实时输入值,避免因生命周期误解、方法签名错误或状态同步不当导致的空值、对象引用异常等问题,并提供可运行的完整示例。 本文详解如何在textual框架中正确访问input小部件的实时输入值,避免因生命周期误解、方法签名错误或状态同步不当导致的...

Python 如何在不安装 Celery 的情况下直接使用轻量级 Pika 封装 RabbitMQ 工具类?

直接用pika封装而非Celery,因后者抽象过深、依赖繁重;pika更轻量可控,但需自行实现连接池、重连、消息确认等关键逻辑。 为什么不用Celery而直接用pika封装? 因为Celery的抽象层会掩盖连接管理、重试逻辑和消息确认细节,而你只需要发几条任务、或做简单异步通知,又不想引入celer...

批量按比例调整 XML 中所有商品价格的 PowerShell 教程

本文介绍如何使用PowerShell快速、安全地批量修改大型XML电商目录中所有元素的值(如统一上调/下调50%),适用于含上千条记录的场景,无需手动编辑或第三方工具。 本文介绍如何使用powershell快速、安全地批量修改大型xml电商目录中所有``元素的值(如统一上调/下调50%),适用于含上...