1、mydumper工具介绍
mydumper 是一款社区开源的，用于 MySQL 数据库的高性能多线程备份工具。与传统的 mysqldump 相比，mydumper 提供了更快的备份和恢复速度，特别是在处理大型数据库时。它包含两个主要工具：
• mydumper：负责导出一致的 MySQL 数据库备份。
• myloader：读取 mydumper 生成的备份文件，并将其导入到目标数据库中。
以下是 mydumper 的一些主要特点和用法：
- 多线程备份：支持多线程技术，可以同时备份多个表，充分利用系统资源，提高备份效率。
- 数据一致性：通过使用GTID和锁机制，确保备份数据的一致性。在备份过程中，它只会在备份的开始和结束时锁定表，而在备份过程中允许其他操作，减少了对生产环境的干扰。
- 支持压缩：可以在备份时对数据进行压缩，节省存储空间。
- 灵活的备份选项：提供多种选项以满足不同场景的备份需求，如指定表、排除表、只备份表结构或只备份表数据等。
- 支持增量备份：可以执行增量备份，减少数据传输量。
- 数据与建表语句分离：备份产生的文件中，建库、建表、表数据等都分别在不同文件中，便于管理和恢复。
- 支持守护进程模式：可以以守护进程模式工作，定时快照和连续二进制日志。
2、mydumper工具安装
官网地址：https://launchpad.net/mydumper
GitHub 地址：https://github.com/maxbube/mydumper
2.1、下载
此处以centos7或redhat的x86_64的安装包为例：
wget https://github.com/maxbube/mydumper/releases/download/v0.14.5-3/mydumper-0.14.5-3-zstd.el7.x86_64.rpm
2.2、安装
rpm -ivh mydumper-0.14.5-3-zstd.el7.x86_64.rpm
2.3、验证
验证：mydumper --help
3、mydumper使用说明
3.1、mydumper备份参数说明
| 参数 | 说明 | 用法 |
| -u, --user | 指定MySQL用户名 | mydumper -u root ... 指定使用root用户进行备份 |
| -p, --password | 指定MySQL用户密码 | mydumper -p password ... 指定MySQL用户的密码 |
| -h, --host | 指定MySQL服务器IP地址 | mydumper -h 192.168.1.1 ... 指定MySQL服务器的IP地址 |
| -P, --port | 指定MySQL服务器端口号 | mydumper -P 3306 ... 指定MySQL服务器的端口号为3306 |
| -S, --socket | 指定MySQL套接字文件路径 | mydumper -S /tmp/mysql.sock ... 指定MySQL套接字文件路径 |
| -B, --database | 指定需要备份的数据库 | mydumper -B dbname ... 指定备份名为dbname的数据库 |
| -T, --tables-list | 指定需要备份的表列表，用逗号分隔 | mydumper -T table1,table2 ... 指定备份table1和table2等表 |
| -O, --omit-from-file | 包含需要排除的数据库列表的文件 | mydumper -O /path/to/file ... 指定包含需要排除数据库列表的文件 |
| -o, --outputdir | 指定输出目录 | mydumper -o /backup/path ... 指定备份文件输出的目录为/backup/path |
| -c, --compress | 压缩输出文件 | mydumper -c ... 启用压缩功能，对输出文件进行压缩 |
| -x, --regex | 使用正则表达式指定需要备份或排除的数据库和表 | mydumper --regex 'regex_pattern' ... 使用正则表达式匹配需要备份或排除的数据库和表 |
| -m, --no-schemas | 只导出表数据，不导出表结构 | mydumper -m ... 只导出表数据，不包含表结构定义 |
| -d, --no-data | 只导出表结构，不导出表数据（注意：此参数在mydumper中通常用于恢复时的myloader工具，备份时一般使用-m） | - |
| -t, --threads | 使用的线程数，默认4 | mydumper -t 8 ... 使用8个线程进行备份 |
| --trx-consistency-only | 保证事务一致性，但不锁定表 | mydumper --trx-consistency-only ... 启用事务一致性备份模式 |
| --complete-insert | 使用完整的INSERT语句（包含列名） | mydumper --complete-insert ... 使用完整的INSERT语句进行备份 |
请注意，上述表格中的参数和用法是基于常见的mydumper版本和用法。在实际使用中，可能会根据具体的mydumper版本和MySQL服务器配置有所不同。因此，建议在使用前查阅mydumper的官方文档或帮助信息（通常可以通过mydumper --help命令获取），以确保参数的准确性和可用性。
另外，关于-d参数，虽然在一些文档和讨论中提到了它用于只导出表结构，但在mydumper的官方文档和常用参数中，更常见的是使用-m参数来表示只导出表数据而不导出表结构。同时，-d参数在myloader恢复工具中通常用于指定导入备份文件的目录。因此，在表格中对于-d参数的说明进行了相应的调整，并指出了它在备份时一般使用-m参数。
3.1.1、mydumper备份使用示例
以下是针对不同使用场景的 mydumper 使用示例：
1. 备份全部数据库
备份所有数据库（包括系统库）：
##语法
mydumper -u root -p 'your_password' -P 3306 -h your_host -o /path/to/backup/
##具体示例
mydumper -u root -p 123456 -h 192.168.3.19 -P 3307 -o /databackup/mysql8.0- 此命令将备份所有数据库到指定的输出目录。
2. 备份全部数据库，包含触发器、事件、存储过程及函数
备份所有数据库，并包含触发器、事件、存储过程和函数：
##语法
mydumper -u root -p 'your_password' -P 3306 -h your_host -R -G -E -o /path/to/backup/
##具体示例
mydumper -u root -p 123456 -h 192.168.3.19 -P 3307 -R -G -E -o /databackup/mysql8.0- 其中，
-R表示包含存储过程和函数，-G表示包含视图，-E表示包含事件。
3. 备份指定库
备份指定的数据库（例如 db1 和 db2）：
##语法
mydumper -u root -p [password] -h [host] -P [port] -B db1,db2 -o /backup/specified_databases
##具体示例
mydumper -u root -p 123456 -h 192.168.3.19 -P 3307 -B nacos,mysql -o /databackup/mysql8.0-
-B：指定要备份的数据库，多个数据库用逗号分隔。
4. 使用正则排除系统库
备份所有数据库，但排除系统库（如 information_schema、performance_schema、mysql、sys）：
##语法
mydumper -u root -p 'your_password' -P 3306 -h your_host --regex '^(?!(mysql|sys|performance_schema|information_schema))' -o /path/to/backup/
##具体示例
mydumper -u root -p 123456 -h 192.168.3.19 -P 3307 --regex '^(?!(mysql|sys|performance_schema|information_schema))' -o /databackup/mysql8.0- 此命令使用正则表达式排除系统数据库（如mysql、sys、performance_schema、information_schema）进行备份。
5. 只备份表结构
备份指定数据库的表结构（不备份数据）：
##语法
mydumper -u [username] -p [password] -h [host] -P [port] -B db1 -o /backup/schema_only --no-data
##具体示例
mydumper -u root -p 123456 -h 192.168.3.19 -P 3307 -B ruoyi-vue-pro -o /databackup/mysql8.0 --no-data-
--no-data：只备份表结构，不备份数据。
6. 只备份表数据
备份指定数据库的表数据（不备份表结构）：
##语法
mydumper -u [username] -p [password] -h [host] -P [port] -B db1 -o /backup/data_only --no-schemas
##具体示例
mydumper -u root -p 123456 -h 192.168.3.19 -P 3307 -B nacos -o /databackup/mysql8.0 --no-schemas-
--no-schemas：只备份表数据，不备份表结构。
7. 压缩备份某个表
备份指定数据库中的某个表，并压缩备份文件（例如 db1 中的 table1）：
##语法
mydumper -u [username] -p [password] -h [host] -P [port] -B db1 -T table1 -o /backup/compressed_table -c
##具体示例
mydumper -u root -p 123456 -h 192.168.3.19 -P 3306 -B zhhw -T zhhw.historydata -o /databackup/mysql8.0 -c-
-c：启用压缩，备份文件会被压缩为.sql.gz格式。
3.2、myloader还原参数说明
| 参数 | 说明 | 用法 |
| --directory 或 -d | 指定备份文件所在的目录 | myloader --directory=/path/to/backup |
| --database 或 -B | 指定要还原的数据库（如果需要还原特定数据库） | myloader --database=dbname --directory=/path/to/backup 注意：如果使用了此参数，则只会还原该数据库的内容。 |
| --tables-list | 指定一个包含要还原表的列表的文件（每行一个表名） | myloader --tables-list=/path/to/tables_list.txt --directory=/path/to/backup |
| --tables 或 -T | 指定要还原的表（可以指定多个，用逗号分隔；如果与 --database 一起使用，则表名应包含数据库名前缀，但通常不这样做，而是单独使用 -T 参数指定表，同时用 -B 或在配置文件中指定数据库） | myloader --tables=db1.table1,db2.table2 --directory=/path/to/backup 或更常见的用法是单独指定数据库和表：myloader --database=dbname --tables=table1,table2 --directory=/path/to/backup（注意：在这种情况下，表名不应包含数据库名前缀） |
| --user 或 -u | 指定连接MySQL的用户名 | myloader --user=root --directory=/path/to/backup |
| --password 或 -p | 指定连接MySQL的密码（出于安全考虑，通常不在命令行中直接输入密码，而是提示输入或在配置文件中指定） | myloader --user=root --password=yourpassword --directory=/path/to/backup（更安全的方式是：myloader --user=root -p --directory=/path/to/backup，然后按提示输入密码） |
| --host 或 -h | 指定MySQL服务器的主机名或IP地址 | myloader --host=192.168.1.100 --directory=/path/to/backup |
| --port 或 -P | 指定MySQL服务器的端口号（默认是3306） | myloader --port=3307 --directory=/path/to/backup |
| --threads 或 -t | 指定还原时使用的线程数（可以加快还原速度，但也会增加服务器的负载） | myloader --threads=4 --directory=/path/to/backup |
| --overwrite-tables | 如果表已存在，则覆盖它们（而不是先删除再创建，但这可能导致数据丢失，如果表中有数据且不希望被覆盖，请谨慎使用） | myloader --overwrite-tables --directory=/path/to/backup 注意：此参数的具体行为可能因 mydumper 版本而异，建议查阅官方文档以获取准确信息。在某些版本中，可能需要使用 --replace 或其他参数来达到覆盖表的目的。 |
| --ignore-engines | 指定要忽略的存储引擎（还原时将跳过这些引擎的表） | myloader --ignore-engines=CSV,MEMORY --directory=/path/to/backup |
| --verbose 或 -v | 显示详细的还原过程信息 | myloader --verbose --directory=/path/to/backup |
注意：
上述参数中的某些可能因 mydumper 的版本不同而有所差异。在使用之前，请查阅你所使用的 mydumper 版本的官方文档或帮助信息（通常可以通过 myloader --help 命令获取）。
在生产环境中进行还原操作之前，强烈建议在测试环境中进行充分的测试，以确保还原过程的正确性和数据的完整性。
出于安全考虑，不要在命令行中直接包含敏感信息（如密码）。可以考虑使用配置文件、环境变量或提示输入的方式来提供这些信息。
3.2.1、myloader 还原使用示例
myloader 是 mydumper 的配套工具，用于将 mydumper 备份的数据还原到 MySQL 数据库中。以下是 myloader 的详细使用示例和说明：
1、基本还原命令
还原 mydumper 备份的数据到目标数据库：
##语法
myloader -u [username] -p [password] -h [host] -P [port] -d /backup/directory-
-u：MySQL 用户名。 -
-p：MySQL 密码。 -
-h：MySQL 主机地址。 -
-P：MySQL 端口号（默认 3306）。 -
-d：指定备份文件所在的目录。
2、还原到指定数据库
将备份数据还原到指定的数据库（例如 new_db）：
##语法
myloader -u [username] -p [password] -h [host] -P [port] -d /backup/directory -B new_db
##具体示例
myloader -u root -p 123456 -h 192.168.3.19 -P 3307 -B hwgl -d /databackup/mysql141 -
-B：指定目标数据库名称。如果目标数据库不存在，myloader会自动创建。
3、多线程还原指定数据库
使用多线程加快还原速度（例如 8 个线程）：
##语法
myloader -u [username] -p [password] -h [host] -P [port] -B new_db -d /backup/directory -t 8
##具体示例
myloader -u root -p 123456 -h 192.168.3.19 -P 3307 -B hwgl -d /databackup/mysql141 -t 8-
-t：指定线程数（默认 4 个线程）。
4、只还原表结构-指定数据库
只还原表结构，不还原数据：
##语法
myloader -u [username] -p [password] -h [host] -P [port] -B new_db -d /backup/directory --no-data
##具体示例
myloader -u root -p 123456 -h 192.168.3.19 -P 3307 -B hwgl -d /databackup/mysql141 --no-data-
--no-data：只还原表结构，不还原数据。