如何监控MySQL数据库的还原进度

标签：pv 数据库 还原 监控 MySQL 进度

还原MySQL数据库的备份是一项重要任务，有时可能很耗时，尤其是对于大型数据库。监控还原过程的进度对于估计完成时间和确保一切顺利进行至关重要。   在本文中，将探讨计算MySQL还原过程进度百分比的两种不同而有效的方法。 1.Linux本地输入/输出（I/O）统计信息 2.管道查看工具 通过这些方法，我们可以有效地监控还原过程，高效地管理MySQL数据库的还原。   使用Linux本地输入/输出（I/O）统计数据监控MySQL数据库的还原进度 我们将使用/proc/<pid>/io文件，该文件包含每个运行进程的IO统计信息。在这种特殊情况下，我们将使用 MySQL还原进程的pid，它可以提供宝贵的I/O统计数据，用于估算MySQL还原进程的进度。需要关注的关键指标是rchar 值，它代表MySQL还原进程自启动以来从存储中读取的字节总数。通过将该值与正在还原的备份文件大小进行比较，我们可以计算出还原进度的百分比。   下面介绍如何使用i/o工具估算MySQL备份还原进度： 1.获取MySQL还原进程的进程ID (PID) 使用ps命令或其他进程监控工具查找MySQL还原进程的PID。例如：

$ ps aux | grep mysql

2.访问I/O统计信息

$ cat /proc/$(pid of restore)/io

3.关注rchar值 cat命令会输出关于I/O不同的统计信息，查看rchar的值，表示从存储读取的字节数 4.估算进度 rchar的值与备份文件的大小相比较：单位要一致，比如都换算成bytes

    Restore Progress (%) = (rchar / Backup File Size) * 100

5.连续监控 要想获得实时的进度信息，可以写一个脚本来监控分析：

while true; do
 
if [ -f /proc/<RESTORE_PID>/io ]
 
then
 
bytes_progress=$(cat /proc/<RESTORE_PID>/io | awk '/^rchar/ {print $2}')
bytes_total=$(cat <BACKUP_FILE> | wc -c)
progress=$(awk "BEGIN {printf "%.2f", ((100 * $bytes_progress)/$bytes_total)}")
echo "Progress: $progress%"
 
sleep 5;
 
continue;
 
else
 
break;
 
fi
 
done

    使用PV(pipe viewer)监控mysql的还原进度 Pipe Viewer（通常缩写为pv）允许我们跟踪通过管道传输数据的进度。利用pv，我们可以轻松监控数据库还原过程的进度，并深入了解预计完成时间。我们还将讨论管道查看器提供的不同选项，并演示其用法。   什么是pipe viewer？ pv是一种命令行工具，用于监控通过管道传输数据的进度。它能直观地显示数据传输的情况，包括传输速度、进度百分比和预计完成时间等信息。通过使用pv，我们可以获得有关数据传输任务进度的实时反馈。   安装Pipe Viewer 对于Ubuntu/Debian，使用 apt-get

$ sudo apt-get install pv

对于 CentOS/RHEL，使用 yum

$ sudo yum install pv

  使用pv还原数据库 假设我们有一个mysqldump的逻辑备份需要还原：

$ pv backup.sql | mysql -u [username] -p[password] -h [host] [database_name]

执行以上命令之后，就会看到类似下面的输出信息：数据量、运行时间、传输速率、传输的字节数以及剩余时间

490MiB 0:00:39 [4.51MiB/s] [===========================>] 29% ETA 0:04:01

如果备份文件是经过压缩的，可以使用以下命令：

$ pv backup.sql.gz | gunzip | mysql -u [username] -p[password] -h[host] [database_name]

  使用pv监控进度 执行命令后，pv将开始显示数据库还原的进度。你会看到数据传输速度、进度百分比和预计完成时间等信息。这可以让你跟踪还原过程并估计何时完成。 还原完成后，将看到以下输出：

3582iB 0:07:01 [ 9.2MiB/s] [===============================================>] 100%

  Pipe Viewer参数

-p或-progress： 显示进度条。
-t或-timer： 显示自开始以来的耗时。
-r或-rate： 显示每秒传输速率，单位是bytes。
-b或-字节： 显示传输的字节数。
-e或-eta： 估算完成前的剩余时间。
-a或-average-rate：显示平均传输速率。
-s或-size：指定输入数据的总大小。

缺省情况下，默认使用了-p、-t、-r和-b选项。

标签：pv,数据库,还原,监控,MySQL,进度
From： https://www.cnblogs.com/abclife/p/17602848.html