shell 习题63 并发备份数据库

用shell实现，以并发进程的形式将mysql数据库所有的表备份到当前目录，并把所有的表压缩到一个压缩包文件里。

假设数据库名字为mydb，用户名为aming，密码为passwd。

核心要点

1. 在shell中加上&可以将命令丢到后台，从而可以同时执行多条命令达到并发的效果。
2. 如果表数量很大，全部都丢到后台去，服务资源恐怕支撑不了，所以需要控制并发数。
3. 备份表的命令是mysqldump -uaming -ppasswd mydb tablename > tablename.sql

思路是设置并发数和获得表总数来取得每个并发进程的表数量，再把它们记录到临时文件中，每个临时文件就是一个并发的进程

split -l 按照每个文件有多少行来切割文件

$ split -l 4 a.txt  #每个文件4行来切割a.txt 切割后文件名为xaa ...

-rw-rw-r--. 1 kun kun    8 2月  12 16:35 xab
-rw-rw-r--. 1 kun kun    8 2月  12 16:35 xaa

$ split -l 4 a.txt kun  指定切割后的文件开头
-rw-rw-r--. 1 kun kun    8 2月  12 16:37 kunaa
-rw-rw-r--. 1 kun kun    8 2月  12 16:37 kunab

wait 等待后台命令运行完才释放终端

$ sleep 10 &
[1] 5639
$ jobs
[1]+  运行中               sleep 10 &
$ wait   #等待sleep运行完成再释放终端
[1]+  完成                  sleep 10

代码内容

#!/bin/bash
#
#program:
#    以并发进程的形式将mysql数据库所有的表备份到当前目录，并把所有的表压缩到一个压缩包文件里。
#    假设数据库名字为mydb，用户名为aming，密码为passwd。
#
#history:
#2020/02/12    kun    V1.0

#设置并发数
N=5
#获得mydb总表数的临时文件
mysql -uaming -ppasswd mydb -e "show tables"|sed "1d" > /tmp/63.log
#总表数量
n=`wc -l /tmp/63.log |awk '{print $1}'`

#四舍五入
div()
{
    n=`echo "scale=1;$1/$2" |bc`
    n1=`echo "scale=1;$n+0.5" |bc`
    echo $n1 |cut -d. -f1
}

#切割后的每个文件的行数
line=`div $n $N`

#获得切割后的临时文件xaa xab xac xad xae
split -l $line /tmp/63.log

#对临时文件每个表进行备份
myd()
{
    for table in `cat $1`
    do
        myslqdump -umysql -ppasswd mydb $table > $table.sql
    done
}

for file in xaa xab xac xad xae
do
    #放到后台执行实现并行执行
    myd $file &
done

#等待后台进程完成再打包
wait && tar zcf mydb.tar.gz *.sql
rm -rf *.sql