脚本之家 服务器常用软件
快捷导航
您的位置：首页 → 脚本专栏 → linux shell → shell脚本mysql定时备份

shell脚本实现mysql数据库双机定时备份的方法

 更新时间：2022年07月20日 16:11:33   作者：roc98 lv-1  
最近有个需求，要求实现对某个数据库进行双机备份，每天凌晨备份一次，要求主机器只保留最近十五天的记录，我们决定用shell脚本加定时任务的方式来实现这个需求，接下来通过本文给大家介绍shell脚本实现mysql数据库双机定时备份的方法，感兴趣的朋友一起看看吧

1 缘起与目的

最近有个需求，要求实现对某个数据库进行双机备份，每天凌晨备份一次，要求主机器只保留最近十五天的记录。经过深思熟虑的研究（疯狂baidu），我们决定用shell脚本加定时任务的方式来实现这个需求。

考虑到有的小伙伴mysql使用docker部署，最后我们也会贴出docker环境下的部署脚本。

环境准备：

  • 两台都装好ssh的机器，保证网络通常。我们使用的跨库复制命令scp基于openssh-clients-XXX，所以要求基础的ssh环境。
  • mysql服务所在机器Expect命令正常
  • mysql服务正常。（docker容器也可）

这里贴一段离线自动安装expect命令的脚本

#!/bin/bash
CURRENT_DIR=`pwd`

function install_expect()
{
    echo "install start..."
    cp expect-5.45.0.tar.gz tcl8.4.11-src.tar.gz /usr/
    cd /usr/
    tar -zxvf expect-5.45.0.tar.gz
    tar -zxvf tcl8.4.11-src.tar.gz
    cd tcl8.4.11/unix
    ./configure --prefix=/usr/tcl --enable-shared
    make -j8
    make install
    cp tclUnixPort.h ../generic/
    
    cd ../../expect-5.45
    ./configure --prefix=/usr/expect --with-tcl=/usr/tcl/lib --with-tclinclude=../tcl8.4.11/generic
    make -j8
    make install
    ln -s /usr/expect/bin/expect /usr/tcl/bin/expect
    ln -s /usr/expect/bin/expect /usr/bin/expect
    cd ..
    rm -rf expect-5.45.0.tar.gz tcl8.4.11-src.tar.gz
    cd $CURRENT_DIR
    echo "install finished..."
    
}
install_expect

在放上上述脚本所需要的两个包的下载地址

nchc.dl.sourceforge.net/sourceforge…

sourceforge.net/projects/ex…

2 确认环境

这个环节我们来手动确认一个脚本的关键命令，保证脚本能够正常执行。

2.1 导出数据库sql脚本

mysqldump -u数据库用户名 -p数据库密码 需要导出的数据库名称 > /mnt/data/mysql_backup/导出后的sql脚本名称.sql

sql脚本正常导出。

2.2 跨机器拷贝

scp -P ssh端口号 /mnt/data/mysql_backup/导出后的sql脚本名称.sql 另一台机器的用户名比如root@另一台机器IP:/mnt/data/mysql_backup/

第一次拷贝失败，原因另一台机器需要保证/mnt/data/mysql_backup/这个路径存在，再次执行即可成功。

2.3 docker容器确认环境

#数据库备份
docker exec -u root mysql bash -c 'rm -rf /usr/local/pm/* && mysqldump -u用户名 -p密码 数据库名 > /usr/local/pm/pm_yantai_$(date "+%Y-%m-%d").sql'
#sql拷贝出来
docker cp mysql:/usr/local/pm/pm_yantai_$(date "+%Y-%m-%d").sql 
#跨机器拷贝
scp -P ssh端口号 /mnt/data/mysql_backup/导出后的sql脚本名称.sql 另一台机器的用户名比如root@另一台机器IP:/mnt/data/mysql_backup/

3 构建脚本

3.1 脚本内容

1.非dockermysql

#!/bin/bash
#导出sql脚本
echo $(date "+%Y-%m-%d") backup start
echo mysql backup start
mysqldump -u数据库用户名 -p数据库密码 pm_prod2.0 > /mnt/data/mysql_backup/pm_shandong_$(date "+%Y-%m-%d").sql
echo mysql backup finish
#scp跨机器备份
echo sql scp start
/usr/bin/expect <<-EOF
set timeout -1;
spawn scp -P ssh端口号 /mnt/data/mysql_backup/pm_shandong_$(date "+%Y-%m-%d").sql 另一台机器用户名@另一台机器IP:/mnt/data/mysql_backup/
expect {
    "*password:" {send "另一台机器密码\r";exp_continue;}
    "yes/no" {send "yes\r";}
}
EOF
#删除过期sql
echo remove file /mnt/data/mysql_backup/pm_shandong_$(date -d "7 day ago" +%Y-%m-%d).sql
rm -rf /mnt/data/mysql_backup/pm_shandong_$(date -d "7 day ago" +%Y-%m-%d).sql
echo finish! The file is pm_shandong_$(date "+%Y-%m-%d").sql

2.docker容器mysql

#!/bin/bash
echo $(date "+%Y-%m-%d") backup start
echo mysql docker backup start
docker exec -u root mysql bash -c 'rm -rf /usr/local/pm/* && mysqldump -u用户名 -p密码 数据库名 > /usr/local/pm/pm_yantai_$(date "+%Y-%m-%d").sql'
echo mysql docker backup finish
echo sql copy start
docker cp mysql:/usr/local/pm/pm_yantai_$(date "+%Y-%m-%d").sql /usr/local/sdyy/pm/mysql_backup/pm_yantai_$(date "+%Y-%m-%d").sql
echo sql scp start
/usr/bin/expect <<-EOF
set timeout -1;
spawn scp -P ssh端口号 /usr/local/sdyy/pm/mysql_backup/pm_yantai_$(date "+%Y-%m-%d").sql 另一台机器用户名@另一台机器IP:/usr/local/sdyy/pm/mysql_backup/
expect {
    "*password:" {send "另一台机器登录密码\r";exp_continue;}
    "yes/no" {send "yes\r";}
}
EOF
echo remove file /usr/local/sdyy/pm/mysql_backup/pm_yantai_$(date -d "15 day ago" +%Y-%m-%d).sql
rm -rf /usr/local/sdyy/pm/mysql_backup/pm_yantai_$(date -d "15 day ago" +%Y-%m-%d).sql
echo finish! The file is pm_yantai_$(date "+%Y-%m-%d").sql

3.2 手动执行脚本确认正常

sh mysql_backup.sh

注意：如果你是从windows直接上传的shell脚本，应该会报如下错误。

这是因为你的备份文件多了个？

总的原因是在windows创建的文件格式是dos格式的缘故。

解决方式如下：

1.在Windows下转换：

利用一些编辑器如UltraEdit或EditPlus等工具先将脚本编码转换，再放到Linux中执行。转换方式如下（UltraEdit）：File-->Conversions-->DOS->UNIX即可。

2.在Linux下转换 用vim打开该sh文件，输入： :set ff 回车，显示fileformat=dos，重新设置下文件格式： :set ff=unix 保存退出: :wq

重新执行命令

4 定时任务

  • 编辑定时任务
crontab -e

在末尾行加上如下行

0 3 * * * /mnt/data/mysql_backup/mysql_backup.sh >> /mnt/data/mysql_backup/backup.log

前面是corn表达式，代表每天三点执行。

这里贴一段可能会用到的cron表达式。

后面是shell脚本绝对路径，后面将执行日志追加到日志文件。

保存并退出。

  • 查询当前有哪些定时任务
crontab -l

  • 添加可执行权限
chmod +x /mnt/data/mysql_backup/mysql_backup.sh

到此这篇关于shell脚本实现mysql数据库双机定时备份的文章就介绍到这了,更多相关shell脚本mysql定时备份内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！

您可能感兴趣的文章:

相关文章

  • Shell脚本中执行sql语句操作mysql的5种方法

    Shell脚本中执行sql语句操作mysql的5种方法

    这篇文章主要介绍了Shell脚本中执行sql语句操作mysql的5种方法,本文讲解了将SQL语句直接嵌入到shell脚本文件中、命令行调用单独的SQL文件、使用管道符调用SQL文件等方法,需要的朋友可以参考下
    2014-10-10
  • Linux 中的Logwatch命令

    Linux 中的Logwatch命令

    在Linux系统操作中，logwatch能够对系统log报告进行分析，用于Linux日志的处理，下面小编给大家详细介绍下Linux 中的Logwatch命令，感兴趣的朋友一起看看吧
    2017-09-09
  • linux 操作 ftp 常用命令

    linux 操作 ftp 常用命令

    ftp服务器在网上较为常见，Linux ftp命令的功能是用命令的方式来控制在本地机和远程机之间传送文件，这里详细介绍linux 操作 ftp 常用命令,需要的朋友参考下吧
    2017-12-12
  • Shell脚本实现的猜数字小游戏

    Shell脚本实现的猜数字小游戏

    这篇文章主要介绍了Shell脚本实现的猜数字小游戏,本文的猜数字规则相对一般规则的猜数字可能难度要大不少,需要的朋友可以参考下
    2014-12-12
  • Shell脚本创建指定大小文件的测试数据

    Shell脚本创建指定大小文件的测试数据

    这篇文章主要介绍了Shell脚本创建指定大小文件的测试数据,本文同时给出使用DD命令和Shell脚本解决这个需求,给出的脚本功能更加强大,需要的朋友可以参考下
    2015-03-03
  • shell 中数学计算总结

    shell 中数学计算总结

    shell中的赋值和操作默认都是字符串处理，在此记下shell中进行数学运算的几个特殊方法，以后用到的时候可以来看，呵呵
    2012-09-09
  • Linux Shell脚本中如何获取命令运行的结果

    Linux Shell脚本中如何获取命令运行的结果

    脚本中常常要获取一些命令的执行结果,比如当前目录pwd、当前时间date等等,下面这篇文章主要给大家介绍了关于Linux Shell脚本中如何获取命令运行的结果,需要的朋友可以参考下
    2023-06-06
  • 并发数据库压力测试的shell脚本代码

    并发数据库压力测试的shell脚本代码

    并发数据库压力测试的shell脚本，有需要的朋友可以参考下
    2013-02-02
  • Shell中的for循环总结

    Shell中的for循环总结

    这篇文章主要介绍了Shell中的for循环总结,本文讲解了shell中for循环用法、shell下for循环的几种方法等内容,需要的朋友可以参考下
    2015-05-05
  • Shell脚本中[]和[[]]区别详解

    Shell脚本中[]和[[]]区别详解

    在 Shell 脚本中,[] 和 [[]] 是用于条件测试的不同语法结构,它们有一些区别,主要体现在对字符串处理和表达式的支持上,这篇文章主要介绍了Shell脚本中[]和[[]]区别,需要的朋友可以参考下
    2023-12-12

最新评论