Linux下的MySQL自动备份shell

字数 14943阅读 2200评论 0赞 1

<ol><li>#!/bin/bash  </li><li>  </li><li># mysql 的备份脚本  </li><li># 备份原理:  </li><li># 1  </li><li>#   使用列举出所有的库;  </li><li># 2  </li><li>#   使用每个库,列举出每张表,除了指定忽略的库;  </li><li># 3  </li><li>#   使用mysqldump 导出每一张表到文件:主机名/年月日/库/表.mysqldump.sql  </li><li># 4  </li><li>#   验证每张表的sql文件是否包含完成标志;  </li><li># 5  </li><li>#   压缩每个sql文件并删除本sql文件  </li><li># 6  </li><li>#   强制删除超过x天的备份文件夹全部文件  </li><li># 7  </li><li>#   发送处理日志到指定email  </li><li># 8  </li><li>#   请配合同步工具多处服务器备份  </li><li>  </li><li># mysql备份配置信息  </li><li>  </li><li>mysqlBackupUser="backuper"  </li><li># 密码不要包含"号  </li><li>mysqlBackupPwd="**#&&&#ddddddd("  </li><li># 日志文件路径/var/log/文件名.log,只记录每次运行的日志  </li><li># 不备份的数据库名称,每个名称使用()号包住,如不备份 abc.d 和 abc.e二个数据库,就拼写成"(abc.d)(abc.e)",名字不区分大小写  </li><li>notBackupDatabases="(mysql)(information_schema)(performance_schema)"  </li><li>#备份的目录,后面需要加/  </li><li>backupRoot="/var/backup/hostname-mysql-data/"  </li><li># 删除存在大于以下天数的备份目录  </li><li>deleteRootOutDays=30  </li><li>#必须是完整的email地址,因为正面的命令使用到  </li><li>smtpUser="qidizi@qq.com"  </li><li>#smtp://协议是必须的  </li><li>smtpHost="smtp://smtp.qq.com:25"  </li><li>#密码不能包含又引号防止shell出错  </li><li>smtpPwd="pwd"  </li><li>smtpTo="qq@qq.com"  </li><li>smtpSubject="主机上的mysql自动备份脚本执行信息"  </li><li># 配置结束行  </li><li>  </li><li>shName=$(basename $0)  </li><li>shLogPath="/var/log/${shName}.log"  </li><li>  </li><li>ver=$(realpath --version 2>&1)  </li><li>  </li><li>if [ "$?" -ne "0" ];then  </li><li>    echo "测试realpath --version的版本时出错,中止,出错信息:${ver}"  </li><li>    exit 10  </li><li>fi  </li><li>  </li><li>echo -e "$(date "+%Y-%m-%d %R:%S") By $(realpath ${0})n" > $shLogPath  </li><li>  </li><li>function myExit(){  </li><li>    exitCode=$1  </li><li>    ver=$(mailx -V 2>&1)  </li><li>    appendLog "退出时间:$(date +%Y-%m-%d/%R:%S)"  </li><li>    appendLog "服务器信息:n$(ifconfig 2>&1)"  </li><li>  </li><li>    if [ "$?" -ne "0" ];then  </li><li>        appendLog "测试用来发送email的命令mailx时出错,请安装,如centos使用yum install mailx,忽略发送email通知的步骤,出错信息:${ver}"  </li><li>    else  </li><li>        #发送email  </li><li>        mailInfo=$(mailx -v -s "${smtpSubject}" -S from="${smtpUser}"  -S smtp-auth="login" -S smtp="${smtpHost}" -S smtp-auth-user="${smtpUser}" -S smtp-auth-password="${smtpPwd}" -S ssl-verify=ignore  "${smtpTo}" < $shLogPath 2>&1)  </li><li>        # 无法附加发送过程的日志给email通知中,所以,只能保存到日志中,如果需要了解email的交互过程,请到日志文件中查看  </li><li>        appendLog "退出时间到发送email的时间:$(date +%Y-%m-%d/%R:%S)n使用mailx发送emial通知交互如下:nn${mailInfo}"  </li><li>    fi  </li><li>  </li><li>    exit $exitCode  </li><li>}  </li><li>  </li><li># 追加日志  </li><li>function appendLog(){  </li><li>    echo -e "${1} n" >> $shLogPath  </li><li>}  </li><li>  </li><li>if [ ! -e "${backupRoot}" ];then  </li><li>    appendLog "备份根目录 ${backupRoot} 不存在,已创建"  </li><li>    mkInfo=$(mkdir -p $backupRoot 2>&1)  </li><li>  </li><li>    if [ "$?" -ne "0" ];then  </li><li>        appendLog "尝试创建备份目录 ${backupRoot}失败:${mkInfo}"  </li><li>        myExit 1  </li><li>    fi  </li><li>  </li><li>elif [ ! -d "${backupRoot}" ];then  </li><li>    appendLog "备份根目录路径虽然存在,但是它不是目录,中止:${backupRoot}"  </li><li>    myExit 2  </li><li>fi  </li><li>  </li><li>#今天的备份目录  </li><li>todayRoot="${backupRoot}$(date +%Y%m%d%H)/"  </li><li>  </li><li>if [ ! -e "${todayRoot}" ];then  </li><li>    mkInfo=$(mkdir $todayRoot 2>&1)  </li><li>  </li><li>    if [ "$?" -ne "0" ];then  </li><li>        appendLog "尝试创建本轮的备份目录 ${todayRoot} 失败,中止:${mkInfo}"  </li><li>        myExit 3  </li><li>    fi  </li><li>fi  </li><li>  </li><li>appendLog "今天的备份目录:${todayRoot}"  </li><li>ver=$(mysql --version 2>&1)  </li><li>  </li><li>if [ "$?" -ne "0" ];then  </li><li>    appendLog "测试mysql的版本时出错,中止,出错信息:${ver}"  </li><li>    myExit 4  </li><li>fi  </li><li>  </li><li>ver=$(mysqldump -V 2>&1)  </li><li>  </li><li>if [ "$?" -ne "0" ];then  </li><li>    appendLog "测试mysqldump命令出错,请安装,中止,出错信息:${ver}"  </li><li>    myExit 5  </li><li>fi  </li><li>  </li><li>ver=$(tail --version 2>&1)  </li><li>  </li><li>if [ "$?" -ne "0" ];then  </li><li>    appendLog "测试tail命令的版本时出错,中止,出错信息:${ver}"  </li><li>    myExit 41  </li><li>fi  </li><li>  </li><li>ver=$(tar  --version 2>&1)  </li><li>  </li><li>if [ "$?" -ne "0" ];then  </li><li>    appendLog "测试tar命令的版本时出错,中止,出错信息:${ver}"  </li><li>    myExit 42  </li><li>fi  </li><li>  </li><li>databases=$(mysql --host="127.0.0.1" --user="${mysqlBackupUser}"  --password="${mysqlBackupPwd}" --execute="show databases;"  --silent --skip-column-names --unbuffered 2>&1)  </li><li>  </li><li>if [ "$?" -ne "0" ]; then  </li><li>    appendLog "尝试使用配置信息列举mysql的数据库名时出错,中止:${databases}"  </li><li>    myExit 6  </li><li>else  </li><li>    appendLog "全部的数据库名称列表如下:n ${databases}"  </li><li>fi  </li><li>  </li><li>  </li><li>for database in $databases; do  </li><li>    # 匹配时不区分大小写  </li><li>    echo $notBackupDatabases|grep -i "(${database})" >/dev/null  </li><li>  </li><li>    # 属于不需要备份的库  </li><li>    if [ "$?" -eq "0" ];then  </li><li>        appendLog "数据库 ${database} 被指定不需要备份,跳过"  </li><li>        continue  </li><li>    fi  </li><li>  </li><li>    databaseRoot="${todayRoot}${database}/"  </li><li>  </li><li>    if [ ! -e "${databaseRoot}" ];then  </li><li>        mkInfo=$(mkdir $databaseRoot 2>&1)  </li><li>  </li><li>        if [ "$?" -ne "0" ];then  </li><li>            appendLog "尝试创建数据库 ${databaseRoot} 的目录失败,中止:${mkInfo}"  </li><li>            myExit 7  </li><li>        fi  </li><li>    fi  </li><li>  </li><li>  </li><li>    tables=$(mysql --host="127.0.0.1" --user="${mysqlBackupUser}"  --password="${mysqlBackupPwd}" --execute="show tables from `${database}`;"  --silent --skip-column-names --unbuffered 2>&1)  </li><li>  </li><li>if [ "$?" -ne "0" ]; then  </li><li>    appendLog "尝试使用配置信息列举mysql的数据库 ${database} 表的列表时出错,中止:${tables}"  </li><li>    myExit 8  </li><li>else  </li><li>    appendLog "${database}数据库表的全部列表如下:n ${tables}"  </li><li>fi  </li><li>  </li><li>    for table in $tables; do  </li><li>        sqlPath="${databaseRoot}${table}.sql"  </li><li>        timeStart="开始dump时间点: $(date +%Y-%m-%d/%R:%S)"  </li><li>        dumpInfo=$(mysqldump --host="127.0.0.1" --user="${mysqlBackupUser}" --password="${mysqlBackupPwd}" --dump-date --comments --quote-names --result-file="${sqlPath}" --quick  --databases "${database}" --tables "${table}" 2>&1 )  </li><li>        timeEnd="完成dump时间点: $(date +%Y-%m-%d/%R:%S)"  </li><li>  </li><li>        if [ "$?" -ne "0" ];then  </li><li>            appendLog "尝试导出数据库 ${database}的表 ${table} 失败,中止:${dumpInfo}"  </li><li>            myExit 9  </li><li>        else  </li><li>            appendLog "导出数据库 ${database}的表 ${table} 到 ${sqlPath} 成功:${dumpInfo}; 耗时: 从 ${timeStart} 至 ${timeEnd}"  </li><li>  </li><li>            tail --lines=10 "${sqlPath}" |grep "-- Dump completed" 2>&1 > /dev/null  </li><li>  </li><li>            if [ "$?" -ne "0" ];then  </li><li>                appendLog "没有发发现内容中的 'Dump completed' 正常完成标志字符,请检查dump文件${sqlPath},请登录ssh查看此文件是否备份成功"  </li><li>            else  </li><li>                appendLog "检测到备份文件内容中的'Dump completed'标志字符,dump文件${sqlPath}应该备份成功了"  </li><li>            fi  </li><li>  </li><li>        fi  </li><li>  </li><li>    done  </li><li>  </li><li>done  </li><li>  </li><li>appendLog "n ------数据库备份全部完成------n"  </li><li>  </li><li># 开始压缩,把压缩放到备份结束是防止压缩时间过长,如果出现锁表,会影响网站运行  </li><li>sqls=$(ls --almost-all --ignore-backups --indicator-style=slash -1 ${todayRoot}*/*.sql 2>&1)  </li><li>  </li><li>for path in $sqls; do  </li><li>    #路径中包含了绝对路径,tar命令还需要改进  </li><li>    sqlDir=$(dirname $path)  </li><li>    sql=$(basename $path)  </li><li>    tarInfo=$(tar --create --remove-files --bzip2 --absolute-names --directory="${sqlDir}"   --add-file="${sql}" --file="${path}.tar.bz2")  </li><li>  </li><li>    if [ "$?" -ne "0" ];then  </li><li>        appendLog "压缩并删除${path}文件时出错:n${tarInfo}"  </li><li>    else  </li><li>        appendLog "已压缩并删除${path}"  </li><li>    fi  </li><li>done  </li><li>  </li><li>appendLog "------完成压缩操作-----"  </li><li>#开始清理大于x天的备份  </li><li>  </li><li>daysDir=$(ls --almost-all --ignore-backups --indicator-style=slash -1 "${backupRoot}" 2>&1)  </li><li>  </li><li>for bkDir in $daysDir;do  </li><li>    bkDir="${backupRoot}${bkDir}"  </li><li>  </li><li>    if [ ! -d "${bkDir}" ];then  </li><li>        appendLog "准备删除过期的备份操作时,因为${bkDir}不是一个目录,跳过"  </li><li>        continue  </li><li>    fi  </li><li>  </li><li>    dirName=$(basename $bkDir)  </li><li>    #test  </li><li>    echo $dirName | grep -P "^d{10}$" 2>&1 >/dev/null  </li><li>  </li><li>    if [ "$?" -ne "0" ];then  </li><li>        appendLog "准备删除过期备份目录时,检测到待删除目录名不是10位数字,跳过:${bkDir}"  </li><li>        continue  </li><li>    fi  </li><li>  </li><li>    outDay=$(date --date="-${deleteRootOutDays}day" "+%Y%m%d00")  </li><li>  </li><li>    #如果文件时间小于这个过期时间那么就强制删除整个目录  </li><li>    if [ "${dirName}" -lt "${outDay}" ];then  </li><li>        rmInfo=$(rm --force --preserve-root --recursive "${bkDir}" 2>&1)  </li><li>        appendLog "发现一个过期备份目录 ${bkDir},已经超过 ${deleteRootOutDays} 天,也就是小于${outDay}就会被删除 ,被强制删除状态(0为成功):${?} ${rmInfo};"  </li><li>    fi  </li><li>  </li><li>done  </li><li>  </li><li>appendLog "------完成清理过期备份文件夹操作----"  </li><li>appendLog "空间使用情况如下:n $(df -h)"  </li><li>appendLog "当前备份文件占用空间情况:n $(du -hs ${todayRoot})"  </li><li>myExit 0 <br></li></ol>

shell 数据库 MySQL Linux

著作权归作者所有

如果觉得我的文章对您有用，请点赞。您的支持将鼓励我继续创作！

添加新评论0 条评论

Ctrl+Enter 发表

匿名评论

Linux下的MySQL自动备份shell

添加新评论0 条评论

作者其他文章

相关文章

相关问题

相关资料