Linux环境下利用XtraBackup实现MySQL全量与增量自动化备份
在Linux服务器中部署MySQL时,推荐使用Percona XtraBackup工具来实现热备。本方案通过Shell脚本自动化执行每日全量和每小时增量备份,利用innobackupex封装特性兼顾InnoDB与MyISAM引擎,并内置自动降级机制防止数据丢失。
XtraBackup备份原理与核心组件
XtraBackup在进行InnoDB表备份时,多个线程会复制独立表空间的.ibd文件,同时后台监控Redo Log的变化并记录至自身的日志文件中。拷贝完成后进入prepare阶段,工具采用类似崩溃恢复的机制,将数据文件同步至日志一致状态,并回滚未提交事务。针对并发写入导致的页面损坏问题,其底层逻辑利用了InnoDB的Doublewrite缓冲技术:当发生部分写失效时,通过页副本还原后再重做日志,保障数据完整性。
工具集主要包含两个组件:
xtrabackup:负责InnoDB/XtraDB物理文件的热备份。innobackupex:基于Perl编写的封装脚本,提供MyISAM备份能力及全局锁控制。
环境准备与软件安装
第1步:确认系统环境
假设操作对象为Red Hat/CentOS系列系统。首先安装必要的依赖库以支持MySQL连接及IO异步功能:
yum install -y perl-DBD-MySQL perl-DBI perl-Time-HiRes libaio*
第2步:安装XtraBackup
推荐使用YUM源直接安装以获得最新兼容版本:
# 安装Percona官方源
rpm -Uhv http://www.percona.com/downloads/percona-release/percona-release-0.0-1.x86_64.rpm
# 使用yum进行安装
yum -y install percona-xtrabackup
验证安装是否成功,查询已安装包及路径:
rpm -qa |grep xtrabackup
rpm -ql percona-xtrabackup
percona-xtrabackup-xxx
自动化备份脚本详解
完整的备份流程需依赖脚本管理全量与增量关系。以下是配置好的自动化脚本,包含全量备份(每天04:20)、增量备份(每小时整点),且具备自动检测上一级备份目录存在的降级保护功能。
第3步:创建备份目录与基准配置文件
脚本预设备份基目录为/data/mysql_backup。为了管理增量依赖关系,需维护一个基准列表文件incremental_basedir_list.txt,格式为:基准目录|本次备份目录|备份类型【full|inc】。
第4步:编写并部署自动化脚本
以下为关键配置参数及逻辑说明:
- 备份工具:建议使用较新的2.2.6或更新版本的
innobackupex。 - 线程数:
THREAD_CNT=6,根据服务器负载调整。 - 防冲突锁定:脚本通过检查进程运行状态避免全量与增量交叉。
- 智能降级:若检测到上一步的备份目录不存在或被误删,脚本会自动重新执行一次全量备份,防止增量链断裂。
#!/bin/sh
#===================================================================================================
## 备份工具:
## percona-xtrabackup-2.2.6
#
## 备份策略:
## (1)、每天凌晨04:20点进行全量备份一次;
## (2)、每隔1小时增量备份一次;
#
#===================================================================================================
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/bin:/usr/local/sbin
## DB备份基路径
BACKUP_BASE_DIR="/data/mysql_backup"
## 增量备份时,用到的基准目录列表文件
## 内容格式:基准目录|本次备份目录|备份类型【full|inc】
INC_BASE_LIST="${BACKUP_BASE_DIR}/incremental_basedir_list.txt"
## 备份工具路径
XTRABACKUP_PATH="/usr/local/xtrabup/bin/innobackupex"
## MySQL配置路径
MYSQL_CNF_PATH="/etc/my.cnf"
## 线程数
THREAD_CNT=6
#===================================================================================================
function print_help_info()
{
echo "--------------------------------------------------------------"
echo "Usage: $0 full | inc | help"
echo "--------------------------------------------------------------"
exit 1
}
[[ $# -lt 1 ]] && print_help_info
[[ -d ${BACKUP_BASE_DIR} ]] || mkdir -p ${BACKUP_BASE_DIR}
## xtrabackup基础套件不存在时,进行自动下载安装
if [[ ! -e ${XTRABACKUP_PATH} ]]; then
cd /usr/local
wget -q -O xtrabackup-2.2.6.tgz http://www.percona.com/redir/downloads/XtraBackup/LATEST/binary/tarball/percona-xtrabackup-2.2.6-5042-Linux-x86_64.tar.gz
tar xvzf xtrabackup-2.2.6.tgz >/dev/null 2>&1 && rm -f xtrabackup-2.2.6.tgz
mv percona-xtrabackup-2.2.6-Linux-x86_64 xtrabackup
for FNAME in `ls -1t /usr/local/xtrabackup/bin`
do
rm -f /usr/bin/${FNAME} && ln -s /usr/local/xtrabackup/bin/${FNAME} /usr/bin/${FNAME}
done
fi
## 只允许一个副本运行,以避免全量备份与增量备份出现交叉,发生数据错乱的可能性
[[ -n `ps uax | grep innobackupex | grep -v grep` ]] && exit 1
## 目录名默认精确到分钟,为避免意外情况,导致备份任务失败,可以精确到秒
CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M`
[[ -d ${CURRENT_BAK_PATH} ]] && CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M-%S`
#===================================================================================================
## 全量备份
if [[ "$1" == "full" ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 增量备份
elif [[ "$1" == "inc" ]]; then
## 基准目录列表文件不存在或者为空的情况,需要做一次全量备份
if [[ ! -f ${INC_BASE_LIST} || `sed '/^$/d' ${INC_BASE_LIST} | wc -l` -eq 0 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 不存在任何目录的情况,需要做一次全量备份,以避免增量备份失败
elif [[ `find ${BACKUP_BASE_DIR} -maxdepth 1 -type d | wc -l` -eq 1 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 在上一次备份的基础上,进行增量备份
else
PREV_BACKUP_DIR=`sed '/^$/d' ${INC_BASE_LIST} | tail -1 | awk -F '|' '{print $2}'`
## 上次的备份目录不存在或者目录为空的情况,以避免人为删除的可能性【针对部分恶意删除的情况,目前还没有较好的检查方法】
if [[ ! -d ${PREV_BACKUP_DIR} || -z `ls ${PREV_BACKUP_DIR}` ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
else
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp --incremental ${CURRENT_BAK_PATH} --incremental-basedir=${PREV_BACKUP_DIR}
echo "${PREV_BACKUP_DIR}|${CURRENT_BAK_PATH}|inc" >> ${INC_BASE_LIST}
fi
fi
elif [[ "$1" == "help" ]]; then
print_help_info
else
print_help_info
fi
## 删除2周前的数据备份
rm -rf ${BACKUP_BASE_DIR}/`date -d '14 days ago' +'%F'`_*
sed -i "/`date -d '14 days ago' +'%F'`/d" ${INC_BASE_LIST}
#===================================================================================================
##The End
免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。









