Linux环境下利用XtraBackup实现MySQL全量与增量自动化备份

巷口听风
巷口听风
发布时间:2026-10-14| 6人浏览过
原创

在Linux服务器中部署MySQL时,推荐使用Percona XtraBackup工具来实现热备。本方案通过Shell脚本自动化执行每日全量和每小时增量备份,利用innobackupex封装特性兼顾InnoDB与MyISAM引擎,并内置自动降级机制防止数据丢失。

XtraBackup备份原理与核心组件

XtraBackup在进行InnoDB表备份时,多个线程会复制独立表空间的.ibd文件,同时后台监控Redo Log的变化并记录至自身的日志文件中。拷贝完成后进入prepare阶段,工具采用类似崩溃恢复的机制,将数据文件同步至日志一致状态,并回滚未提交事务。针对并发写入导致的页面损坏问题,其底层逻辑利用了InnoDB的Doublewrite缓冲技术:当发生部分写失效时,通过页副本还原后再重做日志,保障数据完整性。

工具集主要包含两个组件:

  • xtrabackup:负责InnoDB/XtraDB物理文件的热备份。
  • innobackupex:基于Perl编写的封装脚本,提供MyISAM备份能力及全局锁控制。

环境准备与软件安装

第1步:确认系统环境

假设操作对象为Red Hat/CentOS系列系统。首先安装必要的依赖库以支持MySQL连接及IO异步功能:

yum install -y perl-DBD-MySQL perl-DBI perl-Time-HiRes libaio*

第2步:安装XtraBackup

推荐使用YUM源直接安装以获得最新兼容版本:

# 安装Percona官方源
rpm -Uhv http://www.percona.com/downloads/percona-release/percona-release-0.0-1.x86_64.rpm
# 使用yum进行安装
yum -y install percona-xtrabackup

验证安装是否成功,查询已安装包及路径:

rpm -qa |grep xtrabackup
rpm -ql percona-xtrabackup
percona-xtrabackup-xxx

自动化备份脚本详解

完整的备份流程需依赖脚本管理全量与增量关系。以下是配置好的自动化脚本,包含全量备份(每天04:20)、增量备份(每小时整点),且具备自动检测上一级备份目录存在的降级保护功能。

第3步:创建备份目录与基准配置文件

脚本预设备份基目录为/data/mysql_backup。为了管理增量依赖关系,需维护一个基准列表文件incremental_basedir_list.txt,格式为:基准目录|本次备份目录|备份类型【full|inc】。

第4步:编写并部署自动化脚本

以下为关键配置参数及逻辑说明:

  • 备份工具:建议使用较新的2.2.6或更新版本的innobackupex。
  • 线程数:THREAD_CNT=6,根据服务器负载调整。
  • 防冲突锁定:脚本通过检查进程运行状态避免全量与增量交叉。
  • 智能降级:若检测到上一步的备份目录不存在或被误删,脚本会自动重新执行一次全量备份,防止增量链断裂。
#!/bin/sh
#===================================================================================================
## 备份工具:
##  percona-xtrabackup-2.2.6
#
## 备份策略:
##  (1)、每天凌晨04:20点进行全量备份一次;
##  (2)、每隔1小时增量备份一次;
#
#===================================================================================================
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/bin:/usr/local/sbin
 
## DB备份基路径
BACKUP_BASE_DIR="/data/mysql_backup"
 
## 增量备份时,用到的基准目录列表文件
## 内容格式:基准目录|本次备份目录|备份类型【full|inc】
INC_BASE_LIST="${BACKUP_BASE_DIR}/incremental_basedir_list.txt"
 
## 备份工具路径
XTRABACKUP_PATH="/usr/local/xtrabup/bin/innobackupex"
 
## MySQL配置路径
MYSQL_CNF_PATH="/etc/my.cnf"
 
## 线程数
THREAD_CNT=6
 
#===================================================================================================
function print_help_info()
{
  echo "--------------------------------------------------------------"
  echo "Usage: $0 full | inc | help"
  echo "--------------------------------------------------------------"
  exit 1
}
 
[[ $# -lt 1 ]] && print_help_info
[[ -d ${BACKUP_BASE_DIR} ]] || mkdir -p ${BACKUP_BASE_DIR}
 
## xtrabackup基础套件不存在时,进行自动下载安装
if [[ ! -e ${XTRABACKUP_PATH} ]]; then
  cd /usr/local
  wget -q -O xtrabackup-2.2.6.tgz http://www.percona.com/redir/downloads/XtraBackup/LATEST/binary/tarball/percona-xtrabackup-2.2.6-5042-Linux-x86_64.tar.gz
  tar xvzf xtrabackup-2.2.6.tgz >/dev/null 2>&1 && rm -f xtrabackup-2.2.6.tgz
  mv percona-xtrabackup-2.2.6-Linux-x86_64 xtrabackup
   
  for FNAME in `ls -1t /usr/local/xtrabackup/bin`
  do
    rm -f /usr/bin/${FNAME} && ln -s /usr/local/xtrabackup/bin/${FNAME} /usr/bin/${FNAME}
  done
fi
 
## 只允许一个副本运行,以避免全量备份与增量备份出现交叉,发生数据错乱的可能性
[[ -n `ps uax | grep innobackupex | grep -v grep` ]] && exit 1
 
## 目录名默认精确到分钟,为避免意外情况,导致备份任务失败,可以精确到秒
CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M`
[[ -d ${CURRENT_BAK_PATH} ]] && CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M-%S`
 
#===================================================================================================
## 全量备份
if [[ "$1" == "full" ]]; then
  ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
  echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
 
## 增量备份
elif [[ "$1" == "inc" ]]; then
  ## 基准目录列表文件不存在或者为空的情况,需要做一次全量备份
  if [[ ! -f ${INC_BASE_LIST} || `sed '/^$/d' ${INC_BASE_LIST} | wc -l` -eq 0 ]]; then
    ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
    echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
   
  ## 不存在任何目录的情况,需要做一次全量备份,以避免增量备份失败
  elif [[ `find ${BACKUP_BASE_DIR} -maxdepth 1 -type d | wc -l` -eq 1 ]]; then
    ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
    echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
   
  ## 在上一次备份的基础上,进行增量备份
  else
    PREV_BACKUP_DIR=`sed '/^$/d' ${INC_BASE_LIST} | tail -1 | awk -F '|' '{print $2}'`
    ## 上次的备份目录不存在或者目录为空的情况,以避免人为删除的可能性【针对部分恶意删除的情况,目前还没有较好的检查方法】
    if [[ ! -d ${PREV_BACKUP_DIR} || -z `ls ${PREV_BACKUP_DIR}` ]]; then
      ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
      echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
    else
      ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp --incremental ${CURRENT_BAK_PATH} --incremental-basedir=${PREV_BACKUP_DIR}
      echo "${PREV_BACKUP_DIR}|${CURRENT_BAK_PATH}|inc" >> ${INC_BASE_LIST}
    fi
  fi
 
elif [[ "$1" == "help" ]]; then
  print_help_info
 
else
  print_help_info
fi
 
## 删除2周前的数据备份
rm -rf ${BACKUP_BASE_DIR}/`date -d '14 days ago' +'%F'`_*
sed -i "/`date -d '14 days ago' +'%F'`/d" ${INC_BASE_LIST}
 
#===================================================================================================
##The End
 
相关标签:

免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。

Python 相关产品和应用

全部下载
Selenium

Selenium

4.51.0 · Windows

用于浏览器自动化和 Web 测试的 Python 工具。

scikit-learn

scikit-learn

1.9.1 · Windows

常用 Python 机器学习算法与模型评估工具库。

Black

Black

26.10.1 · Windows

强调一致性的 Python 自动代码格式化工具。

Ruff

Ruff

0.17.1 · macOS

由 Rust 编写的高速 Python 代码检查和格式化工具。

pytest

pytest

9.1.1 · Windows

简洁而强大的 Python 自动化测试框架。

FastAPI

FastAPI

0.146.0 · Windows

高性能 Python API 框架,支持类型提示和自动接口文档。

Flask

Flask

3.1.3 · Windows

轻量灵活的 Python Web 应用框架。

Django

Django

6.1.2 · Windows

成熟的 Python Web 框架,适合构建内容站点和业务系统。

Spyder

Spyder

6.1.7 · Windows

面向科学计算与数据分析的 Python 集成开发环境。

SciPy

SciPy

1.18.1 · Windows

面向科学、工程和技术计算的 Python 算法库。