真实的国产乱ⅩXXX66竹夫人,五月香六月婷婷激情综合,亚洲日本VA一区二区三区,亚洲精品一区二区三区麻豆

成都創(chuàng)新互聯(lián)網(wǎng)站制作重慶分公司

Xtrabackup備份恢復(fù)原理是什么

這篇文章給大家介紹Xtrabackup備份恢復(fù)原理是什么，內(nèi)容非常詳細(xì)，感興趣的小伙伴們可以參考借鑒，希望對(duì)大家能有所幫助。

成都創(chuàng)新互聯(lián)公司長(zhǎng)期為上千家客戶提供的網(wǎng)站建設(shè)服務(wù)，團(tuán)隊(duì)從業(yè)經(jīng)驗(yàn)10年，關(guān)注不同地域、不同群體，并針對(duì)不同對(duì)象提供差異化的產(chǎn)品和服務(wù)；打造開(kāi)放共贏平臺(tái)，與合作伙伴共同營(yíng)造健康的互聯(lián)網(wǎng)生態(tài)環(huán)境。為克拉瑪依企業(yè)提供專業(yè)的成都做網(wǎng)站、成都網(wǎng)站制作、成都外貿(mào)網(wǎng)站建設(shè)，克拉瑪依網(wǎng)站改版等技術(shù)服務(wù)。擁有十年豐富建站經(jīng)驗(yàn)和眾多成功案例,為您定制開(kāi)發(fā)。

一、Xtrabackup備份恢復(fù)原理
   備份innodb表時(shí)，xtrabackup若干個(gè)線程拷貝獨(dú)立表空間的.ibd文件，并不停監(jiān)視此過(guò)程中redo log的變化，添加到自己的事務(wù)日志文件（xtrabackup_logfile）中。在此過(guò)程中，發(fā)生的
物理寫(xiě)操作越多，xtrabackup_logfile越大。在拷貝完成后的第一個(gè)prepare階段，xtrabackup采用類似于innodb崩潰恢復(fù)的方法，把數(shù)據(jù)文件恢復(fù)到與日志文件一致的狀態(tài)，并把未提交的事
務(wù)回滾。如果同時(shí)需要備份myisam表以及innodb表結(jié)構(gòu)等文件，那么就需要用flush tables with lock來(lái)獲得全局鎖，開(kāi)始拷貝這些不再變化的文件，同時(shí)獲得binlog位置，拷貝結(jié)束后釋放鎖，
也停止對(duì)redo log的監(jiān)視。
   很多同學(xué)對(duì)上面的理解有混淆，以為拷貝.ibd文件就跟操作系統(tǒng)拷貝文件一樣。其實(shí)這里涉及到fractured page的問(wèn)題，他應(yīng)該會(huì)重新讀取（應(yīng)該也有重試次數(shù)，超過(guò)后備份不成功）。
   其實(shí)這個(gè)原理很簡(jiǎn)單，了解下doublewrite就可以理解了“本段摘錄自《MySQL技術(shù)內(nèi)幕：InnoDB存儲(chǔ)引擎》”：
   如果說(shuō)插入緩沖帶給InnoDB存儲(chǔ)引擎的是性能，那么兩次寫(xiě)帶給InnoDB存儲(chǔ)引擎的是數(shù)據(jù)的可靠性。當(dāng)數(shù)據(jù)庫(kù)宕機(jī)時(shí)，可能發(fā)生數(shù)據(jù)庫(kù)正在寫(xiě)一個(gè)頁(yè)面，而這個(gè)頁(yè)只寫(xiě)了一部分（比如16K的
頁(yè)，只寫(xiě)前4K的頁(yè)）的情況，我們稱之為部分寫(xiě)失效（partial page write）。在InnoDB存儲(chǔ)引擎未使用double write技術(shù)前，曾出現(xiàn)過(guò)因?yàn)椴糠謱?xiě)失效而導(dǎo)致數(shù)據(jù)丟失的情況。
   有人也許會(huì)想，如果發(fā)生寫(xiě)失效，可以通過(guò)重做日志進(jìn)行恢復(fù)。這是一個(gè)辦法。但是必須清楚的是，重做日志中記錄的是對(duì)頁(yè)的物理操作，如偏移量800，寫(xiě)“aaaa”記錄。如果這個(gè)頁(yè)本身
已經(jīng)損壞，再對(duì)其進(jìn)行重做是沒(méi)有意義的。這就是說(shuō)，在應(yīng)用（apply）重做日志前，我們需要一個(gè)頁(yè)的副本，當(dāng)寫(xiě)入失效發(fā)生時(shí)，先通過(guò)頁(yè)的副本來(lái)還原該頁(yè)，再進(jìn)行重做，這就是doublewrite。

二、備份腳本    
#!/bin/sh
#===================================================================================================
## 備份工具：
##    percona-xtrabackup-2.2.6
##
## 備份策略：
##    (1)、每天凌晨04:20點(diǎn)進(jìn)行全量備份一次；
##    (2)、每隔1小時(shí)增量備份一次；
##
#===================================================================================================
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/bin:/usr/local/sbin
 
## DB備份基路徑
BACKUP_BASE_DIR="/data/mysql_backup"
 
## 增量備份時(shí)，用到的基準(zhǔn)目錄列表文件
## 內(nèi)容格式：基準(zhǔn)目錄|本次備份目錄|備份類型【full|inc】
INC_BASE_LIST="${BACKUP_BASE_DIR}/incremental_basedir_list.txt"
 
## 備份工具路徑
XTRABACKUP_PATH="/usr/local/xtrabackup/bin/innobackupex"
 
## MySQL配置路徑
MYSQL_CNF_PATH="/etc/my.cnf"
 
## 線程數(shù)
THREAD_CNT=6
 
#===================================================================================================
function print_help_info()
{
    echo "--------------------------------------------------------------"
    echo "Usage: $0 full | inc | help"
    echo "--------------------------------------------------------------"
    echo ""
    exit 1
}
 
[[ $# -lt 1 ]] && print_help_info
[[ -d ${BACKUP_BASE_DIR} ]] || mkdir -p ${BACKUP_BASE_DIR}
 
## xtrabackup基礎(chǔ)套件不存在時(shí)，進(jìn)行自動(dòng)下載安裝
if [[ ! -e ${XTRABACKUP_PATH} ]]; then
    cd /usr/local
    wget -q -O xtrabackup-2.2.6.tgz http://www.percona.com/redir/downloads/XtraBackup/LATEST/binary/tarball/percona-xtrabackup-2.2.6-5042-Linux-x86_64.tar.gz
    tar xvzf xtrabackup-2.2.6.tgz >/dev/null 2>&1 && rm -f xtrabackup-2.2.6.tgz
    mv percona-xtrabackup-2.2.6-Linux-x86_64 xtrabackup-2.2.6
    rm -rf xtrabackup && ln -s xtrabackup-2.2.6 xtrabackup
     
    for FNAME in `ls -1t /usr/local/xtrabackup/bin`
    do
        rm -f /usr/bin/${FNAME} && ln -s /usr/local/xtrabackup/bin/${FNAME} /usr/bin/${FNAME}
    done
fi
 
## 只允許一個(gè)副本運(yùn)行，以避免全量備份與增量備份出現(xiàn)交叉，發(fā)生數(shù)據(jù)錯(cuò)亂的可能性
##[[ -n `ps uax | grep innobackupex | grep -v grep` ]] && exit 1
 
## 目錄名默認(rèn)精確到分鐘，為避免意外情況，導(dǎo)致備份任務(wù)失敗，可以精確到秒
CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M`
[[ -d ${CURRENT_BAK_PATH} ]] && CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M-%S`
 
#===================================================================================================
## 全量備份
if [[ "$1" == "full" ]]; then
    ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
    echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
 
## 增量備份
elif [[ "$1" == "inc" ]]; then
    ## 基準(zhǔn)目錄列表文件不存在或者為空的情況，需要做一次全量備份
    if [[ ! -f ${INC_BASE_LIST} || `sed '/^$/d' ${INC_BASE_LIST} | wc -l` -eq 0 ]]; then
        ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
        echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
     
    ## 不存在任何目錄的情況，需要做一次全量備份，以避免增量備份失敗
    elif [[ `find ${BACKUP_BASE_DIR} -maxdepth 1 -type d | wc -l` -eq 1 ]]; then
        ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
        echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
     
    ## 在上一次備份的基礎(chǔ)上，進(jìn)行增量備份
    else
        PREV_BACKUP_DIR=`sed '/^$/d' ${INC_BASE_LIST} | tail -1  | awk -F '|' '{print $2}'`
        ## 上次的備份目錄不存在或者目錄為空的情況，以避免人為刪除的可能性【針對(duì)部分惡意刪除的情況，目前還沒(méi)有較好的檢查方法】
        if [[ ! -d ${PREV_BACKUP_DIR} || -z `ls ${PREV_BACKUP_DIR}` ]]; then
            ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
            echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
        else
            ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp --incremental ${CURRENT_BAK_PATH} --incremental-basedir=${PREV_BACKUP_DIR}
            echo "${PREV_BACKUP_DIR}|${CURRENT_BAK_PATH}|inc" >> ${INC_BASE_LIST}
        fi
    fi
 
elif [[ "$1" == "help" ]]; then
    print_help_info
 
else
    print_help_info
fi
 
## 刪除2周前的數(shù)據(jù)備份
rm -rf ${BACKUP_BASE_DIR}/`date -d '14 days ago' +'%F'`_*
sed -i "/`date -d '14 days ago' +'%F'`/d" ${INC_BASE_LIST}
 
#===================================================================================================
##The End
 
####################################################################################################
## 需要添加的crontab信息：
##     (1)、全量備份
##     20 04 * * * /data/scripts/mysql_backup.sh full >/dev/null 2>&1
##
##     (2)、增量備份
##     00 * * * * /data/scripts/mysql_backup.sh inc >/dev/null 2>&1
##
####################################################################################################
 
####################################################################################################
## DB數(shù)據(jù)恢復(fù)步驟：
##    (1)、應(yīng)用基準(zhǔn)
##    innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full
##
##    (2)、應(yīng)用第一個(gè)增量備份
##    innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_one
##
##    (3)、應(yīng)用第二個(gè)增量備份
##    innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_two
##
##    (4)、再次應(yīng)用基準(zhǔn)
##    innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full
##
##    (5)、恢復(fù)
##    innobackupex --user=root --defaults-file=/etc/my.cnf --copy-back /data/mysql_backup/full
####################################################################################################

三、效果展示

Xtrabackup備份恢復(fù)原理是什么

Xtrabackup備份恢復(fù)原理是什么

Xtrabackup備份恢復(fù)原理是什么

# cat mysql_backup.sh

#!/bin/sh
#===================================================================================================
## 備份工具：
##    percona-xtrabackup-2.2.6
##
## 備份策略：
##    (1)、每天凌晨04:20點(diǎn)進(jìn)行全量備份一次；
##    (2)、每隔1小時(shí)增量備份一次；
##
#===================================================================================================
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/bin:/usr/local/sbin

## DB備份基路徑
BACKUP_BASE_DIR="/data/mysql_backup"

## 增量備份時(shí)，用到的基準(zhǔn)目錄列表文件
## 內(nèi)容格式：基準(zhǔn)目錄|本次備份目錄|備份類型【full|inc】
INC_BASE_LIST="${BACKUP_BASE_DIR}/incremental_basedir_list.txt"

## 備份工具路徑
XTRABACKUP_PATH="/usr/local/xtrabackup/bin/innobackupex"

## MySQL配置路徑
MYSQL_CNF_PATH="/etc/my.cnf"

## 線程數(shù)
THREAD_CNT=6

#===================================================================================================
function print_help_info()
{
    echo "--------------------------------------------------------------"
    echo "Usage: $0 full | inc | help"
    echo "--------------------------------------------------------------"
    echo ""
    exit 1
}

[[ $# -lt 1 ]] && print_help_info
[[ -d ${BACKUP_BASE_DIR} ]] || mkdir -p ${BACKUP_BASE_DIR}

## xtrabackup基礎(chǔ)套件不存在時(shí)，進(jìn)行自動(dòng)下載安裝
if [[ ! -e ${XTRABACKUP_PATH} ]]; then
    cd /usr/local
    wget -q -O xtrabackup-2.2.6.tgz http://www.percona.com/redir/downloads/XtraBackup/LATEST/binary/tarball/percona-xtrabackup-2.2.6-5042-Linux-x86_64.tar.gz
    tar xvzf xtrabackup-2.2.6.tgz >/dev/null 2>&1 && rm -f xtrabackup-2.2.6.tgz
    mv percona-xtrabackup-2.2.6-Linux-x86_64 xtrabackup-2.2.6
    rm -rf xtrabackup && ln -s xtrabackup-2.2.6 xtrabackup
    
    for FNAME in `ls -1t /usr/local/xtrabackup/bin`
    do
        rm -f /usr/bin/${FNAME} && ln -s /usr/local/xtrabackup/bin/${FNAME} /usr/bin/${FNAME}
    done
fi

## 只允許一個(gè)副本運(yùn)行，以避免全量備份與增量備份出現(xiàn)交叉，發(fā)生數(shù)據(jù)錯(cuò)亂的可能性
##[[ -n `ps uax | grep innobackupex | grep -v grep` ]] && exit 1

## 目錄名默認(rèn)精確到分鐘，為避免意外情況，導(dǎo)致備份任務(wù)失敗，可以精確到秒
CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M`
[[ -d ${CURRENT_BAK_PATH} ]] && CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M-%S`

#===================================================================================================
## 全量備份
if [[ "$1" == "full" ]]; then
    ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
    echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}

## 增量備份
elif [[ "$1" == "inc" ]]; then
    ## 基準(zhǔn)目錄列表文件不存在或者為空的情況，需要做一次全量備份
    if [[ ! -f ${INC_BASE_LIST} || `sed '/^$/d' ${INC_BASE_LIST} | wc -l` -eq 0 ]]; then
        ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
        echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
    
    ## 不存在任何目錄的情況，需要做一次全量備份，以避免增量備份失敗
    elif [[ `find ${BACKUP_BASE_DIR} -maxdepth 1 -type d | wc -l` -eq 1 ]]; then
        ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
        echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
    
    ## 在上一次備份的基礎(chǔ)上，進(jìn)行增量備份
    else
        PREV_BACKUP_DIR=`sed '/^$/d' ${INC_BASE_LIST} | tail -1  | awk -F '|' '{print $2}'`
        ## 上次的備份目錄不存在或者目錄為空的情況，以避免人為刪除的可能性【針對(duì)部分惡意刪除的情況，目前還沒(méi)有較好的檢查方法】
        if [[ ! -d ${PREV_BACKUP_DIR} || -z `ls ${PREV_BACKUP_DIR}` ]]; then
            ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
            echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
        else
            ${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp --incremental ${CURRENT_BAK_PATH} --incremental-basedir=${PREV_BACKUP_DIR}
            echo "${PREV_BACKUP_DIR}|${CURRENT_BAK_PATH}|inc" >> ${INC_BASE_LIST}
        fi
    fi

elif [[ "$1" == "help" ]]; then
    print_help_info

else
    print_help_info
fi

## 刪除2周前的數(shù)據(jù)備份
rm -rf ${BACKUP_BASE_DIR}/`date -d '14 days ago' +'%F'`_*
sed -i "/`date -d '14 days ago' +'%F'`/d" ${INC_BASE_LIST}

#===================================================================================================
##The End


## 需要添加的crontab信息：
##     (1)、全量備份
##     20 04 * * * /data/scripts/mysql_backup.sh full >/dev/null 2>&1
##
##     (2)、增量備份
##     00 * * * * /data/scripts/mysql_backup.sh inc >/dev/null 2>&1




## DB數(shù)據(jù)恢復(fù)步驟：
##    (1)、應(yīng)用基準(zhǔn)
##    innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full
##
##    (2)、應(yīng)用第一個(gè)增量備份
##    innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_one
##
##    (3)、應(yīng)用第二個(gè)增量備份
##    innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_two
##
##    (4)、再次應(yīng)用基準(zhǔn)
##    innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full
##
##    (5)、恢復(fù)
##    innobackupex --user=root --defaults-file=/etc/my.cnf --copy-back /data/mysql_backup/full

關(guān)于Xtrabackup備份恢復(fù)原理是什么就分享到這里了，希望以上內(nèi)容可以對(duì)大家有一定的幫助，可以學(xué)到更多知識(shí)。如果覺(jué)得文章不錯(cuò)，可以把它分享出去讓更多的人看到。


分享文章：Xtrabackup備份恢復(fù)原理是什么
文章地址：http://weahome.cn/article/jdiigs.html

其他資訊

在線咨詢

微信咨詢

電話咨詢

028-86922220（工作日）

18980820575（7×24）

提交需求

返回頂部