国产xxxx99真实实拍_久久不雅视频_高清韩国a级特黄毛片_嗯老师别我我受不了了小说

資訊專欄INFORMATION COLUMN

基于Mysql數據庫零數據丟失恢復探索

IT那活兒 / 2767人閱讀
基于Mysql數據庫零數據丟失恢復探索

點擊上方“IT那活兒”，關注后了解更多精彩內容！！！

備份概述

1. 物理備份<->邏輯備份；
2. 物理備份：基本為I/O操作，效果較高；
3. 邏輯備份：涉及邏輯轉換，效率較低；
4. 聯機備份<->脫機備份；
5. 聯機備份：備份時不影響運行；
6. 脫機備份：備份時需要停庫操作；復制文件的冷備最為典型；
7. 本地備份<->遠程備份；
8. 本地備份：備份集只能存在本地；mysqldump較為典型；
9. 遠程備份：備份集能存在遠端；outfile/infile方式較為典型；
10. 全量備份<->增量備份；
11. 全量備份：備份數據庫的全量數據；
12. 增量備份：備份數據庫的后續修改。
  • 邏輯備份工具：mysqldump mydumper，load data方式。
  • 物理備份工具:  rsync或scp冷備， mebxtracback全量及增量備份。

場景介紹


我們在維護數據庫的時候，可能會存在某些刪庫跑路的或某些手抖誤操作，在執行的時候發出了drop database, truncate ,drop table等危險操作，或 rm 刪除某個數據目錄的的情況，為保證在這種極端情況下，我們至少要有一份數據備份，特對這些場景做了幾個恢復測試，備份我們通常使用mysqldump 邏輯備份， 遠程binlog使用mysqlbinlog備份， 而物理備份則是通過xtraback或meb進行物理備份。


MYSQLDUMP每天全備+binlog備份方案

下面是對二種備份恢復測試的一個介紹。

1. 前提條件

數據庫開啟binlog，并實時進行遠程備份BINLOG。

2. 數據準備

  • 創建數據庫YWDB，同時建表student并進行數據插10行，使用存儲過程方式。

  • 模擬事務操作，對表進行刪除即可。

  • 使用mysqldump進行數據庫全備，可每日定義任務計劃進行操作。

#!/bin/bash

MYSQLDBUSERNAME=root

MYSQLDBPASSWORD=Ora#01555

#MYSQBASEDIR=/usr/local/mysql

#MYSQL=$MYSQBASEDIR/bin/mysql

MYSQL=/usr/bin/mysql

#MYSQLDUMP=$MYSQBASEDIR/bin/mysqldump

MYSQLDUMP=/usr/bin/mysqldump

BACKDIR=/app/backup/logic

DATEFORMATTYPE1=$(date +%Y-%m-%d)

DATEFORMATTYPE2=$(date +%Y%m%d%H%M%S)

#DBHOME=/msdata/db_mysql

#SOCK=${DBHOME}/mysql.sock

SOCK=/var/lib/mysql/mysql.sock

DATABASES=(

"ywdb"

)

[ -x $MYSQL ] || MYSQL=mysql

[ -x $MYSQLDUMP ] || MYSQLDUMP=mysqldump

[ -d ${BACKDIR} ] || mkdir -p ${BACKDIR}

[ -d ${BACKDIR}/${DATEFORMATTYPE1} ] || mkdir ${BACKDIR}/${DATEFORMATTYPE1}

for DBNAME in ${DATABASES[@]};

do ${MYSQLDUMP} --user=${MYSQLDBUSERNAME} --password=${MYSQLDBPASSWORD} -S${SOCK} --routines --events --triggers --master-data=2 --single-transaction --flush-logs --databases ${DBNAME} | gzip > ${BACKDIR}/${DATEFORMATTYPE1}/${DBNAME}-backup-${DATEFORMATTYPE2}.sql.gz

[ $? -eq 0 ] && echo "${DBNAME} has been backuped successful" || echo "${DBNAME} has been backuped failed"

/bin/sleep 5

done

find /app/backup/logic -type d -name `date +"%Y-%m-%d" -d "-7 day"`| xargs rm -rf


  • 模擬某人誤刪除表，并同時操作多個事務進行，盡量模擬生產。

delete from  student;

  • 此時業務無法找到student記錄，急急忙忙尋找救援。

3. 創建YWDBNEW庫進行數據恢復

create database ywdbnew DEFAULT CHARACTER SET utf8mb4 ;

use ywdbnew

create table student(

id int(4) primary key not null auto_increment,

name varchar(32) not null,

sex varchar(2) not null,

phone varchar(32) not null unique,

brithplace varchar(32) not null,

grade int(1) not null

);

4. 全備恢復到YWDBNEW庫

5. Mysqlbinlog進行恢復

  • 全備的binlog及pos地址

[root@node1 2021-11-08]# cat ywdb-backup-20211108165900.sql 
|grep -i mast

-- CHANGE MASTER TO MASTER_LOG_FILE=on.000009, 
MASTER_LOG_POS=154;

  • Truncate的POS地址

  • YWDBNEW中恢復了所需的數據

source /tmp/truncatebefore.sql

  • 再插入到企業DB YWDB

Insert into ywdb.student select * from ywdbnew.student;

Select count(*) from ywdb.student;


6. 注意事項

  • 備份時，由于不同的企業使用不同的方案，在恢復時要注意恢復到另一個庫時，要看原先是否已備份DB,有可能原先的腳本會有USE選項。

  • Mysqlbinlog恢復時需要重寫到新的DB，使用參數--rewrite-db=ywdb->ywdbnew，否則會寫入到錯誤的庫中。

本篇先介紹到此，下篇將結合xtraback進行和大家分享。

更多精彩干貨分享

點擊下方名片關注

IT那活兒

文章版權歸作者所有，未經允許請勿轉載,若此文章存在違規行為，您可以聯系管理員刪除。

轉載請注明本文地址：http://specialneedsforspecialkids.com/yun/129724.html

相關文章

  • TiDB at 豐巢：嘗鮮分布式數據庫

    摘要：為此，一款高性能的分布式數據庫，日漸成為剛需。基于如上的原因，我們選擇了，作為豐巢的核心系統的分布式數據庫，來取代和。 作者：豐巢技術團隊 隨著豐巢業務系統快速增長，其核心系統的數據量，早就跨越了億級別，而且每年增量仍然在飛速發展。整個核心系統隨著數據量的壓力增長，不但系統架構復雜度急劇增長，數據架構更加復雜，傳統的單節點數據庫，已經日漸不能滿足豐巢的需求，當單表數量上億的時候，Ora...

    sixgo 評論0 收藏0

  • 從零單排學Redis【白銀】

    摘要：對于數據結構哈希表我們在上一篇也已經詳細說了。鍵空間示意圖的數據庫就是使用字典哈希表來作為底層實現的，對數據庫的增刪改查都是構建在字典哈希表的操作之上的。 前言 只有光頭才能變強 今天繼續來學習Redis，上一篇從零單排學Redis【青銅】已經將Redis常用的數據結構過了一遍了。如果還沒看的同學可以先去看一遍再回來~ 這篇主要講的內容有： Redis服務器的數據庫 Redis對過期...

    denson 評論0 收藏0

發表評論

0條評論

IT那活兒

男|高級講師

TA的文章

閱讀更多
最新活動
閱讀需要支付1元查看
<