天天看點

mysql日常備份和增量備份SHELL腳本

每7天備份一次所有資料,每天備份binlog,也就是增量備份.

(如果資料少,每天備份一次完整資料即可,可能沒必要做增量備份)

作者對shell腳本不太熟悉,是以很多地方寫的很笨 :)

開啟 bin log

在mysql 4.1版本中,預設隻有錯誤日志,沒有其他日志.可以通過修改配置打開bin log.方法很多,其中一個是在/etc/my.cnf中的mysqld部分加入:

1.  [mysqld] 

2.  log-bin 

這個日志的主要作用是增量備份或者複制(可能還有其他用途).

如果想增量備份,必須打開這個日志.

對于資料庫操作頻繁的mysql,這個日志會變得很大,而且可能會有多個.

在資料庫中flush-logs,或者使用mysqladmin,mysqldump調用flush-logs後并且使用參數delete-master-logs,這些日志檔案會消失,并産生新的日志檔案(開始是空的).

是以如果從來不備份,開啟日志可能沒有必要.

完整備份的同時可以調用flush-logs,增量備份之前flush-logs,以便備份最新的資料.

完整備份腳本

如果資料庫資料比較多,我們一般是幾天或者一周備份一次資料,以免影響應用運作,如果資料量比較小,那麼一天備份一次也無所謂了.

下載下傳假設我們的資料量比較大,備份腳本如下:(參考過網絡上一個mysql備份腳本,緻謝 :))

1.  #!/bin/sh 

2.  # mysql data backup script 

3.  # by scud http://www.jscud.com 

4.  # 2005-10-30 

5.  # 

6.  # use mysqldump --help,get more detail. 

7.  # 

8.  BakDir=/backup/mysql 

9.  LogFile=/backup/mysql/mysqlbak.log 

10.DATE=`date +%Y%m%d` 

11.echo " " >> $LogFile 

12.echo " " >> $LogFile 

13.echo "-------------------------------------------" >> $LogFile  

14.echo $(date +"%y-%m-%d %H:%M:%S") >> $LogFile  

15.echo "--------------------------" >> $LogFile  

16.cd $BakDir 

17.DumpFile=$DATE.sql 

18.GZDumpFile=$DATE.sql.tgz 

19.mysqldump --quick --all-databases --flush-logs  

20.--delete-master-logs --lock-all-tables > $DumpFile 

21.echo "Dump Done" >> $LogFile 

22.tar czvf $GZDumpFile $DumpFile >> $LogFile 2>&1  

23.echo "[$GZDumpFile]Backup Success!" >> $LogFile  

24.rm -f $DumpFile  

25.#delete previous daily backup files:采用增量備份的檔案,如果完整備份後,則***增量備份的檔案. 

26.cd $BakDir/daily 

27.rm -f *          

28.cd $BakDir    

29.echo "Backup Done!" 

30.echo "please Check $BakDir Directory!" 

31.echo "copy it to your local disk or ftp to somewhere !!!" 

32.ls -al $BakDir 

上面的腳本把mysql備份到本地的/backup/mysql目錄,增量備份的檔案放在/backup/mysql/daily目錄下.

注意:上面的腳本并沒有把備份後的檔案傳送到其他遠端計算機,也沒有***幾天前的備份檔案:需要使用者增加相關腳本,或者手動操作.

增量備份

增量備份的資料量比較小,但是要在完整備份的基礎上操作,使用者可以在時間和成本上權衡,選擇最有利于自己的方式.

增量備份使用bin log,腳本如下:

2.  # 

3.  # mysql binlog backup script 

4.  # 

5.  /usr/bin/mysqladmin flush-logs 

6.  DATADIR=/var/lib/mysql 

7.  BAKDIR=/backup/mysql/daily 

8.  ###如果你做了特殊設定,請修改此處或者修改應用此變量的行:預設取機器名,mysql預設也是取機器名 

9.  HOSTNAME=`uname -n` 

10.cd $DATADIR 

11.FILELIST=`cat $HOSTNAME-bin.index` 

12.##計算行數,也就是檔案數 

13.COUNTER=0 

14.for file in $FILELIST 

15.do 

16.COUNTER=`expr $COUNTER + 1 ` 

17.done 

18.NextNum=0 

19.for file in  $FILELIST 

20.do 

21.            base=`basename $file` 

22.NextNum=`expr $NextNum + 1` 

23.if [ $NextNum -eq $COUNTER ]  

24.then 

25.echo "skip lastest" 

26.                else 

27.dest=$BAKDIR/$base 

28.if(test -e $dest) 

29.then 

30.echo "skip exist $base" 

31.else 

32.echo "copying $base" 

33.cp $base $BAKDIR 

34.fi 

35.fi 

36.done 

37.echo "backup mysql binlog ok" 

增量備份腳本是備份前flush-logs,mysql會自動把記憶體中的日志放到檔案裡,然後生成一個新的日志檔案,是以我們隻需要備份前面的幾個即可,也就是不備份最後一個.

因為從上次備份到本次備份也可能會有多個日志檔案生成,是以要檢測檔案,如果已經備份過,就不用備份了.

注:同樣,使用者也需要自己遠端傳送,不過不需要***了,完整備份後程式會自動生成.

通路設定

腳本寫完了,為了能讓腳本運作,還需要設定對應的使用者名和密碼,mysqladmin 和mysqldump都是需要使用者名和密碼的,當然可以寫在腳本中,但是修改起來不太友善,假設我們用系統的root使用者來運作此腳本,那麼我們需要在 /root(也就是root使用者的home目錄)建立一個.my.cnf檔案,内容如下

1.  [mysqladmin] 

2.  password =password 

3.  user= root 

4.  [mysqldump] 

5.  user=root 

6.  password=password 

注: 設定本檔案隻有root可讀.(chmod 600 .my.cnf )

此檔案說明程式使用mysql的root使用者備份資料,密碼是對應的設定.這樣就不需要在腳本裡寫使用者名和密碼了.

自動運作

為了讓備份程式自動運作,我們需要把它加入crontab.

有2種方法,一種是把腳本根據自己的選擇放入到/etc/cron.daily,/etc/cron.weekly這麼目錄裡.

一種是使用crontab -e放入到root使用者的計劃任務裡,例如完整備份每周日淩晨3點運作,日常備份每周一-周六淩晨3點運作.

繼續閱讀