xtrabackup的mysql备份脚本（一）

一、安装xtrabackup工具

安装方法见：xtrabackup安装

<code># wget https://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.4.1/binary/tarball/percona-xtrabackup-2.4.1-Linux-x86_64.tar.gz</code>

<code># mv percona-xtrabackup-2.4.1-Linux-x86_64.tar.gz* percona-xtrabackup-2.4.1-Linux-x86_64.tar.gz</code>

<code># tar -zxvf percona-xtrabackup-2.4.1-Linux-x86_64.tar.gz</code>

<code># mv percona-xtrabackup-2.4.1-Linux-x86_64 /usr/bin</code>

<code># mv percona-xtrabackup-2.4.1-Linux-x86_64 xtrabackup</code>

<code># echo 'export PATH=$PATH:/usr/bin/xtrabackup/bin' >> /etc/profile</code>

<code># source /etc/profile</code>

<code># yum -y install libaio</code>

二、配置备份脚本

1.拷贝mysql_backup_shell到mysql业务服务器目录，比如：/data/backup_shell/mysql_backup_shell

2.进入拷贝后mysql_backup_shell所在目录，然后执行chmod 777 mysql_backup.sh

3.修改backup.conf

需要修改的项：

mysql_conf_file=/usr/local/meb/my.cnf.3309 #mysql cnf文件路径

user=root #mysql连接用户名

port=3309 #端口号

host=127.0.0.1 #mysql ip

password= #密码,可以为空

socket=/data0/mysql/3309/mysql.sock #mysql socket

backup_dir=/root/workspace/mysqlbackup/ #全备份后文件存放目录

full_backup_month_day=29 #全备份在每月哪天进行， 29代表本月29号进行全备份

is_tar_full=1 #取值为0或1，为1表示会压缩全备份目录，并且删除全备份目录，而保留全备份目录压缩后tar.gz文件。取0不压缩，保留全备份目录。

PS: 除上面这些项，其他项一般不需要修改。

4.利用crontab配置定时任务（每天23:59开始备份）

<code>#crontab -e</code>

<code>59 23 * * * YourPath</code><code>/mysql_backup_shell/mysql_backup</code><code>.sh > </code><code>/tmp/monitor</code><code>.log 2>&1</code>

YourPath指解压缩后目录存放的路径，比如/data/backup_shell

5.命令行运行脚本

第一种运行方式

> ./mysql_backup.sh

根据backup.conf文件里面full_backup_month_day值，和当天日期比较，如果相同执行全备份；如果不相同执行增量备份。

第二种运行方式

mysql_backup.sh提供一个参数-t，方便测试和出错后手动启动备份使用。

./mysql_backup.sh -t full #会进行全备份

./mysql_backup.sh -t inc #会进行增量份

说明：

1.每个月执行一次全备份，具体哪天由backup.conf文件里面full_backup_month_day项控制。

2.每天23:59执行增量备份

3.每次全备份前会删除上个月全备份和增量备份的文件，换句话：只会持续保持一个月的数据内容。

4.增量备份基于上次的增量备份进行，除全备以后第一次增量备份，其余都基于上次增量备份目录进行。

三、脚本

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

160

161

162

163

164

165

166

167

168

169

170

171

172

173

174

175

176

177

178

179

180

181

182

183

184

185

186

187

188

189

190

191

192

193

194

195

196

197

198

199

200

201

202

203

204

205

206

207

208

209

210

211

212

213

214

215

216

217

218

219

220

221

222

223

224

225

226

227

228

229

230

231

232

233

234

235

236

237

238

239

240

241

242

243

244

245

246

247

248

249

250

251

252

253

254

255

256

257

258

259

260

261

262

263

264

265

266

267

268

269

270

271

272

273

274

275

276

277

278

279

280

281

282

283

284

285

286

287

288

289

290

291

<code># xtrabackup backup shell</code>

<code>source</code> <code>/etc/profile</code>

<code>work_dir=`</code><code>dirname</code> <code>$0`</code>

<code>#获取配置文件中配置项的值</code>

<code>conf_file=$work_dir</code><code>/backup</code><code>.conf</code>

<code>password=`</code><code>sed</code> <code>'/^password=/!d;s/.*=//'</code> <code>$conf_file`</code>

<code>mysql_conf_file=`</code><code>sed</code> <code>'/^mysql_conf_file=/!d;s/.*=//'</code> <code>$conf_file`</code>

<code># mysql host</code>

<code># mysql socket</code>

<code>mysql_socket=`</code><code>sed</code> <code>'/^socket=/!d;s/.*=//'</code> <code>$conf_file`</code>

<code>backup_dir=`</code><code>sed</code> <code>'/^backup_dir=/!d;s/.*=//'</code> <code>$conf_file`</code>

<code>full_backup_month_day=`</code><code>sed</code> <code>'/^full_backup_month_day=/!d;s/.*=//'</code> <code>$conf_file`</code>

<code>full_backup_prefix=`</code><code>sed</code> <code>'/^full_backup_prefix=/!d;s/.*=//'</code> <code>$conf_file`</code>

<code>increment_prefix=`</code><code>sed</code> <code>'/^increment_prefix=/!d;s/.*=//'</code> <code>$conf_file`</code>

<code>error_log_name=`</code><code>sed</code> <code>'/^error_log=/!d;s/.*=//'</code> <code>$conf_file`</code>

<code>index_file_name=`</code><code>sed</code> <code>'/^index_file=/!d;s/.*=//'</code> <code>$conf_file`</code>

<code>#获取当前时间</code>

<code>backup_date=`</code><code>date</code> <code>+%F`</code>

<code>backup_time=`</code><code>date</code> <code>+%H-%M-%S`</code>

<code>backup_month_day=`</code><code>date</code> <code>+%d`</code>

<code>#获取日志和错误文件所在目录</code>

<code>#日志和错误文件路径</code>

<code>error_log=$log_dir/$error_log_name</code>

<code>index_file=$var_dir/$index_file_name</code>

<code>mkdir</code> <code>-p $backup_dir</code>

<code>mkdir</code> <code>-p $log_dir</code>

<code>mkdir</code> <code>-p $var_dir</code>

<code>#调用xtrabckup进行全量备份</code>

<code>function</code> <code>full_backup() {</code>

<code> </code><code>backup_folder=${full_backup_prefix}_${backup_date}_${backup_time}</code>

<code> </code><code>echo</code> <code>"backup_folder: $backup_folder"</code>

<code> </code><code>mkdir</code> <code>-p $backup_dir/$backup_folder</code>

<code> </code><code>echo</code> <code>"xtrabackup --defaults-file=$mysql_conf_file --user=$user --password=$password --port=$port --socket=$mysql_socket --backup --no-lock --target-dir=$backup_dir/$backup_folder > $log_dir/${backup_folder}.log"</code>

<code> </code><code>xtrabackup \</code>

<code> </code><code>--defaults-</code><code>file</code><code>=$mysql_conf_file \</code>

<code> </code><code>--password=$password \</code>

<code> </code><code>--socket=$mysql_socket \</code>

<code> </code><code>--backup \</code>

<code> </code><code>--target-</code><code>dir</code><code>=$backup_dir/$backup_folder > $log_dir/${backup_folder}.log 2>&1</code>

<code> </code><code>return</code> <code>$?</code>

<code>#调用xtrabckup进行增量备份</code>

<code>function</code> <code>increment_backup() {</code>

<code> </code><code>backup_folder=${increment_prefix}_${backup_date}_${backup_time}</code>

<code> </code><code>echo</code> <code>"index_file : $index_file"</code>

<code> </code><code>incr_base_folder=`</code><code>sed</code> <code>-n </code><code>'$p'</code> <code>$index_file | \</code>

<code> </code><code>awk</code> <code>-F </code><code>'[, {}]*'</code> <code>'{print $3}'</code> <code>| \</code>

<code> </code><code>awk</code> <code>-F </code><code>':'</code> <code>'{print $2}'</code><code>`</code>

<code> </code><code>echo</code> <code>"incr_base_folder: $incr_base_folder"</code>

<code> </code><code>--defaults-</code><code>file</code><code>=$mysql_conf_file \</code>

<code> </code><code>--password=$password \</code>

<code> </code><code>--target-</code><code>dir</code><code>=$backup_dir/$backup_folder \</code>

<code> </code><code>--incremental-basedir=$backup_dir/$incr_base_folder > $log_dir/${backup_folder}.log 2>&1</code>

<code>#根据索引文件记录的恢复记录，删除备份目录</code>

<code>function</code> <code>delete_before_backup() {</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"`cat $index_file`"</code> <code>]; </code><code>then</code>

<code> </code><code>return</code>

<code> </code><code>cat</code> <code>$index_file | </code><code>awk</code> <code>-F </code><code>'[, {}]*'</code> <code>'{print $3}'</code> <code>| \</code>

<code> </code><code>awk</code> <code>-</code><code>v</code> <code>backup_dir=$backup_dir -F </code><code>':'</code> <code>'{if($2!=""){printf("rm -rf %s/%s\n", backup_dir, $2)}}'</code> <code>| \</code>

<code> </code><code>awk</code> <code>-</code><code>v</code> <code>log_dir=$log_dir -F </code><code>':'</code> <code>'{if($2!=""){printf("rm -rf %s/%s.log\n", log_dir, $2)}}'</code> <code>| \</code>

<code>#备份索引文件 </code>

<code>function</code> <code>backup_index_file() {</code>

<code> </code><code>cp</code> <code>$index_file ${index_file}_$(</code><code>date</code> <code>-d </code><code>"1 day ago"</code> <code>+%F)</code>

<code>function</code> <code>send_index_file_to_remote() {</code>

<code> </code><code>echo</code> <code>'send index file ok'</code>

<code>#写入索引日志</code>

<code>function</code> <code>append_index_to_file() {</code>

<code> </code><code>echo</code> <code>"{week_day:$backup_month_day, \</code>

<code> </code><code>dir</code><code>:${1}_${backup_date}_${backup_time}, \</code>

<code> </code><code>date</code><code>:${backup_date}}" >> $index_file</code>

<code>#写入解压日志</code>

<code>function</code> <code>append_tar_index_to_file() {</code>

<code> </code><code>dir</code><code>:${1}_${backup_date}_${backup_time}.</code><code>tar</code><code>.gz, \</code>

<code>#记录错误日志</code>

<code>function</code> <code>logging_backup_err() {</code>

<code> </code><code>date</code><code>:${backup_date}}" >> $error_log</code>

<code>#清除索引文件</code>

<code>function</code> <code>purge_index_from_file() {</code>

<code> </code><code>> $index_file</code>

<code>#清除错误日志</code>

<code>function</code> <code>purge_err_log() {</code>

<code> </code><code>> $error_log</code>

<code>#压缩全备份目录</code>

<code>function</code> <code>tar_backup_file() {</code>

<code> </code><code>tar_file=${1}_${backup_date}_${backup_time}</code>

<code> </code><code>tar</code> <code>-C $backup_dir -zcvf $backup_dir/${tar_file}.</code><code>tar</code><code>.gz ${tar_file} </code>

<code>function</code> <code>send_backup_to_remote() {</code>

<code> </code><code>echo</code> <code>"send $1 remote ok"</code>

<code> </code><code>#获取恢复的类型，返回类型：0:full, 1:inc</code>

<code>function</code> <code>get_backup_type() {</code>

<code> </code><code>full_backup_month_day=`</code><code>sed</code> <code>'/^full_backup_month_day=/!d;s/.*=//'</code> <code>$conf_file`</code>

<code> </code><code>backup_type=0</code>

<code> </code><code>if</code> <code>[ </code><code>"${full_backup_month_day}_x"</code> <code>== </code><code>"${backup_month_day}_x"</code> <code>]; </code><code>then</code>

<code> </code><code>backup_type=0</code>

<code> </code><code>backup_type=1</code>

<code> </code><code>return</code> <code>$backup_type</code>

<code>#检测配置文件各项数据合法性</code>

<code>function</code> <code>test_conf_file() {</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"$user"</code> <code>]; </code><code>then</code> <code>echo</code> <code>'fail: configure file user not set'</code><code>; </code><code>exit</code> <code>2; </code><code>fi</code>

<code> </code><code>#if [ ! -n "$password" ]; then echo 'fail: configure file password not set'; exit 2; fi</code>

<code> </code><code>#if [ ! -n "$host" ]; then echo 'fail: configure file host not set'; exit 2; fi</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"$mysql_socket"</code> <code>]; </code><code>then</code> <code>echo</code> <code>'fail: configure file mysql_socket not set'</code><code>; </code><code>exit</code> <code>2; </code><code>fi</code>

<code> </code><code>#if [ ! -n "$port" ]; then echo 'fail: configure file port not set'; exit 2; fi</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"$backup_dir"</code> <code>]; </code><code>then</code> <code>echo</code> <code>'fail: configure file backup_dir not set'</code><code>; </code><code>exit</code> <code>2; </code><code>fi</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"$full_backup_month_day"</code> <code>]; </code><code>then</code> <code>echo</code> <code>'fail: configure file full_backup_month_day not set'</code><code>; </code><code>exit</code> <code>2; </code><code>fi</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"$full_backup_prefix"</code> <code>]; </code><code>then</code> <code>echo</code> <code>'fail: configure file full_backup_prefix not set'</code><code>; </code><code>exit</code> <code>2; </code><code>fi</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"$increment_prefix"</code> <code>]; </code><code>then</code> <code>echo</code> <code>'fail: configure file increment_prefix not set'</code><code>; </code><code>exit</code> <code>2; </code><code>fi</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"$mysql_conf_file"</code> <code>]; </code><code>then</code> <code>echo</code> <code>'fail: configure file mysql_conf_file not set'</code><code>; </code><code>exit</code> <code>2; </code><code>fi</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"$error_log"</code> <code>]; </code><code>then</code> <code>echo</code> <code>'fail: configure file error_log not set'</code><code>; </code><code>exit</code> <code>2; </code><code>fi</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"$index_file"</code> <code>]; </code><code>then</code> <code>echo</code> <code>'fail: configure file index_file not set'</code><code>; </code><code>exit</code> <code>2; </code><code>fi</code>

<code> </code><code>if</code> <code>[ ! -n </code><code>"$is_tar_full"</code> <code>]; </code><code>then</code> <code>echo</code> <code>'fail: configure file is_tar_full not set'</code><code>; </code><code>exit</code> <code>2; </code><code>fi</code>

<code>#运行主函数</code>

<code>function</code> <code>run() {</code>

<code> </code><code>backup_type=-1</code>

<code> </code><code>#解析命令行参数</code>

<code> </code><code>while</code> <code>getopts</code> <code>"t:"</code> <code>arg</code>

<code> </code><code>if</code> <code>[ </code><code>"$OPTARG"</code> <code>= </code><code>"$full_backup_prefix"</code> <code>]; </code><code>then</code>

<code> </code><code>backup_type=0</code>

<code> </code><code>elif</code> <code>[ </code><code>"$OPTARG"</code> <code>= </code><code>"$increment_prefix"</code> <code>]; </code><code>then</code>

<code> </code><code>backup_type=1</code>

<code> </code><code>echo</code> <code>"unkonw argument"</code>

<code> </code><code>if</code> <code>[ </code><code>"$backup_type"</code> <code>-</code><code>eq</code> <code>-1 ]; </code><code>then</code>

<code> </code><code>get_backup_type</code>

<code> </code><code>backup_type=$? </code>

<code> </code><code>echo</code> <code>"backup_type: $backup_type"</code>

<code> </code><code>case</code> <code>$backup_type </code><code>in</code>

<code> </code><code>echo</code> <code>'----------------------full backup start----------------'</code>

<code> </code><code>echo</code> <code>'delete_before_backup start'</code>

<code> </code><code>delete_before_backup</code>

<code> </code><code>echo</code> <code>'call xtrabackup to full backup start'</code>

<code> </code><code>full_backup </code>

<code> </code><code>backup_ok=$?</code>

<code> </code><code>if</code> <code>[ 0 -</code><code>eq</code> <code>"$backup_ok"</code> <code>]; </code><code>then</code>

<code> </code><code>tar_backup_file $full_backup_prefix</code>

<code> </code><code>#send_backup_to_remote $full_backup_prefix</code>

<code> </code><code>echo</code> <code>'backup_index_file start'</code>

<code> </code><code>backup_index_file</code>

<code> </code><code># send_index_file_to_remote</code>

<code> </code><code>echo</code> <code>'purge_index_from_file start'</code>

<code> </code><code>purge_index_from_file</code>

<code> </code><code>echo</code> <code>'append_index_to_file start'</code>

<code> </code><code>append_tar_index_to_file $full_backup_prefix</code>

<code> </code><code>append_index_to_file $full_backup_prefix</code>

<code> </code><code>echo</code> <code>'call xtrabackup to increment backup start'</code>

<code> </code><code>increment_backup</code>

<code> </code><code>backup_ok=$?</code>

<code> </code><code>if</code> <code>[ 0 -</code><code>eq</code> <code>"$backup_ok"</code> <code>]; </code><code>then</code>

<code> </code><code># tar_backup_file $increment_prefix</code>

<code> </code><code># send_backup_to_remote $increment_prefix</code>

<code> </code><code>echo</code> <code>'append_index_to_file start'</code>

<code> </code><code>append_index_to_file $increment_prefix</code>

<code> </code><code>rm</code> <code>-rf ${backup_dir}/${full_backup_prefix}_${backup_date}_${backup_time}</code>

<code> </code><code>rm</code> <code>-rf ${backup_dir}/${increment_prefix}_${backup_date}_${backup_time}</code>

<code> </code><code>logging_backup_err $increment_prefix</code>

<code> </code><code>rm</code> <code>-rf ${backup_dir}/${full_backup_prefix}_${backup_date}_${backup_time}</code>

<code> </code><code>logging_backup_err $full_backup_prefix</code>

<code> </code><code>echo</code> <code>'----------------------incr backup start----------------'</code>

<code> </code><code>echo</code> <code>'call xtrabackup to increment backup start'</code>

<code> </code><code>increment_backup</code>

<code> </code><code># tar_backup_file $increment_prefix</code>

<code> </code><code># send_backup_to_remote $increment_prefix</code>

<code> </code><code>append_index_to_file $increment_prefix</code>

<code> </code><code>rm</code> <code>-rf ${backup_dir}/${increment_prefix}_${backup_date}_${backup_time}</code>

<code> </code><code>logging_backup_err $increment_prefix</code>

本文转自 zouqingyun 51CTO博客，原文链接：http://blog.51cto.com/zouqingyun/1842390，如需转载请自行联系原作者

xtrabackup的mysql备份脚本（一）

继续阅读

终端环境之tmux

查找文件中的字符串

Centos7 MySQL 5.7 安装MySQL 5.7 安装

查找入职员工时间排名倒数第三的员工所有信息

Hibernate使用Hibernate的“3个准备，7个步骤”Hibernate API简介操作实体对象对象识别

云计算面试题——mysql/存储引擎/备份

SQL语言基础：常用的数据查询语句

拒绝用户登录:/bin/false和/usr/sbin/nologin

Ubuntu16.04安装Apache+MySQL+PHP1. 安装Apache2. 安装MySQL3. 安装PHP4. 安装phpMyAdmin

Shell编程——sort排序、uniq忽略重复、tr替换压缩删除、cut指定删除字段、正则表达式元字符sort 命令uniq 命令tr 命令cut 命令正则表达式

Linxu常用命令技巧汇总

《Linux命令行与Shell脚本编程大全第2版.布卢姆》pdf

MySQL的4种隔离级别？出现问题

ACS基本配置-权限等级管理

neo4j之cypher使用文档

mysql使用source命令导入.sql文件