天天看点

Linux Shell脚本之远程自动化部署java maven项目

脚本功能:

检查运行环境(包括运行权限、网络、DNS解析等),自动从git上获取java maven项目工程源码,在机器A上build,build完成后,备份机器B上原有的配置文件(如果存在),将Class、Lib文件和备份的配置文件等上传到机器B,重新启动机器B上的服务以便变更生效。

脚本特点:

1.(与之前的自动部署脚本相比)全新优化了脚本代码,更friendly,结构更紧凑、逻辑更加严谨

2.Public header删除了无用或者不好用的有色彩显示函数,并修正了WORKDIR不是绝对路径可能导致的bug

3.修正了域名解析判断是否正常的一个bug,该bug可能导致遇到无法解析后不断尝试解析

4.全新的通用main函数,自带文件锁和自动接受处理INT、TERM、EXIT进程信号,整个脚本更加的模块化和标准化

5.针对项目方面,增加了对java项目配置文件的备份和还原功能,增加了对docker容器的支持

使用办法:

将脚本上传到Linux任意目录,至少修改三个变量(分别是项目源码的git地址、部署对象的IP、部署对象的目标目录):

1

2

3

<code>project_clone=</code><code>"ssh://git@xxx/xxx.git"</code>

<code>deploy_target_host_ip=</code><code>"xxx.xxx.xxx.xxx"</code>

<code>project_top_directory_to_target_host=</code><code>"/path/to/deploy/project"</code>

如果此项目依赖于其他项目,则修改“project_clone_depends_1”变量,如果要想使部署后自动生效,则,可以将启动脚本放在项目git源码下的bin目录下,默认名称为“startup.sh”

如果此项目部署在目标主机的docker容器内,则修改“docker_container_name”变量,以便重启容器生效。

多个容器启动的依赖关系的处理已经在TODO计划中。

首次执行需要将配置文件准确的写入项目文件中,一次写入后期无须修改,如需修改,直接修改部署对象主机上的配置文件即可。

在任意位置使用下方命令运行即可,脚本一旦运行一次,自动添加可执行权限,无须手动添加。

<code>bash</code> <code>/path/to/this</code><code>.sh</code>

脚本内容:

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

67

68

69

70

71

72

73

74

75

76

77

78

79

80

81

82

83

84

85

86

87

88

89

90

91

92

93

94

95

96

97

98

99

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

160

161

162

163

164

165

166

167

168

169

170

171

172

173

174

175

176

177

178

179

180

181

182

183

184

185

186

187

188

189

190

191

192

193

194

195

196

197

198

199

200

201

202

203

204

205

206

207

208

209

210

211

212

213

214

215

216

217

218

219

220

221

222

223

224

225

226

227

228

229

230

231

232

233

234

235

236

237

238

239

240

241

242

243

244

245

246

247

248

249

250

251

252

253

254

255

256

257

258

259

260

261

262

263

264

265

266

267

268

269

270

271

272

273

274

275

276

277

278

279

280

281

282

283

284

285

286

287

288

289

290

291

292

293

294

295

296

297

298

299

300

301

302

303

304

305

306

307

308

309

310

311

312

313

314

315

316

317

318

319

320

321

322

323

324

325

326

327

328

329

330

331

332

333

334

335

336

337

338

339

340

341

342

343

344

345

346

347

348

349

350

351

352

353

354

355

356

357

358

359

360

361

362

363

364

365

366

367

368

369

370

371

372

373

374

375

376

377

378

379

380

381

382

383

384

385

386

387

388

389

390

391

392

393

394

395

396

397

398

399

400

401

402

403

404

405

406

407

408

409

410

411

412

413

414

415

416

417

418

419

420

421

422

423

424

425

426

427

428

429

430

431

432

433

434

435

436

437

438

439

440

441

442

443

444

445

446

447

448

449

450

451

452

453

454

455

456

457

458

459

460

461

462

463

464

465

466

467

468

469

470

471

472

473

474

475

476

477

478

479

480

481

482

483

484

485

486

487

488

489

490

491

492

493

494

495

496

497

498

499

500

501

502

503

504

505

506

507

508

509

510

511

512

513

514

515

516

517

518

519

520

521

522

523

524

525

526

527

528

529

530

531

532

533

534

535

536

537

538

539

540

541

542

543

544

545

546

547

548

549

550

551

552

553

554

555

556

557

558

559

560

561

562

563

564

565

566

567

568

569

570

571

572

573

574

575

576

577

578

579

580

581

582

583

584

585

586

587

588

589

590

591

592

593

594

595

596

597

598

599

600

601

602

603

604

605

606

607

608

609

610

611

612

613

614

615

616

617

618

619

620

621

622

623

624

625

626

627

628

629

630

631

632

633

634

635

636

637

638

639

640

641

642

643

644

645

646

647

<code>#!/bin/bash</code>

<code># Name: doDeploy.sh</code>

<code>#Execute this shell script to deploy Java projects built by Maven automatically on remote hosts.</code>

<code># debug option</code>

<code>#_XTRACE_FUNCTIONS=$(set +o | grep xtrace)</code>

<code>#set -o xtrace</code>

<code># define user friendly messages</code>

<code>header="</code>

<code>Function: Execute this shell script to deploy Java projects built by Maven automatically on remote hosts.</code>

<code>License: Open </code><code>source</code> <code>software</code>

<code>"</code>

<code># define variables</code>

<code># Where to get source code</code>

<code>project_clone_depends_1=</code><code>""</code>

<code>docker_container_name=</code><code>""</code>

<code># Setting how many days do you want save old releases, default is 10 days</code>

<code>save_old_releases_for_days=10</code>

<code># end define variables</code>

<code># pretreatment</code>

<code>test</code> <code>-z ${project_clone_depends_1} || project_clone_target_depends_1=</code><code>"`echo ${project_clone_depends_1} | awk -F '[/.]+' '{ print $(NF-1)}'`"</code>

<code>project_clone_target=</code><code>"`echo ${project_clone} | awk -F '[/.]+' '{ print $(NF-1)}'`"</code>

<code>project_clone_repository_name=${project_clone_target}</code>

<code># end pretreatment</code>

<code># Public header</code>

<code># =============================================================================================================================</code>

<code># resolve links - $0 may be a symbolic link</code>

<code># learn from apache-tomcat-6.x.xx/bin/catalina.sh</code>

<code>PRG=</code><code>"$0"</code>

<code>while</code> <code>[ -h </code><code>"$PRG"</code> <code>]; </code><code>do</code>

<code>  </code><code>ls</code><code>=`</code><code>ls</code> <code>-ld </code><code>"$PRG"</code><code>`</code>

<code>  </code><code>link=`</code><code>expr</code> <code>"$ls"</code> <code>: </code><code>'.*-&gt; \(.*\)$'</code><code>`</code>

<code>  </code><code>if</code> <code>expr</code> <code>"$link"</code> <code>: </code><code>'/.*'</code> <code>&gt; </code><code>/dev/null</code><code>; </code><code>then</code>

<code>    </code><code>PRG=</code><code>"$link"</code>

<code>  </code><code>else</code>

<code>    </code><code>PRG=`</code><code>dirname</code> <code>"$PRG"</code><code>`/</code><code>"$link"</code>

<code>  </code><code>fi</code>

<code>done</code>

<code># Get standard environment variables</code>

<code>PRGDIR=`</code><code>dirname</code> <code>"$PRG"</code><code>`</code>

<code># echo color function, smarter, learn from lnmp.org lnmp install.sh</code>

<code>function</code> <code>echo_r (){</code>

<code>    </code><code># Color red: Error, Failed</code>

<code>    </code><code>[ $</code><code># -ne 1 ] &amp;&amp; return 1</code>

<code>    </code><code>echo</code> <code>-e </code><code>"\033[31m$1\033[0m"</code>

<code>}</code>

<code>function</code> <code>echo_g (){</code>

<code>    </code><code># Color green: Success</code>

<code>    </code><code>echo</code> <code>-e </code><code>"\033[32m$1\033[0m"</code>

<code>function</code> <code>echo_y (){</code>

<code>    </code><code># Color yellow: Warning</code>

<code>    </code><code>echo</code> <code>-e </code><code>"\033[33m$1\033[0m"</code>

<code>function</code> <code>echo_b (){</code>

<code>    </code><code># Color blue: Debug, friendly prompt</code>

<code>    </code><code>echo</code> <code>-e </code><code>"\033[34m$1\033[0m"</code>

<code># end echo color function, smarter</code>

<code>#WORKDIR="`realpath ${WORKDIR}`"</code>

<code>WORKDIR=</code><code>"`readlink -f ${PRGDIR}`"</code>

<code># end public header</code>

<code>USER=</code><code>"`id -un`"</code>

<code>LOGNAME=</code><code>"$USER"</code>

<code>if</code> <code>[ $UID -</code><code>ne</code> <code>0 ]; </code><code>then</code>

<code>    </code><code>echo</code> <code>"WARNING: Running as a non-root user, \"$LOGNAME\". Functionality may be unavailable. Only root can use some commands or options"</code>

<code>fi</code>

<code>command_exists() {</code>

<code>    </code><code># which "$@" &gt;/dev/null 2&gt;&amp;1</code>

<code>    </code><code>command</code> <code>-</code><code>v</code> <code>"$@"</code> <code>&gt;</code><code>/dev/null</code> <code>2&gt;&amp;1</code>

<code>check_command_can_be_execute(){</code>

<code>    </code><code>command_exists $1</code>

<code>check_network_connectivity(){</code>

<code>    </code><code>echo_b </code><code>"checking network connectivity ... "</code>

<code>    </code><code>network_address_to_check=8.8.4.4</code>

<code>    </code><code>stable_network_address_to_check=114.114.114.114</code>

<code>    </code><code>ping_count=2</code>

<code>    </code><code>ping</code> <code>-c ${ping_count} ${network_address_to_check} &gt;</code><code>/dev/null</code>

<code>    </code><code>retval=$?</code>

<code>    </code><code>if</code> <code>[ ${retval} -</code><code>ne</code> <code>0 ] ; </code><code>then</code>

<code>        </code><code>if</code> <code>ping</code> <code>-c ${ping_count} ${stable_network_address_to_check} &gt;</code><code>/dev/null</code><code>;</code><code>then</code>

<code>            </code><code>echo_g </code><code>"Network to $stable_network_address_to_check succeed! "</code>

<code>            </code><code>echo_y </code><code>"Note: network to $network_address_to_check failed once! maybe just some packages loss."</code>

<code>        </code><code>elif</code> <code>! ip route | </code><code>grep</code> <code>default &gt;</code><code>/dev/null</code><code>; </code><code>then</code>

<code>            </code><code>echo_r </code><code>"Network is unreachable, gateway is not set."</code>

<code>            </code><code>exit</code> <code>1</code>

<code>        </code><code>elif</code> <code>! </code><code>ping</code> <code>-c2 $(ip route | </code><code>awk</code> <code>'/default/ {print $3}'</code><code>) &gt;</code><code>/dev/null</code><code>; </code><code>then</code>

<code>            </code><code>echo_r </code><code>"Network is unreachable, gateway is unreachable."</code>

<code>        </code><code>else</code>

<code>            </code><code>echo_r </code><code>"Network is blocked! "</code>

<code>        </code><code>fi</code>

<code>    </code><code>elif</code> <code>[ ${retval} -</code><code>eq</code> <code>0 ]; </code><code>then</code>

<code>        </code><code>echo_g </code><code>"Check network connectivity passed! "</code>

<code>    </code><code>fi</code>

<code>check_name_resolve(){</code>

<code>    </code><code>echo_b </code><code>"checking DNS name resolve ... "</code>

<code>    </code><code>target_name_to_resolve=</code><code>"github.com"</code>

<code>    </code><code>stable_target_name_to_resolve=</code><code>"www.aliyun.com"</code>

<code>    </code><code>ping_count=1</code>

<code>    </code><code>if</code> <code>! </code><code>ping</code>  <code>-c${ping_count} ${target_name_to_resolve} &gt;</code><code>/dev/null</code><code>; </code><code>then</code>

<code>        </code><code>echo_y </code><code>"Name lookup failed for $target_name_to_resolve with $ping_count times "</code>

<code>        </code><code>if</code> <code>ping</code>  <code>-c${ping_count} ${stable_target_name_to_resolve} &gt;</code><code>/dev/null</code><code>; </code><code>then</code>

<code>            </code><code>echo_g </code><code>"Name lookup success for $stable_target_name_to_resolve with $ping_count times "</code>

<code>        </code><code>eval_md5sum_of_nameserver_config=</code><code>"`md5sum /etc/resolv.conf | awk '{ print $1 }'`"</code>

<code>        </code><code>if</code> <code>test</code> <code>${eval_md5sum_of_nameserver_config} = </code><code>"674ea91675cdfac353bffbf49dc593c3"</code><code>; </code><code>then</code>

<code>            </code><code>echo_y </code><code>"Nameserver config file is validated, but name lookup failed for $target_name_to_resolve with $ping_count times"</code>

<code>            </code><code>return</code> <code>0</code>

<code>        </code><code>[ -f </code><code>/etc/resolv</code><code>.conf ] &amp;&amp; </code><code>cp</code> <code>/etc/resolv</code><code>.conf </code><code>/etc/resolv</code><code>.conf_$(</code><code>date</code> <code>+%Y%m%d%H%M%S)~</code>

<code>        </code><code>cat</code> <code>&gt;</code><code>/etc/resolv</code><code>.conf&lt;&lt;eof</code>

<code>nameserver 114.114.114.114</code>

<code>nameserver 8.8.4.4</code>

<code>eof</code>

<code>    </code><code>check_name_resolve</code>

<code>    </code><code>else</code>

<code>        </code><code>echo_g </code><code>"Check DNS name resolve passed! "</code>

<code>        </code><code>return</code> <code>0</code>

<code>function</code> <code>checkOtherDependencies() {</code>

<code>    </code><code>echo_b </code><code>"Checking other dependencies for deploy procedure... "</code>

<code>    </code><code>echo_b </code><code>"\tChecking user customized variables..."</code>

<code>    </code><code># Refer:</code>

<code>    </code><code># if [ -z ${var+x} ]; then</code>

<code>    </code><code>#     echo "var is unset"; else echo "var is set to '$var'"</code>

<code>    </code><code># fi</code>

<code>    </code><code># if [ "$var x" = " x" ]; then</code>

<code>    </code><code>#     echo "var is empty"; else echo "var is set to '$var'"</code>

<code>    </code><code># if [ -z $var ]; then</code>

<code>    </code><code>if</code> <code>[[ -z ${project_clone} ]]; </code><code>then</code>

<code>        </code><code>echo_r </code><code>"Error: project_clone is undefined! "</code>

<code>        </code><code>exit</code> <code>1</code>

<code>    </code><code>elif</code> <code>[[ -z ${deploy_target_host_ip} ]]; </code><code>then</code>

<code>        </code><code>echo_r </code><code>"Error: deploy_target_host_ip is undefined! "</code>

<code>    </code><code>elif</code> <code>[[ -z ${project_top_directory_to_target_host} ]]; </code><code>then</code>

<code>        </code><code>echo_r </code><code>"Error: project_top_directory_to_target_host is undefined! "</code>

<code>    </code><code>echo_g </code><code>"\tChecking user customized variables passed! "</code>

<code>    </code><code>echo_b </code><code>"\tChecking disk space available..."</code>

<code>    </code><code>disk_space_available=`</code><code>df</code> <code>${WORKDIR} | </code><code>tail</code> <code>-n1 | </code><code>awk</code> <code>'{print $(NF-2)}'</code><code>`</code>

<code>    </code><code>if</code> <code>[[ ${disk_space_available} -lt 2097152 ]]; </code><code>then</code>

<code>        </code><code>echo_y </code><code>"Warning: Disk space of $WORKDIR is smaller than 2GB"</code>

<code>        </code><code>#exit 1</code>

<code>        </code><code>echo_g </code><code>"\tChecking disk space available passed! "</code>

<code>    </code><code>echo_g </code><code>"All required dependencies check passed! "</code>

<code>function</code> <code>setDirectoryStructureOnLocalHost() {</code>

<code>    </code><code>if</code> <code>[ -f ${WORKDIR}/.capistrano_ds_lock ];</code><code>then</code>

<code>        </code><code>echo_g </code><code>"Set directory structure has been done, skipping. "</code>

<code>        </code><code>return</code>

<code>    </code><code>echo_b </code><code>"Setting directory structure... "</code>

<code>    </code><code># learn from capistrano</code>

<code>    </code><code># Refer: http://capistranorb.com/documentation/getting-started/structure/</code>

<code>    </code><code># Refer: http://capistranorb.com/documentation/getting-started/structure/#</code>

<code>    </code><code># ├── current -&gt; /var/www/my_app_name/releases/20150120114500/</code>

<code>    </code><code># ├── releases</code>

<code>    </code><code># │   ├── 20150080072500</code>

<code>    </code><code># │   ├── 20150090083000</code>

<code>    </code><code># │   ├── 20150100093500</code>

<code>    </code><code># │   ├── 20150110104000</code>

<code>    </code><code># │   └── 20150120114500</code>

<code>    </code><code># ├── repo</code>

<code>    </code><code># │   └── &lt;VCS related data&gt;</code>

<code>    </code><code># ├── revisions.log</code>

<code>    </code><code># └── shared</code>

<code>    </code><code>#     └── &lt;linked_files and linked_dirs&gt;</code>

<code>    </code><code># current is a symlink pointing to the latest release. This symlink is updated at the end of a successful deployment. If the deployment fails in any step the current symlink still points to the old release.</code>

<code>    </code><code># releases holds all deployments in a timestamped folder. These folders are the target of the current symlink.</code>

<code>    </code><code># repo holds the version control system configured. In case of a git repository the content will be a raw git repository (e.g. objects, refs, etc.).</code>

<code>    </code><code># revisions.log is used to log every deploy or rollback. Each entry is timestamped and the executing user (username from local machine) is listed. Depending on your VCS data like branch names or revision numbers are listed as well.</code>

<code>    </code><code># shared contains the linked_files and linked_dirs which are symlinked into each release. This data persists across deployments and releases. It should be used for things like database configuration files and static and persistent user storage handed over from one release to the next.</code>

<code>    </code><code># The application is completely contained within the path of :deploy_to. If you plan on deploying multiple applications to the same server, simply choose a different :deploy_to path.</code>

<code>    </code><code># Check directories for deploy</code>

<code>    </code><code>[ ! -d ${WORKDIR}</code><code>/release</code> <code>] &amp;&amp; </code><code>mkdir</code> <code>${WORKDIR}</code><code>/release</code>

<code>    </code><code>[ ! -d ${WORKDIR}</code><code>/repository</code> <code>] &amp;&amp; </code><code>mkdir</code> <code>${WORKDIR}</code><code>/repository</code>

<code>    </code><code>[ ! -d ${WORKDIR}</code><code>/share</code> <code>] &amp;&amp; </code><code>mkdir</code> <code>${WORKDIR}</code><code>/share</code>

<code>    </code><code># end directories structure</code>

<code>    </code><code># Additional directories structure for full deploy operation</code>

<code>    </code><code># for backup remote host config file</code>

<code>    </code><code>[ ! -d ${WORKDIR}</code><code>/backup</code> <code>] &amp;&amp; </code><code>mkdir</code> <code>${WORKDIR}</code><code>/backup</code>

<code>    </code><code># set a directories structure lock</code>

<code>    </code><code>touch</code> <code>${WORKDIR}/.capistrano_ds_lock</code>

<code>    </code><code>echo_g </code><code>"Set directory structure successfully! "</code>

<code>function</code> <code>cleanOldReleases(){</code>

<code>    </code><code>save_days=${save_old_releases_for_days:-10}</code>

<code>    </code><code>if</code> <code>[ ! -d ${WORKDIR}</code><code>/release</code> <code>]; </code><code>then</code>

<code>        </code><code>echo_b </code><code>"Can NOT find release directory, skipping . "</code>

<code>    </code><code>need_clean=$(</code><code>find</code> <code>${WORKDIR}</code><code>/release</code> <code>-mtime +${save_days} -</code><code>exec</code> <code>ls</code> <code>'{}'</code> <code>\;)</code>

<code>    </code><code>if</code> <code>[ ! -z ${need_clean} ]; </code><code>then</code>

<code>        </code><code>echo_g </code><code>"Expired releases found and will be removed from project! "</code>

<code>        </code><code>find</code> <code>${WORKDIR}</code><code>/release</code> <code>-mtime +${save_days} -</code><code>exec</code> <code>rm</code> <code>-rf </code><code>'{}'</code> <code>\;</code>

<code>        </code><code>if</code> <code>[ $? -</code><code>eq</code> <code>0 ]; </code><code>then</code>

<code>            </code><code>echo_g </code><code>"Expired releases have removed from project! "</code>

<code>            </code><code>echo_r </code><code>"Can NOT remove expired releases, please alter to Admin users. "</code>

<code>        </code><code>echo_g </code><code>"All releases are not expired, skipping. "</code>

<code># git_project_clone repository branch</code>

<code>function</code> <code>git_project_clone(){</code>

<code>    </code><code>set</code> <code>-o errexit</code>

<code>    </code><code>[ $</code><code># -ge 1 ] &amp;&amp; project_clone_repository="$1"</code>

<code>    </code><code>project_clone_repository_name=</code><code>"`echo ${project_clone_repository} | awk -F '[/.]+' '{ print $(NF-1)}'`"</code>

<code>    </code><code>project_clone_directory=${WORKDIR}</code><code>/repository/</code><code>${project_clone_repository_name}</code>

<code>    </code><code>if</code> <code>test</code> <code>-n $2; </code><code>then</code>

<code>        </code><code>branch=</code><code>"$2"</code>

<code>        </code><code>branch=</code><code>"develop"</code>

<code>    </code><code>if</code> <code>test</code> <code>! -d ${project_clone_directory}; </code><code>then</code>

<code>        </code><code>echo_b </code><code>"git clone from $project_clone_repository"</code>

<code>        </code><code>git clone ${project_clone_repository} ${project_clone_directory} &gt;&gt;${WORKDIR}</code><code>/git_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log 2&gt;&amp;1</code>

<code>            </code><code># TODO(Guodong Ding) get branch names or revision numbers from VCS data</code>

<code>        </code><code>cd</code> <code>${project_clone_directory}</code>

<code>        </code><code>git checkout ${branch} &gt;&gt;${WORKDIR}</code><code>/git_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log 2&gt;&amp;1</code>

<code>        </code><code>cd</code> <code>..</code>

<code>        </code><code>echo_g </code><code>"git clone from $project_clone_repository successfully! "</code>

<code>        </code><code>echo_b </code><code>"git pull from $project_clone_repository"</code>

<code>        </code><code>git pull &gt;&gt;${WORKDIR}</code><code>/git_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log 2&gt;&amp;1</code>

<code>        </code><code># TODO(Guodong Ding) get branch names or revision numbers from VCS data</code>

<code>        </code><code>echo_g </code><code>"git pull from $project_clone_repository successfully! "</code>

<code>    </code><code>set</code> <code>+o errexit</code>

<code>function</code> <code>maven_build_project_deprecated(){</code>

<code>    </code><code>echo_b </code><code>"Do mvn build java project... "</code>

<code>    </code><code>check_command_can_be_execute mvn</code>

<code>    </code><code>cd</code> <code>${project_clone_directory}</code>

<code>    </code><code>mvn </code><code>install</code> <code>&gt;&gt;${WORKDIR}</code><code>/mvn_build_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log 2&gt;&amp;1</code>

<code>    </code><code>mvn clean package &gt;&gt;${WORKDIR}</code><code>/mvn_build_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log 2&gt;&amp;1</code>

<code>    </code><code>cd</code> <code>..</code>

<code>    </code><code>echo_g </code><code>"Do mvn build java project finished with exit code 0! "</code>

<code>function</code> <code>maven_build_project(){</code>

<code>    </code><code>echo_b </code><code>"Do mvn build java project for `echo $1 | awk -F '[/.]+' '{ print $(NF-1)}'`... "</code>

<code>        </code><code>echo_r </code><code>"mvn install failed! More details refer to ${WORKDIR}/mvn_build_$(date +%Y%m%d)_$$.log"</code>

<code>        </code><code>echo_g </code><code>"mvn install for ${project_clone_repository_name} successfully! "</code>

<code>        </code><code>echo_r </code><code>"mvn clean package for ${project_clone_repository_name} failed! More details refer to ${WORKDIR}/mvn_build_$(date +%Y%m%d)_$$.log"</code>

<code>        </code><code>echo_g </code><code>"mvn clean package for ${project_clone_repository_name} successfully! "</code>

<code>    </code><code>echo_g </code><code>"Do mvn build java project finished for ${project_clone_repository_name} with exit code 0! "</code>

<code>function</code> <code>check_ssh_can_be_connect(){</code>

<code>    </code><code>echo_b </code><code>"Check if can ssh to remote host $1 ... "</code>

<code>    </code><code>check_command_can_be_execute </code><code>ssh</code> <code>|| </code><code>return</code> <code>1</code>

<code>    </code><code>ssh</code> <code>-i </code><code>/etc/ssh/ssh_host_rsa_key</code> <code>-p 22 -oStrictHostKeyChecking=no root@$1 </code><code>"uname -a &gt;/dev/null 2&gt;&amp;1"</code>

<code>        </code><code>echo_r </code><code>"Check ssh to remote host $1 failed! "</code>

<code>        </code><code>echo_g </code><code>"Check ssh to remote host $1 successfully! "</code>

<code># ssh_execute_command_on_remote_host hostname command</code>

<code>function</code> <code>ssh_execute_command_on_remote_host(){</code>

<code>    </code><code>[ $</code><code># -ne 2 ] &amp;&amp; return 1</code>

<code>    </code><code>ssh</code> <code>-i </code><code>/etc/ssh/ssh_host_rsa_key</code> <code>-p 22 -oStrictHostKeyChecking=no root@$1 </code><code>"$2"</code> <code>&gt;&gt;${WORKDIR}</code><code>/ssh_command_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log</code>

<code>        </code><code>echo_r </code><code>"ssh execute command on remote host $2 failed! More details refer to ${WORKDIR}/ssh_command_$(date +%Y%m%d)_$$.log"</code>

<code>        </code><code>return</code> <code>1</code>

<code>        </code><code>echo_g </code><code>"ssh execute command on remote host $2 successfully! "</code>

<code>function</code> <code>restart_docker_container(){</code>

<code>    </code><code>echo_b </code><code>"Restarting docker container..."</code>

<code>    </code><code># TODO(Guodong Ding) if we need restart more related docker container</code>

<code>    </code><code>local</code> <code>docker_container_name=</code><code>""</code>

<code>    </code><code>test</code> <code>-n $1 &amp;&amp; docker_container_name=</code><code>"$1"</code>

<code>    </code><code>ssh_execute_command_on_remote_host </code><code>"docker restart $docker_container_name"</code>

<code>        </code><code>echo_r </code><code>"restart docker container for  $docker_container_name failed! "</code>

<code>        </code><code>echo_g </code><code>"restart docker container for $docker_container_name successfully! "</code>

<code># scp_local_files_to_remote_host local_path remote_hostname remote_path</code>

<code>function</code> <code>scp_local_files_to_remote_host(){</code>

<code>    </code><code>[ $</code><code># -ne 3 ] &amp;&amp; return 1</code>

<code>    </code><code>[ ! -d $1 -a ! -f $1 ] &amp;&amp; </code><code>return</code> <code>1</code>

<code>    </code><code>check_ssh_can_be_connect $2</code>

<code>    </code><code>scp</code> <code>-i </code><code>/etc/ssh/ssh_host_rsa_key</code> <code>-P 22 -oStrictHostKeyChecking=no -rp $1 root@$2:$3 &gt;</code><code>/dev/null</code> <code>2&gt;&amp;1</code>

<code>        </code><code>echo_r </code><code>"scp local files to remote host failed! "</code>

<code>        </code><code>echo_g </code><code>"scp local files to remote host successfully! "</code>

<code># scp_remote_files_to_local_host remote_hostname remote_path local_path</code>

<code>function</code> <code>scp_remote_files_to_local_host(){</code>

<code>    </code><code>check_ssh_can_be_connect $1</code>

<code>    </code><code>scp</code> <code>-i </code><code>/etc/ssh/ssh_host_rsa_key</code> <code>-P 22 -oStrictHostKeyChecking=no -rp root@$1:$2 $3 &gt;</code><code>/dev/null</code> <code>2&gt;&amp;1</code>

<code>        </code><code>echo_r </code><code>"scp remote files to local host failed! "</code>

<code>        </code><code>echo_g </code><code>"scp remote files to local host successfully! "</code>

<code>function</code> <code>backup_remote_host_config_files(){</code>

<code>    </code><code>echo_b </code><code>"backup remote host config files..."</code>

<code>    </code><code>scp_remote_files_to_local_host ${deploy_target_host_ip} ${project_top_directory_to_target_host}/* ${WORKDIR}</code><code>/backup</code>

<code>    </code><code># get config files</code>

<code>    </code><code>[ </code><code>"$(ls -A ${WORKDIR}/backup)"</code> <code>] &amp;&amp; </code><code>find</code> <code>${WORKDIR}</code><code>/backup/</code><code>. -</code><code>type</code> <code>f ! -name . -a ! -name </code><code>'*.xml*'</code> <code>-a ! -name </code><code>'*.properties*'</code> <code>-</code><code>exec</code> <code>rm</code> <code>-f -- </code><code>'{}'</code> <code>\;</code>

<code>    </code><code># remove empty directory</code>

<code>    </code><code>find</code> <code>${WORKDIR}</code><code>/backup/</code><code>. -empty -</code><code>type</code> <code>d -delete</code>

<code>    </code><code># TODO(Guodong Ding) improvements here</code>

<code>    </code><code>echo_g </code><code>"backup remote host config files finished."</code>

<code>function</code> <code>rollback_remote_host_config_files(){</code>

<code>    </code><code>echo_b </code><code>"rollback remote host config files..."</code>

<code>    </code><code>#scp_local_files_to_remote_host ${WORKDIR}/backup ${deploy_target_host_ip} ${project_top_directory_to_target_host}</code>

<code>    </code><code>saved_IFS=$IFS</code>

<code>    </code><code>IFS=</code><code>' '</code>

<code>    </code><code>cd</code> <code>${WORKDIR}</code><code>/current</code>

<code>    </code><code>for</code> <code>file</code> <code>in</code> <code>${WORKDIR}</code><code>/backup/</code><code>*;</code><code>do</code>

<code>        </code><code>scp_local_files_to_remote_host ${</code><code>file</code><code>} ${deploy_target_host_ip} ${project_top_directory_to_target_host}</code>

<code>    </code><code>done</code>

<code>    </code><code>cd</code> <code>${WORKDIR}</code>

<code>    </code><code>IFS=${saved_IFS}</code>

<code>    </code><code># TODO(Guodong Ding) if save remote host config files</code>

<code>    </code><code># some ops</code>

<code>    </code><code>echo_g </code><code>"rollback remote host config files finished."</code>

<code>function</code> <code>deploy() {</code>

<code>    </code><code>[ -n </code><code>"$header"</code> <code>] &amp;&amp; </code><code>echo</code> <code>"$header"</code>

<code>    </code><code># check a directories lock, Note: this is redundant</code>

<code>    </code><code>if</code> <code>[[ ! -f ${WORKDIR}/.lock ]]; </code><code>then</code>

<code>        </code><code>setDirectoryStructureOnLocalHost</code>

<code>    </code><code>cleanOldReleases</code>

<code>    </code><code># do dependencies checking</code>

<code>    </code><code>check_network_connectivity</code>

<code>    </code><code>checkOtherDependencies</code>

<code>    </code><code>check_ssh_can_be_connect ${deploy_target_host_ip}</code>

<code>    </code><code># do core job</code>

<code>    </code><code># TODO(Guodong Ding) if we need a git_project_clone "$project_clone_depends_1" here using auto judgment statement</code>

<code>    </code><code>test</code> <code>-z ${project_clone_depends_1} || git_project_clone </code><code>"$project_clone_depends_1"</code>

<code>    </code><code>git_project_clone </code><code>"$project_clone"</code>

<code>    </code><code>test</code> <code>-z ${project_clone_depends_1} || maven_build_project </code><code>"$project_clone_depends_1"</code>

<code>    </code><code>maven_build_project </code><code>"$project_clone"</code>

<code>    </code><code># links_target_directory_to_current</code>

<code>    </code><code># Make directory to release directory</code>

<code>    </code><code>if</code> <code>test</code> <code>! -d ${WORKDIR}</code><code>/release</code> <code>-o ! -d ${WORKDIR}</code><code>/share</code><code>; </code><code>then</code>

<code>        </code><code>echo_r </code><code>"capistrano directory structure is broken, make sure the file .capistrano_ds_lock is deleted before a new deploy! "</code>

<code>#        test -f ${WORKDIR}/.capistrano_ds_lock &amp;&amp; \rm -rf  ${WORKDIR}/.capistrano_ds_lock</code>

<code>    </code><code>new_release_just_created=</code><code>"$WORKDIR/release/$(date +%Y%m%d%H%M%S)"</code>

<code>    </code><code>[ ! -d ${new_release_just_created} ] &amp;&amp; </code><code>mkdir</code> <code>${new_release_just_created}</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/repository/</code><code>${project_clone_repository_name}</code><code>/target/</code><code>${project_clone_repository_name}/ ] &amp;&amp; \</code>

<code>        </code><code>\</code><code>cp</code> <code>-rf ${WORKDIR}</code><code>/repository/</code><code>${project_clone_repository_name}</code><code>/target/</code><code>${project_clone_repository_name}/* ${new_release_just_created}</code>

<code>     </code><code># Make source code symbolic link to current</code>

<code>    </code><code>( [ -f ${WORKDIR}</code><code>/current</code> <code>] || [ -d ${WORKDIR}</code><code>/current</code> <code>] ) &amp;&amp; </code><code>rm</code> <code>-rf ${WORKDIR}</code><code>/current</code>

<code>    </code><code>ln</code> <code>-s ${new_release_just_created} ${WORKDIR}</code><code>/current</code>

<code>    </code><code># backup remote host config files</code>

<code>    </code><code>backup_remote_host_config_files</code>

<code>#    scp_local_files_to_remote_host ${WORKDIR}/current/ ${deploy_target_host_ip} ${project_top_directory_to_target_host}</code>

<code>    </code><code>for</code> <code>file</code> <code>in</code> <code>${WORKDIR}</code><code>/current/</code><code>*;</code><code>do</code>

<code>    </code><code># rollback remote host config files</code>

<code>    </code><code>rollback_remote_host_config_files</code>

<code>    </code><code># Move conf and logs directives from release to share</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/release/conf</code> <code>] &amp;&amp; </code><code>mv</code> <code>${WORKDIR}</code><code>/release/conf</code> <code>${WORKDIR}</code><code>/share/conf</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/release/logs</code> <code>] &amp;&amp; </code><code>mv</code> <code>${WORKDIR}</code><code>/release/logs</code> <code>${WORKDIR}</code><code>/share/logs</code>

<code>    </code><code># Make conf and logs symbolic link to current</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/share/conf</code> <code>] &amp;&amp; </code><code>ln</code> <code>-s ${WORKDIR}</code><code>/share/conf</code> <code>${WORKDIR}</code><code>/current/conf</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/share/logs</code> <code>] &amp;&amp; </code><code>ln</code> <code>-s ${WORKDIR}</code><code>/share/logs</code> <code>${WORKDIR}</code><code>/current/logs</code>

<code>    </code><code># Start service or validate status</code>

<code>    </code><code>if</code> <code>[[ -e ${WORKDIR}</code><code>/current/bin/startup</code><code>.sh ]]; </code><code>then</code>

<code>        </code><code>${WORKDIR}</code><code>/current/bin/startup</code><code>.sh start</code>

<code>        </code><code>RETVAL=$?</code>

<code>        </code><code># TODO(Guodong Ding) external health check</code>

<code>        </code><code>test</code> <code>-z ${docker_container_name} || restart_docker_container ${docker_container_name}</code>

<code>    </code><code># if started ok, then create a workable program to a file</code>

<code>    </code><code>if</code> <code>[[ ${RETVAL} -</code><code>eq</code> <code>0 ]]; </code><code>then</code>

<code>    </code><code># Note cat with eof must start at row 0, and with eof end only, such as no blank spaces, etc</code>

<code>    </code><code>cat</code> <code>&gt;${WORKDIR}</code><code>/share/workable_program</code><code>.log &lt;&lt;eof</code>

<code>${new_release_just_created}</code>

<code>    </code><code>echo_g </code><code>"Deploy successfully! "</code>

<code>    </code><code>echo_g </code><code>"current workable version is $(cat ${WORKDIR}/share/workable_program.log)"</code>

<code>#    ls --color=auto -l ${WORKDIR}/current</code>

<code>#    ls --color=auto -l ${WORKDIR}/current/</code>

<code>        </code><code>echo_r </code><code>"Error: Deploy failed! "</code>

<code>        </code><code>${WORKDIR}/`</code><code>basename</code> <code>$0` rollback</code>

<code># Rollback to last right configuration</code>

<code>function</code> <code>rollback() {</code>

<code>    </code><code>echo_b </code><code>"Rollback to last right configuration... "</code>

<code>    </code><code># The key is find last files which can work</code>

<code>    </code><code>WORKABLE_PROGRAM=`</code><code>cat</code> <code>${WORKDIR}</code><code>/share/workable_program</code><code>.log`</code>

<code>    </code><code>if</code> <code>[[ -z ${WORKABLE_PROGRAM} ]]; </code><code>then</code>

<code>        </code><code>echo_r </code><code>"Error: Can NOT find workable release version! Please check if it is first deployment! "</code>

<code>    </code><code># Stop service if we have</code>

<code>        </code><code>${WORKDIR}</code><code>/current/bin/startup</code><code>.sh stop</code>

<code>    </code><code># Remove failed deploy</code>

<code>    </code><code>rm</code> <code>-rf ${WORKDIR}</code><code>/current</code>

<code>    </code><code># Remake source code symbolic link to current</code>

<code>    </code><code>ln</code> <code>-s ${WORKABLE_PROGRAM} ${WORKDIR}</code><code>/current</code>

<code>    </code><code># Remake conf and logs symbolic link to current</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/share/conf</code> <code>] &amp;&amp; </code><code>ln</code> <code>-s ${WORKDIR}</code><code>/share/conf</code> <code>${WORKDIR}</code><code>/current</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/share/logs</code> <code>] &amp;&amp; </code><code>ln</code> <code>-s ${WORKDIR}</code><code>/share/logs</code> <code>${WORKDIR}</code><code>/current</code>

<code>        </code><code>echo_g </code><code>"Rollback successfully! "</code>

<code>        </code><code>echo_g </code><code>"current workable version is $WORKABLE_PROGRAM"</code>

<code>#        ls --color=auto -l ${WORKDIR}/current</code>

<code>function</code> <code>destroy() {</code>

<code>    </code><code># echo a Warning message</code>

<code>    </code><code>echo_y </code><code>"Warning: This action will destroy all this project, and this is unrecoverable! "</code>

<code>    </code><code>answer=</code><code>"n"</code>

<code>    </code><code>echo_y </code><code>"Do you want to destroy this project? "</code>

<code>    </code><code>read</code> <code>-p </code><code>"(Default no,if you want please input: y ,if not please press the enter button):"</code> <code>answer</code>

<code>    </code><code>case</code> <code>"$answer"</code> <code>in</code>

<code>        </code><code>y|Y|Yes|YES|</code><code>yes</code><code>|yES|yEs|YeS|yeS )</code>

<code>        </code><code># delete all file expect for this script self</code>

<code>        </code><code># find: warning: Unix filenames usually don't contain slashes (though pathnames do).  That means that '-name `./deploy.sh'' will probably evaluate to false all the time on this system.  You might find the '-wholename' test more useful, or perhaps '-samefile'.  Alternatively, if you are using GNU grep, you could use 'find ... -print0 | grep -FzZ `./deploy.sh''.</code>

<code>            </code><code># echo $WORKDIR/</code>

<code>            </code><code>#find -L $WORKDIR -type f ! -name "$(basename $0)" -exec ls --color=auto -al {} \;</code>

<code>            </code><code># find -L . -type f ! -name "deploy.sh" -exec ls --color=auto -al {} \;</code>

<code>            </code><code># find -L . -type d -exec ls --color=auto -al {} \;</code>

<code>            </code><code># find -L ./ -maxdepth 1 ! -name "deploy.sh" ! -wholename "./"</code>

<code>        </code><code># ls | grep -v "filename" | xargs rm -rf</code>

<code>        </code><code>find</code> <code>-L ${WORKDIR} -maxdepth 1 ! -name </code><code>"$(basename $0)"</code> <code>! -wholename </code><code>"$WORKDIR"</code>  <code>-</code><code>exec</code> <code>rm</code> <code>-rf </code><code>'{}'</code> <code>\;</code>

<code>        </code><code>if</code> <code>[ $? -</code><code>eq</code> <code>0 ];</code><code>then</code>

<code>            </code><code>test</code> <code>-f ${WORKDIR}/.capistrano_ds_lock &amp;&amp; \</code><code>rm</code> <code>-rf  ${WORKDIR}/.capistrano_ds_lock</code>

<code>            </code><code>echo_g </code><code>"Destroy this project successfully! Now will exit with status 0. "</code>

<code>            </code><code>exit</code> <code>0</code>

<code>            </code><code>echo_r </code><code>"Error: something go wrong! Please check or alter to Admin user! "</code>

<code>        </code><code>;;</code>

<code>        </code><code>n|N|No|NO|no|nO)</code>

<code>        </code><code>echo_g </code><code>"destroy action is cancel"</code>

<code>        </code><code>exit</code> <code>0</code>

<code>        </code><code>*)</code>

<code>        </code><code>echo_r </code><code>"Are you kidding me? You are a bad kid! "</code>

<code>    </code><code>esac</code>

<code>function</code> <code>main(){</code>

<code>    </code><code>lock_filename=</code><code>"lock_$$_$RANDOM"</code>

<code>#    lock_filename_full_path="/var/lock/subsys/$lock_filename"</code>

<code>    </code><code>lock_filename_full_path=</code><code>"/var/lock/$lock_filename"</code>

<code>    </code><code>if</code> <code>( </code><code>set</code> <code>-o noclobber; </code><code>echo</code> <code>"$$"</code> <code>&gt; </code><code>"$lock_filename_full_path"</code><code>) 2&gt; </code><code>/dev/null</code><code>;</code><code>then</code>

<code>        </code><code>trap</code> <code>'rm -f "$lock_filename_full_path"; exit $?'</code> <code>INT TERM EXIT</code>

<code>        </code><code># Just a test for call itself, comment it</code>

<code>         </code><code>if</code> <code>[[ $</code><code># -ne 1 ]]; then</code>

<code>#            $0 deploy</code>

<code>            </code><code>[ ! -x ${WORKDIR}/`</code><code>basename</code> <code>$0` ] &amp;&amp; </code><code>chmod</code> <code>+x ${WORKDIR}/`</code><code>basename</code> <code>$0`</code>

<code>            </code><code>${WORKDIR}/`</code><code>basename</code> <code>$0` deploy</code>

<code>         </code><code>fi</code>

<code>        </code><code>case</code> <code>$1 </code><code>in</code>

<code>            </code><code>deploy)</code>

<code>                </code><code>deploy</code>

<code>                </code><code>;;</code>

<code>            </code><code>rollback)</code>

<code>                </code><code>rollback</code>

<code>            </code><code>destroy)</code>

<code>                </code><code>destroy</code>

<code>            </code><code>help|*)</code>

<code>                </code><code>echo</code> <code>"Usage: $0 {deploy|rollback|destroy} with $0 itself"</code>

<code>                </code><code>exit</code> <code>1</code>

<code>        </code><code>esac</code>

<code>        </code><code>rm</code> <code>-f </code><code>"$lock_filename_full_path"</code>

<code>        </code><code>trap</code> <code>- INT TERM EXIT</code>

<code>        </code><code>echo</code> <code>"Failed to acquire lock: $lock_filename_full_path"</code>

<code>        </code><code>echo</code> <code>"held by $(cat ${lock_filename_full_path})"</code>

<code>main $@</code>

<code>#${_XTRACE_FUNCTIONS}</code>

运行效果:

可以尝试使用Chrome浏览器打开该页面,右键单击,选择“在新标签页中打开图片”查看清晰大图。

推荐Windows用户使用PyCharm(5.0.x)结合Bash Support插件编辑bash shell script文件。

注:由于该脚本的大幅度更新,因此最新的运行效果图可以自行运行观察。

<a href="http://s3.51cto.com/wyfs02/M01/7F/E0/wKiom1cwYmfh-qg1AABt77YM4VE830.jpg" target="_blank"></a>

<a href="http://s3.51cto.com/wyfs02/M01/7F/DD/wKioL1cwY0WgbezdAADGfbJSWBU051.jpg" target="_blank"></a>

--end--

本文转自 urey_pp 51CTO博客,原文链接:http://blog.51cto.com/dgd2010/1771555,如需转载请自行联系原作者