天天看點

Linux Shell腳本之遠端自動化部署java maven項目

腳本功能:

檢查運作環境(包括運作權限、網絡、DNS解析等),自動從git上擷取java maven項目工程源碼,在機器A上build,build完成後,備份機器B上原有的配置檔案(如果存在),将Class、Lib檔案和備份的配置檔案等上傳到機器B,重新啟動機器B上的服務以便變更生效。

腳本特點:

1.(與之前的自動部署腳本相比)全新優化了腳本代碼,更friendly,結構更緊湊、邏輯更加嚴謹

2.Public header删除了無用或者不好用的有色彩顯示函數,并修正了WORKDIR不是絕對路徑可能導緻的bug

3.修正了域名解析判斷是否正常的一個bug,該bug可能導緻遇到無法解析後不斷嘗試解析

4.全新的通用main函數,自帶檔案鎖和自動接受處理INT、TERM、EXIT程序信号,整個腳本更加的子產品化和标準化

5.針對項目方面,增加了對java項目配置檔案的備份和還原功能,增加了對docker容器的支援

使用辦法:

将腳本上傳到Linux任意目錄,至少修改三個變量(分别是項目源碼的git位址、部署對象的IP、部署對象的目标目錄):

1

2

3

<code>project_clone=</code><code>"ssh://git@xxx/xxx.git"</code>

<code>deploy_target_host_ip=</code><code>"xxx.xxx.xxx.xxx"</code>

<code>project_top_directory_to_target_host=</code><code>"/path/to/deploy/project"</code>

如果此項目依賴于其他項目,則修改“project_clone_depends_1”變量,如果要想使部署後自動生效,則,可以将啟動腳本放在項目git源碼下的bin目錄下,預設名稱為“startup.sh”

如果此項目部署在目标主機的docker容器内,則修改“docker_container_name”變量,以便重新開機容器生效。

多個容器啟動的依賴關系的處理已經在TODO計劃中。

首次執行需要将配置檔案準确的寫入項目檔案中,一次寫入後期無須修改,如需修改,直接修改部署對象主機上的配置檔案即可。

在任意位置使用下方指令運作即可,腳本一旦運作一次,自動添加可執行權限,無須手動添加。

<code>bash</code> <code>/path/to/this</code><code>.sh</code>

腳本内容:

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

67

68

69

70

71

72

73

74

75

76

77

78

79

80

81

82

83

84

85

86

87

88

89

90

91

92

93

94

95

96

97

98

99

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

160

161

162

163

164

165

166

167

168

169

170

171

172

173

174

175

176

177

178

179

180

181

182

183

184

185

186

187

188

189

190

191

192

193

194

195

196

197

198

199

200

201

202

203

204

205

206

207

208

209

210

211

212

213

214

215

216

217

218

219

220

221

222

223

224

225

226

227

228

229

230

231

232

233

234

235

236

237

238

239

240

241

242

243

244

245

246

247

248

249

250

251

252

253

254

255

256

257

258

259

260

261

262

263

264

265

266

267

268

269

270

271

272

273

274

275

276

277

278

279

280

281

282

283

284

285

286

287

288

289

290

291

292

293

294

295

296

297

298

299

300

301

302

303

304

305

306

307

308

309

310

311

312

313

314

315

316

317

318

319

320

321

322

323

324

325

326

327

328

329

330

331

332

333

334

335

336

337

338

339

340

341

342

343

344

345

346

347

348

349

350

351

352

353

354

355

356

357

358

359

360

361

362

363

364

365

366

367

368

369

370

371

372

373

374

375

376

377

378

379

380

381

382

383

384

385

386

387

388

389

390

391

392

393

394

395

396

397

398

399

400

401

402

403

404

405

406

407

408

409

410

411

412

413

414

415

416

417

418

419

420

421

422

423

424

425

426

427

428

429

430

431

432

433

434

435

436

437

438

439

440

441

442

443

444

445

446

447

448

449

450

451

452

453

454

455

456

457

458

459

460

461

462

463

464

465

466

467

468

469

470

471

472

473

474

475

476

477

478

479

480

481

482

483

484

485

486

487

488

489

490

491

492

493

494

495

496

497

498

499

500

501

502

503

504

505

506

507

508

509

510

511

512

513

514

515

516

517

518

519

520

521

522

523

524

525

526

527

528

529

530

531

532

533

534

535

536

537

538

539

540

541

542

543

544

545

546

547

548

549

550

551

552

553

554

555

556

557

558

559

560

561

562

563

564

565

566

567

568

569

570

571

572

573

574

575

576

577

578

579

580

581

582

583

584

585

586

587

588

589

590

591

592

593

594

595

596

597

598

599

600

601

602

603

604

605

606

607

608

609

610

611

612

613

614

615

616

617

618

619

620

621

622

623

624

625

626

627

628

629

630

631

632

633

634

635

636

637

638

639

640

641

642

643

644

645

646

647

<code>#!/bin/bash</code>

<code># Name: doDeploy.sh</code>

<code>#Execute this shell script to deploy Java projects built by Maven automatically on remote hosts.</code>

<code># debug option</code>

<code>#_XTRACE_FUNCTIONS=$(set +o | grep xtrace)</code>

<code>#set -o xtrace</code>

<code># define user friendly messages</code>

<code>header="</code>

<code>Function: Execute this shell script to deploy Java projects built by Maven automatically on remote hosts.</code>

<code>License: Open </code><code>source</code> <code>software</code>

<code>"</code>

<code># define variables</code>

<code># Where to get source code</code>

<code>project_clone_depends_1=</code><code>""</code>

<code>docker_container_name=</code><code>""</code>

<code># Setting how many days do you want save old releases, default is 10 days</code>

<code>save_old_releases_for_days=10</code>

<code># end define variables</code>

<code># pretreatment</code>

<code>test</code> <code>-z ${project_clone_depends_1} || project_clone_target_depends_1=</code><code>"`echo ${project_clone_depends_1} | awk -F '[/.]+' '{ print $(NF-1)}'`"</code>

<code>project_clone_target=</code><code>"`echo ${project_clone} | awk -F '[/.]+' '{ print $(NF-1)}'`"</code>

<code>project_clone_repository_name=${project_clone_target}</code>

<code># end pretreatment</code>

<code># Public header</code>

<code># =============================================================================================================================</code>

<code># resolve links - $0 may be a symbolic link</code>

<code># learn from apache-tomcat-6.x.xx/bin/catalina.sh</code>

<code>PRG=</code><code>"$0"</code>

<code>while</code> <code>[ -h </code><code>"$PRG"</code> <code>]; </code><code>do</code>

<code>  </code><code>ls</code><code>=`</code><code>ls</code> <code>-ld </code><code>"$PRG"</code><code>`</code>

<code>  </code><code>link=`</code><code>expr</code> <code>"$ls"</code> <code>: </code><code>'.*-&gt; \(.*\)$'</code><code>`</code>

<code>  </code><code>if</code> <code>expr</code> <code>"$link"</code> <code>: </code><code>'/.*'</code> <code>&gt; </code><code>/dev/null</code><code>; </code><code>then</code>

<code>    </code><code>PRG=</code><code>"$link"</code>

<code>  </code><code>else</code>

<code>    </code><code>PRG=`</code><code>dirname</code> <code>"$PRG"</code><code>`/</code><code>"$link"</code>

<code>  </code><code>fi</code>

<code>done</code>

<code># Get standard environment variables</code>

<code>PRGDIR=`</code><code>dirname</code> <code>"$PRG"</code><code>`</code>

<code># echo color function, smarter, learn from lnmp.org lnmp install.sh</code>

<code>function</code> <code>echo_r (){</code>

<code>    </code><code># Color red: Error, Failed</code>

<code>    </code><code>[ $</code><code># -ne 1 ] &amp;&amp; return 1</code>

<code>    </code><code>echo</code> <code>-e </code><code>"\033[31m$1\033[0m"</code>

<code>}</code>

<code>function</code> <code>echo_g (){</code>

<code>    </code><code># Color green: Success</code>

<code>    </code><code>echo</code> <code>-e </code><code>"\033[32m$1\033[0m"</code>

<code>function</code> <code>echo_y (){</code>

<code>    </code><code># Color yellow: Warning</code>

<code>    </code><code>echo</code> <code>-e </code><code>"\033[33m$1\033[0m"</code>

<code>function</code> <code>echo_b (){</code>

<code>    </code><code># Color blue: Debug, friendly prompt</code>

<code>    </code><code>echo</code> <code>-e </code><code>"\033[34m$1\033[0m"</code>

<code># end echo color function, smarter</code>

<code>#WORKDIR="`realpath ${WORKDIR}`"</code>

<code>WORKDIR=</code><code>"`readlink -f ${PRGDIR}`"</code>

<code># end public header</code>

<code>USER=</code><code>"`id -un`"</code>

<code>LOGNAME=</code><code>"$USER"</code>

<code>if</code> <code>[ $UID -</code><code>ne</code> <code>0 ]; </code><code>then</code>

<code>    </code><code>echo</code> <code>"WARNING: Running as a non-root user, \"$LOGNAME\". Functionality may be unavailable. Only root can use some commands or options"</code>

<code>fi</code>

<code>command_exists() {</code>

<code>    </code><code># which "$@" &gt;/dev/null 2&gt;&amp;1</code>

<code>    </code><code>command</code> <code>-</code><code>v</code> <code>"$@"</code> <code>&gt;</code><code>/dev/null</code> <code>2&gt;&amp;1</code>

<code>check_command_can_be_execute(){</code>

<code>    </code><code>command_exists $1</code>

<code>check_network_connectivity(){</code>

<code>    </code><code>echo_b </code><code>"checking network connectivity ... "</code>

<code>    </code><code>network_address_to_check=8.8.4.4</code>

<code>    </code><code>stable_network_address_to_check=114.114.114.114</code>

<code>    </code><code>ping_count=2</code>

<code>    </code><code>ping</code> <code>-c ${ping_count} ${network_address_to_check} &gt;</code><code>/dev/null</code>

<code>    </code><code>retval=$?</code>

<code>    </code><code>if</code> <code>[ ${retval} -</code><code>ne</code> <code>0 ] ; </code><code>then</code>

<code>        </code><code>if</code> <code>ping</code> <code>-c ${ping_count} ${stable_network_address_to_check} &gt;</code><code>/dev/null</code><code>;</code><code>then</code>

<code>            </code><code>echo_g </code><code>"Network to $stable_network_address_to_check succeed! "</code>

<code>            </code><code>echo_y </code><code>"Note: network to $network_address_to_check failed once! maybe just some packages loss."</code>

<code>        </code><code>elif</code> <code>! ip route | </code><code>grep</code> <code>default &gt;</code><code>/dev/null</code><code>; </code><code>then</code>

<code>            </code><code>echo_r </code><code>"Network is unreachable, gateway is not set."</code>

<code>            </code><code>exit</code> <code>1</code>

<code>        </code><code>elif</code> <code>! </code><code>ping</code> <code>-c2 $(ip route | </code><code>awk</code> <code>'/default/ {print $3}'</code><code>) &gt;</code><code>/dev/null</code><code>; </code><code>then</code>

<code>            </code><code>echo_r </code><code>"Network is unreachable, gateway is unreachable."</code>

<code>        </code><code>else</code>

<code>            </code><code>echo_r </code><code>"Network is blocked! "</code>

<code>        </code><code>fi</code>

<code>    </code><code>elif</code> <code>[ ${retval} -</code><code>eq</code> <code>0 ]; </code><code>then</code>

<code>        </code><code>echo_g </code><code>"Check network connectivity passed! "</code>

<code>    </code><code>fi</code>

<code>check_name_resolve(){</code>

<code>    </code><code>echo_b </code><code>"checking DNS name resolve ... "</code>

<code>    </code><code>target_name_to_resolve=</code><code>"github.com"</code>

<code>    </code><code>stable_target_name_to_resolve=</code><code>"www.aliyun.com"</code>

<code>    </code><code>ping_count=1</code>

<code>    </code><code>if</code> <code>! </code><code>ping</code>  <code>-c${ping_count} ${target_name_to_resolve} &gt;</code><code>/dev/null</code><code>; </code><code>then</code>

<code>        </code><code>echo_y </code><code>"Name lookup failed for $target_name_to_resolve with $ping_count times "</code>

<code>        </code><code>if</code> <code>ping</code>  <code>-c${ping_count} ${stable_target_name_to_resolve} &gt;</code><code>/dev/null</code><code>; </code><code>then</code>

<code>            </code><code>echo_g </code><code>"Name lookup success for $stable_target_name_to_resolve with $ping_count times "</code>

<code>        </code><code>eval_md5sum_of_nameserver_config=</code><code>"`md5sum /etc/resolv.conf | awk '{ print $1 }'`"</code>

<code>        </code><code>if</code> <code>test</code> <code>${eval_md5sum_of_nameserver_config} = </code><code>"674ea91675cdfac353bffbf49dc593c3"</code><code>; </code><code>then</code>

<code>            </code><code>echo_y </code><code>"Nameserver config file is validated, but name lookup failed for $target_name_to_resolve with $ping_count times"</code>

<code>            </code><code>return</code> <code>0</code>

<code>        </code><code>[ -f </code><code>/etc/resolv</code><code>.conf ] &amp;&amp; </code><code>cp</code> <code>/etc/resolv</code><code>.conf </code><code>/etc/resolv</code><code>.conf_$(</code><code>date</code> <code>+%Y%m%d%H%M%S)~</code>

<code>        </code><code>cat</code> <code>&gt;</code><code>/etc/resolv</code><code>.conf&lt;&lt;eof</code>

<code>nameserver 114.114.114.114</code>

<code>nameserver 8.8.4.4</code>

<code>eof</code>

<code>    </code><code>check_name_resolve</code>

<code>    </code><code>else</code>

<code>        </code><code>echo_g </code><code>"Check DNS name resolve passed! "</code>

<code>        </code><code>return</code> <code>0</code>

<code>function</code> <code>checkOtherDependencies() {</code>

<code>    </code><code>echo_b </code><code>"Checking other dependencies for deploy procedure... "</code>

<code>    </code><code>echo_b </code><code>"\tChecking user customized variables..."</code>

<code>    </code><code># Refer:</code>

<code>    </code><code># if [ -z ${var+x} ]; then</code>

<code>    </code><code>#     echo "var is unset"; else echo "var is set to '$var'"</code>

<code>    </code><code># fi</code>

<code>    </code><code># if [ "$var x" = " x" ]; then</code>

<code>    </code><code>#     echo "var is empty"; else echo "var is set to '$var'"</code>

<code>    </code><code># if [ -z $var ]; then</code>

<code>    </code><code>if</code> <code>[[ -z ${project_clone} ]]; </code><code>then</code>

<code>        </code><code>echo_r </code><code>"Error: project_clone is undefined! "</code>

<code>        </code><code>exit</code> <code>1</code>

<code>    </code><code>elif</code> <code>[[ -z ${deploy_target_host_ip} ]]; </code><code>then</code>

<code>        </code><code>echo_r </code><code>"Error: deploy_target_host_ip is undefined! "</code>

<code>    </code><code>elif</code> <code>[[ -z ${project_top_directory_to_target_host} ]]; </code><code>then</code>

<code>        </code><code>echo_r </code><code>"Error: project_top_directory_to_target_host is undefined! "</code>

<code>    </code><code>echo_g </code><code>"\tChecking user customized variables passed! "</code>

<code>    </code><code>echo_b </code><code>"\tChecking disk space available..."</code>

<code>    </code><code>disk_space_available=`</code><code>df</code> <code>${WORKDIR} | </code><code>tail</code> <code>-n1 | </code><code>awk</code> <code>'{print $(NF-2)}'</code><code>`</code>

<code>    </code><code>if</code> <code>[[ ${disk_space_available} -lt 2097152 ]]; </code><code>then</code>

<code>        </code><code>echo_y </code><code>"Warning: Disk space of $WORKDIR is smaller than 2GB"</code>

<code>        </code><code>#exit 1</code>

<code>        </code><code>echo_g </code><code>"\tChecking disk space available passed! "</code>

<code>    </code><code>echo_g </code><code>"All required dependencies check passed! "</code>

<code>function</code> <code>setDirectoryStructureOnLocalHost() {</code>

<code>    </code><code>if</code> <code>[ -f ${WORKDIR}/.capistrano_ds_lock ];</code><code>then</code>

<code>        </code><code>echo_g </code><code>"Set directory structure has been done, skipping. "</code>

<code>        </code><code>return</code>

<code>    </code><code>echo_b </code><code>"Setting directory structure... "</code>

<code>    </code><code># learn from capistrano</code>

<code>    </code><code># Refer: http://capistranorb.com/documentation/getting-started/structure/</code>

<code>    </code><code># Refer: http://capistranorb.com/documentation/getting-started/structure/#</code>

<code>    </code><code># ├── current -&gt; /var/www/my_app_name/releases/20150120114500/</code>

<code>    </code><code># ├── releases</code>

<code>    </code><code># │   ├── 20150080072500</code>

<code>    </code><code># │   ├── 20150090083000</code>

<code>    </code><code># │   ├── 20150100093500</code>

<code>    </code><code># │   ├── 20150110104000</code>

<code>    </code><code># │   └── 20150120114500</code>

<code>    </code><code># ├── repo</code>

<code>    </code><code># │   └── &lt;VCS related data&gt;</code>

<code>    </code><code># ├── revisions.log</code>

<code>    </code><code># └── shared</code>

<code>    </code><code>#     └── &lt;linked_files and linked_dirs&gt;</code>

<code>    </code><code># current is a symlink pointing to the latest release. This symlink is updated at the end of a successful deployment. If the deployment fails in any step the current symlink still points to the old release.</code>

<code>    </code><code># releases holds all deployments in a timestamped folder. These folders are the target of the current symlink.</code>

<code>    </code><code># repo holds the version control system configured. In case of a git repository the content will be a raw git repository (e.g. objects, refs, etc.).</code>

<code>    </code><code># revisions.log is used to log every deploy or rollback. Each entry is timestamped and the executing user (username from local machine) is listed. Depending on your VCS data like branch names or revision numbers are listed as well.</code>

<code>    </code><code># shared contains the linked_files and linked_dirs which are symlinked into each release. This data persists across deployments and releases. It should be used for things like database configuration files and static and persistent user storage handed over from one release to the next.</code>

<code>    </code><code># The application is completely contained within the path of :deploy_to. If you plan on deploying multiple applications to the same server, simply choose a different :deploy_to path.</code>

<code>    </code><code># Check directories for deploy</code>

<code>    </code><code>[ ! -d ${WORKDIR}</code><code>/release</code> <code>] &amp;&amp; </code><code>mkdir</code> <code>${WORKDIR}</code><code>/release</code>

<code>    </code><code>[ ! -d ${WORKDIR}</code><code>/repository</code> <code>] &amp;&amp; </code><code>mkdir</code> <code>${WORKDIR}</code><code>/repository</code>

<code>    </code><code>[ ! -d ${WORKDIR}</code><code>/share</code> <code>] &amp;&amp; </code><code>mkdir</code> <code>${WORKDIR}</code><code>/share</code>

<code>    </code><code># end directories structure</code>

<code>    </code><code># Additional directories structure for full deploy operation</code>

<code>    </code><code># for backup remote host config file</code>

<code>    </code><code>[ ! -d ${WORKDIR}</code><code>/backup</code> <code>] &amp;&amp; </code><code>mkdir</code> <code>${WORKDIR}</code><code>/backup</code>

<code>    </code><code># set a directories structure lock</code>

<code>    </code><code>touch</code> <code>${WORKDIR}/.capistrano_ds_lock</code>

<code>    </code><code>echo_g </code><code>"Set directory structure successfully! "</code>

<code>function</code> <code>cleanOldReleases(){</code>

<code>    </code><code>save_days=${save_old_releases_for_days:-10}</code>

<code>    </code><code>if</code> <code>[ ! -d ${WORKDIR}</code><code>/release</code> <code>]; </code><code>then</code>

<code>        </code><code>echo_b </code><code>"Can NOT find release directory, skipping . "</code>

<code>    </code><code>need_clean=$(</code><code>find</code> <code>${WORKDIR}</code><code>/release</code> <code>-mtime +${save_days} -</code><code>exec</code> <code>ls</code> <code>'{}'</code> <code>\;)</code>

<code>    </code><code>if</code> <code>[ ! -z ${need_clean} ]; </code><code>then</code>

<code>        </code><code>echo_g </code><code>"Expired releases found and will be removed from project! "</code>

<code>        </code><code>find</code> <code>${WORKDIR}</code><code>/release</code> <code>-mtime +${save_days} -</code><code>exec</code> <code>rm</code> <code>-rf </code><code>'{}'</code> <code>\;</code>

<code>        </code><code>if</code> <code>[ $? -</code><code>eq</code> <code>0 ]; </code><code>then</code>

<code>            </code><code>echo_g </code><code>"Expired releases have removed from project! "</code>

<code>            </code><code>echo_r </code><code>"Can NOT remove expired releases, please alter to Admin users. "</code>

<code>        </code><code>echo_g </code><code>"All releases are not expired, skipping. "</code>

<code># git_project_clone repository branch</code>

<code>function</code> <code>git_project_clone(){</code>

<code>    </code><code>set</code> <code>-o errexit</code>

<code>    </code><code>[ $</code><code># -ge 1 ] &amp;&amp; project_clone_repository="$1"</code>

<code>    </code><code>project_clone_repository_name=</code><code>"`echo ${project_clone_repository} | awk -F '[/.]+' '{ print $(NF-1)}'`"</code>

<code>    </code><code>project_clone_directory=${WORKDIR}</code><code>/repository/</code><code>${project_clone_repository_name}</code>

<code>    </code><code>if</code> <code>test</code> <code>-n $2; </code><code>then</code>

<code>        </code><code>branch=</code><code>"$2"</code>

<code>        </code><code>branch=</code><code>"develop"</code>

<code>    </code><code>if</code> <code>test</code> <code>! -d ${project_clone_directory}; </code><code>then</code>

<code>        </code><code>echo_b </code><code>"git clone from $project_clone_repository"</code>

<code>        </code><code>git clone ${project_clone_repository} ${project_clone_directory} &gt;&gt;${WORKDIR}</code><code>/git_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log 2&gt;&amp;1</code>

<code>            </code><code># TODO(Guodong Ding) get branch names or revision numbers from VCS data</code>

<code>        </code><code>cd</code> <code>${project_clone_directory}</code>

<code>        </code><code>git checkout ${branch} &gt;&gt;${WORKDIR}</code><code>/git_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log 2&gt;&amp;1</code>

<code>        </code><code>cd</code> <code>..</code>

<code>        </code><code>echo_g </code><code>"git clone from $project_clone_repository successfully! "</code>

<code>        </code><code>echo_b </code><code>"git pull from $project_clone_repository"</code>

<code>        </code><code>git pull &gt;&gt;${WORKDIR}</code><code>/git_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log 2&gt;&amp;1</code>

<code>        </code><code># TODO(Guodong Ding) get branch names or revision numbers from VCS data</code>

<code>        </code><code>echo_g </code><code>"git pull from $project_clone_repository successfully! "</code>

<code>    </code><code>set</code> <code>+o errexit</code>

<code>function</code> <code>maven_build_project_deprecated(){</code>

<code>    </code><code>echo_b </code><code>"Do mvn build java project... "</code>

<code>    </code><code>check_command_can_be_execute mvn</code>

<code>    </code><code>cd</code> <code>${project_clone_directory}</code>

<code>    </code><code>mvn </code><code>install</code> <code>&gt;&gt;${WORKDIR}</code><code>/mvn_build_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log 2&gt;&amp;1</code>

<code>    </code><code>mvn clean package &gt;&gt;${WORKDIR}</code><code>/mvn_build_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log 2&gt;&amp;1</code>

<code>    </code><code>cd</code> <code>..</code>

<code>    </code><code>echo_g </code><code>"Do mvn build java project finished with exit code 0! "</code>

<code>function</code> <code>maven_build_project(){</code>

<code>    </code><code>echo_b </code><code>"Do mvn build java project for `echo $1 | awk -F '[/.]+' '{ print $(NF-1)}'`... "</code>

<code>        </code><code>echo_r </code><code>"mvn install failed! More details refer to ${WORKDIR}/mvn_build_$(date +%Y%m%d)_$$.log"</code>

<code>        </code><code>echo_g </code><code>"mvn install for ${project_clone_repository_name} successfully! "</code>

<code>        </code><code>echo_r </code><code>"mvn clean package for ${project_clone_repository_name} failed! More details refer to ${WORKDIR}/mvn_build_$(date +%Y%m%d)_$$.log"</code>

<code>        </code><code>echo_g </code><code>"mvn clean package for ${project_clone_repository_name} successfully! "</code>

<code>    </code><code>echo_g </code><code>"Do mvn build java project finished for ${project_clone_repository_name} with exit code 0! "</code>

<code>function</code> <code>check_ssh_can_be_connect(){</code>

<code>    </code><code>echo_b </code><code>"Check if can ssh to remote host $1 ... "</code>

<code>    </code><code>check_command_can_be_execute </code><code>ssh</code> <code>|| </code><code>return</code> <code>1</code>

<code>    </code><code>ssh</code> <code>-i </code><code>/etc/ssh/ssh_host_rsa_key</code> <code>-p 22 -oStrictHostKeyChecking=no root@$1 </code><code>"uname -a &gt;/dev/null 2&gt;&amp;1"</code>

<code>        </code><code>echo_r </code><code>"Check ssh to remote host $1 failed! "</code>

<code>        </code><code>echo_g </code><code>"Check ssh to remote host $1 successfully! "</code>

<code># ssh_execute_command_on_remote_host hostname command</code>

<code>function</code> <code>ssh_execute_command_on_remote_host(){</code>

<code>    </code><code>[ $</code><code># -ne 2 ] &amp;&amp; return 1</code>

<code>    </code><code>ssh</code> <code>-i </code><code>/etc/ssh/ssh_host_rsa_key</code> <code>-p 22 -oStrictHostKeyChecking=no root@$1 </code><code>"$2"</code> <code>&gt;&gt;${WORKDIR}</code><code>/ssh_command_</code><code>$(</code><code>date</code> <code>+%Y%m%d)_$$.log</code>

<code>        </code><code>echo_r </code><code>"ssh execute command on remote host $2 failed! More details refer to ${WORKDIR}/ssh_command_$(date +%Y%m%d)_$$.log"</code>

<code>        </code><code>return</code> <code>1</code>

<code>        </code><code>echo_g </code><code>"ssh execute command on remote host $2 successfully! "</code>

<code>function</code> <code>restart_docker_container(){</code>

<code>    </code><code>echo_b </code><code>"Restarting docker container..."</code>

<code>    </code><code># TODO(Guodong Ding) if we need restart more related docker container</code>

<code>    </code><code>local</code> <code>docker_container_name=</code><code>""</code>

<code>    </code><code>test</code> <code>-n $1 &amp;&amp; docker_container_name=</code><code>"$1"</code>

<code>    </code><code>ssh_execute_command_on_remote_host </code><code>"docker restart $docker_container_name"</code>

<code>        </code><code>echo_r </code><code>"restart docker container for  $docker_container_name failed! "</code>

<code>        </code><code>echo_g </code><code>"restart docker container for $docker_container_name successfully! "</code>

<code># scp_local_files_to_remote_host local_path remote_hostname remote_path</code>

<code>function</code> <code>scp_local_files_to_remote_host(){</code>

<code>    </code><code>[ $</code><code># -ne 3 ] &amp;&amp; return 1</code>

<code>    </code><code>[ ! -d $1 -a ! -f $1 ] &amp;&amp; </code><code>return</code> <code>1</code>

<code>    </code><code>check_ssh_can_be_connect $2</code>

<code>    </code><code>scp</code> <code>-i </code><code>/etc/ssh/ssh_host_rsa_key</code> <code>-P 22 -oStrictHostKeyChecking=no -rp $1 root@$2:$3 &gt;</code><code>/dev/null</code> <code>2&gt;&amp;1</code>

<code>        </code><code>echo_r </code><code>"scp local files to remote host failed! "</code>

<code>        </code><code>echo_g </code><code>"scp local files to remote host successfully! "</code>

<code># scp_remote_files_to_local_host remote_hostname remote_path local_path</code>

<code>function</code> <code>scp_remote_files_to_local_host(){</code>

<code>    </code><code>check_ssh_can_be_connect $1</code>

<code>    </code><code>scp</code> <code>-i </code><code>/etc/ssh/ssh_host_rsa_key</code> <code>-P 22 -oStrictHostKeyChecking=no -rp root@$1:$2 $3 &gt;</code><code>/dev/null</code> <code>2&gt;&amp;1</code>

<code>        </code><code>echo_r </code><code>"scp remote files to local host failed! "</code>

<code>        </code><code>echo_g </code><code>"scp remote files to local host successfully! "</code>

<code>function</code> <code>backup_remote_host_config_files(){</code>

<code>    </code><code>echo_b </code><code>"backup remote host config files..."</code>

<code>    </code><code>scp_remote_files_to_local_host ${deploy_target_host_ip} ${project_top_directory_to_target_host}/* ${WORKDIR}</code><code>/backup</code>

<code>    </code><code># get config files</code>

<code>    </code><code>[ </code><code>"$(ls -A ${WORKDIR}/backup)"</code> <code>] &amp;&amp; </code><code>find</code> <code>${WORKDIR}</code><code>/backup/</code><code>. -</code><code>type</code> <code>f ! -name . -a ! -name </code><code>'*.xml*'</code> <code>-a ! -name </code><code>'*.properties*'</code> <code>-</code><code>exec</code> <code>rm</code> <code>-f -- </code><code>'{}'</code> <code>\;</code>

<code>    </code><code># remove empty directory</code>

<code>    </code><code>find</code> <code>${WORKDIR}</code><code>/backup/</code><code>. -empty -</code><code>type</code> <code>d -delete</code>

<code>    </code><code># TODO(Guodong Ding) improvements here</code>

<code>    </code><code>echo_g </code><code>"backup remote host config files finished."</code>

<code>function</code> <code>rollback_remote_host_config_files(){</code>

<code>    </code><code>echo_b </code><code>"rollback remote host config files..."</code>

<code>    </code><code>#scp_local_files_to_remote_host ${WORKDIR}/backup ${deploy_target_host_ip} ${project_top_directory_to_target_host}</code>

<code>    </code><code>saved_IFS=$IFS</code>

<code>    </code><code>IFS=</code><code>' '</code>

<code>    </code><code>cd</code> <code>${WORKDIR}</code><code>/current</code>

<code>    </code><code>for</code> <code>file</code> <code>in</code> <code>${WORKDIR}</code><code>/backup/</code><code>*;</code><code>do</code>

<code>        </code><code>scp_local_files_to_remote_host ${</code><code>file</code><code>} ${deploy_target_host_ip} ${project_top_directory_to_target_host}</code>

<code>    </code><code>done</code>

<code>    </code><code>cd</code> <code>${WORKDIR}</code>

<code>    </code><code>IFS=${saved_IFS}</code>

<code>    </code><code># TODO(Guodong Ding) if save remote host config files</code>

<code>    </code><code># some ops</code>

<code>    </code><code>echo_g </code><code>"rollback remote host config files finished."</code>

<code>function</code> <code>deploy() {</code>

<code>    </code><code>[ -n </code><code>"$header"</code> <code>] &amp;&amp; </code><code>echo</code> <code>"$header"</code>

<code>    </code><code># check a directories lock, Note: this is redundant</code>

<code>    </code><code>if</code> <code>[[ ! -f ${WORKDIR}/.lock ]]; </code><code>then</code>

<code>        </code><code>setDirectoryStructureOnLocalHost</code>

<code>    </code><code>cleanOldReleases</code>

<code>    </code><code># do dependencies checking</code>

<code>    </code><code>check_network_connectivity</code>

<code>    </code><code>checkOtherDependencies</code>

<code>    </code><code>check_ssh_can_be_connect ${deploy_target_host_ip}</code>

<code>    </code><code># do core job</code>

<code>    </code><code># TODO(Guodong Ding) if we need a git_project_clone "$project_clone_depends_1" here using auto judgment statement</code>

<code>    </code><code>test</code> <code>-z ${project_clone_depends_1} || git_project_clone </code><code>"$project_clone_depends_1"</code>

<code>    </code><code>git_project_clone </code><code>"$project_clone"</code>

<code>    </code><code>test</code> <code>-z ${project_clone_depends_1} || maven_build_project </code><code>"$project_clone_depends_1"</code>

<code>    </code><code>maven_build_project </code><code>"$project_clone"</code>

<code>    </code><code># links_target_directory_to_current</code>

<code>    </code><code># Make directory to release directory</code>

<code>    </code><code>if</code> <code>test</code> <code>! -d ${WORKDIR}</code><code>/release</code> <code>-o ! -d ${WORKDIR}</code><code>/share</code><code>; </code><code>then</code>

<code>        </code><code>echo_r </code><code>"capistrano directory structure is broken, make sure the file .capistrano_ds_lock is deleted before a new deploy! "</code>

<code>#        test -f ${WORKDIR}/.capistrano_ds_lock &amp;&amp; \rm -rf  ${WORKDIR}/.capistrano_ds_lock</code>

<code>    </code><code>new_release_just_created=</code><code>"$WORKDIR/release/$(date +%Y%m%d%H%M%S)"</code>

<code>    </code><code>[ ! -d ${new_release_just_created} ] &amp;&amp; </code><code>mkdir</code> <code>${new_release_just_created}</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/repository/</code><code>${project_clone_repository_name}</code><code>/target/</code><code>${project_clone_repository_name}/ ] &amp;&amp; \</code>

<code>        </code><code>\</code><code>cp</code> <code>-rf ${WORKDIR}</code><code>/repository/</code><code>${project_clone_repository_name}</code><code>/target/</code><code>${project_clone_repository_name}/* ${new_release_just_created}</code>

<code>     </code><code># Make source code symbolic link to current</code>

<code>    </code><code>( [ -f ${WORKDIR}</code><code>/current</code> <code>] || [ -d ${WORKDIR}</code><code>/current</code> <code>] ) &amp;&amp; </code><code>rm</code> <code>-rf ${WORKDIR}</code><code>/current</code>

<code>    </code><code>ln</code> <code>-s ${new_release_just_created} ${WORKDIR}</code><code>/current</code>

<code>    </code><code># backup remote host config files</code>

<code>    </code><code>backup_remote_host_config_files</code>

<code>#    scp_local_files_to_remote_host ${WORKDIR}/current/ ${deploy_target_host_ip} ${project_top_directory_to_target_host}</code>

<code>    </code><code>for</code> <code>file</code> <code>in</code> <code>${WORKDIR}</code><code>/current/</code><code>*;</code><code>do</code>

<code>    </code><code># rollback remote host config files</code>

<code>    </code><code>rollback_remote_host_config_files</code>

<code>    </code><code># Move conf and logs directives from release to share</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/release/conf</code> <code>] &amp;&amp; </code><code>mv</code> <code>${WORKDIR}</code><code>/release/conf</code> <code>${WORKDIR}</code><code>/share/conf</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/release/logs</code> <code>] &amp;&amp; </code><code>mv</code> <code>${WORKDIR}</code><code>/release/logs</code> <code>${WORKDIR}</code><code>/share/logs</code>

<code>    </code><code># Make conf and logs symbolic link to current</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/share/conf</code> <code>] &amp;&amp; </code><code>ln</code> <code>-s ${WORKDIR}</code><code>/share/conf</code> <code>${WORKDIR}</code><code>/current/conf</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/share/logs</code> <code>] &amp;&amp; </code><code>ln</code> <code>-s ${WORKDIR}</code><code>/share/logs</code> <code>${WORKDIR}</code><code>/current/logs</code>

<code>    </code><code># Start service or validate status</code>

<code>    </code><code>if</code> <code>[[ -e ${WORKDIR}</code><code>/current/bin/startup</code><code>.sh ]]; </code><code>then</code>

<code>        </code><code>${WORKDIR}</code><code>/current/bin/startup</code><code>.sh start</code>

<code>        </code><code>RETVAL=$?</code>

<code>        </code><code># TODO(Guodong Ding) external health check</code>

<code>        </code><code>test</code> <code>-z ${docker_container_name} || restart_docker_container ${docker_container_name}</code>

<code>    </code><code># if started ok, then create a workable program to a file</code>

<code>    </code><code>if</code> <code>[[ ${RETVAL} -</code><code>eq</code> <code>0 ]]; </code><code>then</code>

<code>    </code><code># Note cat with eof must start at row 0, and with eof end only, such as no blank spaces, etc</code>

<code>    </code><code>cat</code> <code>&gt;${WORKDIR}</code><code>/share/workable_program</code><code>.log &lt;&lt;eof</code>

<code>${new_release_just_created}</code>

<code>    </code><code>echo_g </code><code>"Deploy successfully! "</code>

<code>    </code><code>echo_g </code><code>"current workable version is $(cat ${WORKDIR}/share/workable_program.log)"</code>

<code>#    ls --color=auto -l ${WORKDIR}/current</code>

<code>#    ls --color=auto -l ${WORKDIR}/current/</code>

<code>        </code><code>echo_r </code><code>"Error: Deploy failed! "</code>

<code>        </code><code>${WORKDIR}/`</code><code>basename</code> <code>$0` rollback</code>

<code># Rollback to last right configuration</code>

<code>function</code> <code>rollback() {</code>

<code>    </code><code>echo_b </code><code>"Rollback to last right configuration... "</code>

<code>    </code><code># The key is find last files which can work</code>

<code>    </code><code>WORKABLE_PROGRAM=`</code><code>cat</code> <code>${WORKDIR}</code><code>/share/workable_program</code><code>.log`</code>

<code>    </code><code>if</code> <code>[[ -z ${WORKABLE_PROGRAM} ]]; </code><code>then</code>

<code>        </code><code>echo_r </code><code>"Error: Can NOT find workable release version! Please check if it is first deployment! "</code>

<code>    </code><code># Stop service if we have</code>

<code>        </code><code>${WORKDIR}</code><code>/current/bin/startup</code><code>.sh stop</code>

<code>    </code><code># Remove failed deploy</code>

<code>    </code><code>rm</code> <code>-rf ${WORKDIR}</code><code>/current</code>

<code>    </code><code># Remake source code symbolic link to current</code>

<code>    </code><code>ln</code> <code>-s ${WORKABLE_PROGRAM} ${WORKDIR}</code><code>/current</code>

<code>    </code><code># Remake conf and logs symbolic link to current</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/share/conf</code> <code>] &amp;&amp; </code><code>ln</code> <code>-s ${WORKDIR}</code><code>/share/conf</code> <code>${WORKDIR}</code><code>/current</code>

<code>    </code><code>[ -d ${WORKDIR}</code><code>/share/logs</code> <code>] &amp;&amp; </code><code>ln</code> <code>-s ${WORKDIR}</code><code>/share/logs</code> <code>${WORKDIR}</code><code>/current</code>

<code>        </code><code>echo_g </code><code>"Rollback successfully! "</code>

<code>        </code><code>echo_g </code><code>"current workable version is $WORKABLE_PROGRAM"</code>

<code>#        ls --color=auto -l ${WORKDIR}/current</code>

<code>function</code> <code>destroy() {</code>

<code>    </code><code># echo a Warning message</code>

<code>    </code><code>echo_y </code><code>"Warning: This action will destroy all this project, and this is unrecoverable! "</code>

<code>    </code><code>answer=</code><code>"n"</code>

<code>    </code><code>echo_y </code><code>"Do you want to destroy this project? "</code>

<code>    </code><code>read</code> <code>-p </code><code>"(Default no,if you want please input: y ,if not please press the enter button):"</code> <code>answer</code>

<code>    </code><code>case</code> <code>"$answer"</code> <code>in</code>

<code>        </code><code>y|Y|Yes|YES|</code><code>yes</code><code>|yES|yEs|YeS|yeS )</code>

<code>        </code><code># delete all file expect for this script self</code>

<code>        </code><code># find: warning: Unix filenames usually don't contain slashes (though pathnames do).  That means that '-name `./deploy.sh'' will probably evaluate to false all the time on this system.  You might find the '-wholename' test more useful, or perhaps '-samefile'.  Alternatively, if you are using GNU grep, you could use 'find ... -print0 | grep -FzZ `./deploy.sh''.</code>

<code>            </code><code># echo $WORKDIR/</code>

<code>            </code><code>#find -L $WORKDIR -type f ! -name "$(basename $0)" -exec ls --color=auto -al {} \;</code>

<code>            </code><code># find -L . -type f ! -name "deploy.sh" -exec ls --color=auto -al {} \;</code>

<code>            </code><code># find -L . -type d -exec ls --color=auto -al {} \;</code>

<code>            </code><code># find -L ./ -maxdepth 1 ! -name "deploy.sh" ! -wholename "./"</code>

<code>        </code><code># ls | grep -v "filename" | xargs rm -rf</code>

<code>        </code><code>find</code> <code>-L ${WORKDIR} -maxdepth 1 ! -name </code><code>"$(basename $0)"</code> <code>! -wholename </code><code>"$WORKDIR"</code>  <code>-</code><code>exec</code> <code>rm</code> <code>-rf </code><code>'{}'</code> <code>\;</code>

<code>        </code><code>if</code> <code>[ $? -</code><code>eq</code> <code>0 ];</code><code>then</code>

<code>            </code><code>test</code> <code>-f ${WORKDIR}/.capistrano_ds_lock &amp;&amp; \</code><code>rm</code> <code>-rf  ${WORKDIR}/.capistrano_ds_lock</code>

<code>            </code><code>echo_g </code><code>"Destroy this project successfully! Now will exit with status 0. "</code>

<code>            </code><code>exit</code> <code>0</code>

<code>            </code><code>echo_r </code><code>"Error: something go wrong! Please check or alter to Admin user! "</code>

<code>        </code><code>;;</code>

<code>        </code><code>n|N|No|NO|no|nO)</code>

<code>        </code><code>echo_g </code><code>"destroy action is cancel"</code>

<code>        </code><code>exit</code> <code>0</code>

<code>        </code><code>*)</code>

<code>        </code><code>echo_r </code><code>"Are you kidding me? You are a bad kid! "</code>

<code>    </code><code>esac</code>

<code>function</code> <code>main(){</code>

<code>    </code><code>lock_filename=</code><code>"lock_$$_$RANDOM"</code>

<code>#    lock_filename_full_path="/var/lock/subsys/$lock_filename"</code>

<code>    </code><code>lock_filename_full_path=</code><code>"/var/lock/$lock_filename"</code>

<code>    </code><code>if</code> <code>( </code><code>set</code> <code>-o noclobber; </code><code>echo</code> <code>"$$"</code> <code>&gt; </code><code>"$lock_filename_full_path"</code><code>) 2&gt; </code><code>/dev/null</code><code>;</code><code>then</code>

<code>        </code><code>trap</code> <code>'rm -f "$lock_filename_full_path"; exit $?'</code> <code>INT TERM EXIT</code>

<code>        </code><code># Just a test for call itself, comment it</code>

<code>         </code><code>if</code> <code>[[ $</code><code># -ne 1 ]]; then</code>

<code>#            $0 deploy</code>

<code>            </code><code>[ ! -x ${WORKDIR}/`</code><code>basename</code> <code>$0` ] &amp;&amp; </code><code>chmod</code> <code>+x ${WORKDIR}/`</code><code>basename</code> <code>$0`</code>

<code>            </code><code>${WORKDIR}/`</code><code>basename</code> <code>$0` deploy</code>

<code>         </code><code>fi</code>

<code>        </code><code>case</code> <code>$1 </code><code>in</code>

<code>            </code><code>deploy)</code>

<code>                </code><code>deploy</code>

<code>                </code><code>;;</code>

<code>            </code><code>rollback)</code>

<code>                </code><code>rollback</code>

<code>            </code><code>destroy)</code>

<code>                </code><code>destroy</code>

<code>            </code><code>help|*)</code>

<code>                </code><code>echo</code> <code>"Usage: $0 {deploy|rollback|destroy} with $0 itself"</code>

<code>                </code><code>exit</code> <code>1</code>

<code>        </code><code>esac</code>

<code>        </code><code>rm</code> <code>-f </code><code>"$lock_filename_full_path"</code>

<code>        </code><code>trap</code> <code>- INT TERM EXIT</code>

<code>        </code><code>echo</code> <code>"Failed to acquire lock: $lock_filename_full_path"</code>

<code>        </code><code>echo</code> <code>"held by $(cat ${lock_filename_full_path})"</code>

<code>main $@</code>

<code>#${_XTRACE_FUNCTIONS}</code>

運作效果:

可以嘗試使用Chrome浏覽器打開該頁面,右鍵單擊,選擇“在新标簽頁中打開圖檔”檢視清晰大圖。

推薦Windows使用者使用PyCharm(5.0.x)結合Bash Support插件編輯bash shell script檔案。

注:由于該腳本的大幅度更新,是以最新的運作效果圖可以自行運作觀察。

<a href="http://s3.51cto.com/wyfs02/M01/7F/E0/wKiom1cwYmfh-qg1AABt77YM4VE830.jpg" target="_blank"></a>

<a href="http://s3.51cto.com/wyfs02/M01/7F/DD/wKioL1cwY0WgbezdAADGfbJSWBU051.jpg" target="_blank"></a>

--end--

本文轉自 urey_pp 51CTO部落格,原文連結:http://blog.51cto.com/dgd2010/1771555,如需轉載請自行聯系原作者