天天看點

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

Yearning簡介

Yearning MYSQL 是一個SQL語句稽核平台。提供查詢審計,SQL稽核等多種功能,支援Mysql,可以在一定程度上解決運維與開發之間的那一環,功能豐富,代碼開源,安裝部署容易!

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!
項目位址:https://gitee.com/cookieYe/Yearning

注意:

Yearning 1.x版本需inception提供SQL稽核及復原功能。

Yearning 2.0開始無需依賴Inception,已自己實作了SQL稽核/復原功能

Yearning 功能介紹

  • SQL查詢
    • 查詢工單
    • 導出
    • 自動補全,智能提示
    • 查詢語句審計
  • SQL稽核
    • 流程化工單
    • SQL語句檢測與執行
    • SQL復原
    • 曆史稽核記錄
  • 推送
    • E-mail工單推送
    • 釘釘webhook機器人工單推送
  • 使用者權限及管理
    • 角色劃分
    • 基于使用者的細粒度權限
    • 注冊
  • 其他
    • todoList
    • LDAP登入
    • 動态稽核規則配置
  • AutoTask自動執行

Yearning安裝

Yearning 不依賴于任何第三方SQL稽核工具作為稽核引擎,内部已自己實作稽核/復原相關邏輯。

  • 僅依賴Mysql資料庫。mysql版本必須5.7及以上版本,建立Yearning庫字元集應為UTF8mb4 (僅Yearning所需mysql版本)
  • Yearning日志僅輸出error級别,沒有日志即可認為無運作錯誤!
  • Yearning 基于1080p分辨率開發僅支援1080p及以上顯示器通路

Yearning下載下傳

Yearning-go官方提供二進制下載下傳包,下載下傳位址 。選擇你所需要下載下傳的軟體包進行下載下傳。

源碼安裝:你先需要安裝一些依賴等,一些相關的安裝步驟如下:

[root@test ~]# git clone https://github.com/cookieY/Yearning.git
[root@test ~]# mv Yearning /usr/local/yearning
[root@test ~]# cd /usr/local/yearning/
[root@test yearning]# cd install/
[root@test install]# ll
total 26728
-rw-r--r-- 1 root root 57763 Apr 23 16:06 connections.py
-rw-r--r-- 1 root root 16818 Apr 23 16:06 cursors.py
-rw-r--r-- 1 root root 679 Apr 23 16:06 docker_start.sh
-rw-r--r-- 1 root root 27270656 Apr 23 16:06 inception.tar
-rw-r--r-- 1 root root 11762 Apr 23 16:06 Yearning.sh
[root@test install]# tar xf inception.tar
[root@test install]# cd inception/bin/
[root@test bin]# ll
total 12472
-rw-r--r-- 1 501 games 722 Jan 3 10:39 inc.cnf
-rwxr-xr-x 1 501 games 9016999 Oct 12 2017 Inception
-rwxr-xr-x 1 501 games 3747312 Oct 12 2017 mysql           

不過現在官方讓直接下載下傳.zip包,直接解壓即可(是以這裡就不建議使用源碼安裝了),比較友善。

mysql> create database Yearning default character set utf8mb4 collate utf8mb4_unicode_ci;
Query OK, 1 row affected (0.00 sec)
mysql> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| Yearning |
| mysql |
| performance_schema |
| sys |
+--------------------+
5 rows in set (0.00 sec)           

隻需要提前安裝好Mysql資料庫,并按前面的要求進行配置即可。

[root@CentOS7-1 ~]# ll
total 14036
-rw-------. 1 root root 1320 Apr 8 05:08 anaconda-ks.cfg
-rw-r--r-- 1 root root 14349178 Apr 11 09:26 Yearning-2.2.0.linux-amd64.zip           

上面我們直接從github上下載下傳的最新版本2.2.0:

[root@CentOS7-1 ~]# cd Yearning-go/
[root@CentOS7-1 Yearning-go]# ll
total 9772
-rw-r--r-- 1 root root 127 Aug 1 2019 conf.toml
drwxr-xr-x 6 root root 116 Apr 6 22:32 dist
-rw-r--r-- 1 root root 620 Jan 8 21:06 docker-compose.yml
-rw-r--r-- 1 root root 597 Aug 21 2019 Dockerfile
-rw-r--r-- 1 root root 177 Aug 23 2019 # README
-rwxr--r-- 1 root root 9985356 Apr 6 22:35 Yearning
-rw-r--r-- 1 root root 283 Jan 15 03:55 yearning.service           

修改配置檔案

vim conf.toml
[Mysql]
Db = "Yearning"
Host = "127.0.0.1"
Port = "3306"
Password = "xxxx"
User = "root"

[General] #資料庫加解密key,隻可更改一次。
SecretKey = "dbcjqheupqjsuwsm"           

SecretKey是token/資料庫密碼加密/解密的salt。建議所有使用者在初次安裝Yearning之前将SecretKey更改(不更改将存在安全風險),格式: 大小寫字母均可, 長度必須為16位。

特别注意:此key僅可在初次安裝時更改!之後不可再次更改!如再次更改會導緻之前已存放的資料源密碼無法解密,最終導緻無法擷取相關資料源資訊。

初始化

./Yearning -m           
自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

務必在-s啟動前首先執行-m 初始化操作!如要再次初始化,需要把yearning庫下所有表删除,否則重複執行無效。

啟動服務

#預設啟動
./Yearning -s

#參數啟動
./Yearning -s -b "192.168.1.9" -p "8000"           
自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

使用幫助

[root@CentOS7-1 Yearning-go]# ./Yearning -h
version: Yearning/2.2.0 general author: HenryYee
Usage: Yearning [-m migrate] [-p port] [-s start] [-b web-bind] [-h help] [-c config file]

Options:
-s #啟動Yearning
-m #資料初始化(第一次安裝時執行)
-p #端口
-b #釘釘/郵件推送時顯示的平台位址
-x #表結構修複,更新時可以操作。如出現錯誤可直接忽略。
-h #幫助
-c #配置檔案路徑
-k #使用者權限變更為權限組(2.1.7以下更新至2.1.7及以上使用)
-f  #初始化Admin使用者密碼           

打開浏覽器

預設密碼:admin/Yearning_admin

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

相關功能子產品介紹

1、使用者子產品

Dashboard:dashboard主要展示Yearning各項資料包括使用者數/資料源數/工單數/查詢數以及其他圖表,個人資訊欄内使用者可以修改密碼/郵箱/真實姓名,同時可以檢視該使用者權限以及申請權限(申請權限2.1.7版本後廢棄)。

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

我的工單:展示使用者送出的工單資訊,對于執行失敗/駁回的工單點選詳細資訊後可以重新修改sql并送出,對于執行成功的工單可以檢視復原語句并且快速送出SQL。

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

工單DLL:DDL相關SQL送出稽核,檢視表結構/索引,SQL文法高亮/自動補全。

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

DML稽核:DML相關SQL送出稽核,SQL文法高亮/自動補全。

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

查詢:查詢/導出資料 SQL文法高亮/自動補全 快速DML語句送出。

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

2、稽核子產品

工單稽核:DDL/DML管理者稽核并執行。

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

查詢稽核:使用者的查詢稽核。

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

權限稽核:使用者的權限稽核(2.1.7版本以下)

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

3、管理管理子產品

使用者管理:建立/修改/删除使用者

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

資料庫管理:添加/編輯/删除 資料源

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

使用者權限:使用者權限修改/清空

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

功能設定:設定消息推送相關資訊 包括釘釘機器人/email,設定LDAP相關資訊,全局配置資訊,全局配置開關

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!
自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

稽核規則:設定SQL檢測規則

自動補全、復原!介紹一款開源、可視化 sql 診斷利器!

AutoTask自動執行任務

2.1.4版本新增:使用者可通過改功能設定自動執行任務。當送出的dml語句符合相應任務條件。将會自動執行,無需稽核人稽核。該功能僅限dml語句使用。請慎重使用!

總結

Yearning是一個SQL稽核平台,在一定程度上可以解決運維與開發中間的問題,遺憾的是隻支援Mysql,感興趣的可以嘗試下!

今天的分享就到這裡了,如有幫助,歡迎一鍵三連(點贊、評論、轉發)支援一下!

讀者專屬群:誠邀你加入技術交流群,一起卷!

如有錯誤或其它問題,捐迎小夥伴留言評論、指正。如有幫助,歡迎點贊+轉發分享。更多相關開源技術文章,請持續關注!資源分享(小編為你精心準備了2048G的各類學習資料。包括系統運維、資料庫、redis、MogoDB、電子書、Java基礎課程、Java實戰項目、架構師綜合教程、架構師實戰項目、大資料、Docker容器、ELK Stack、機器學習、BAT面試精講視訊等。)