天天看點

MySQL自帶的性能壓力測試工具mysqlslap詳解

轉載:https://www.cnblogs.com/liujiacai/p/7753324.html

mysqlslap 是 Mysql 自帶的壓力測試工具,可以模拟出大量用戶端同時操作資料庫的情況,通過結果資訊來了解資料庫的性能狀況

mysqlslap 的一個主要工作場景就是對資料庫伺服器做基準測試

例如我們拿到了一台伺服器,準備做為資料庫伺服器,那麼這台伺服器的硬體資源能夠支援多大的通路壓力呢?優化了作業系統的核心參數後,是否提升了性能?調整了Mysql配置參數後,對性能有多少影響?……

通過一系列的調優工作,配合基準測試,就可以把這台伺服器調整到最佳狀态,也掌握了健康狀态下的性能名額

以後在實際運作過程中,當監控的資料接近了基準名額時,說明資料庫伺服器快要滿負荷了,需要分析是資料庫結構設計、SQL語句這類用法問題,還是硬體資源的确不夠了,然後進行相應的處理

資料庫伺服器也可能需要硬體更新,更新之後也需要進行基準測試,和之前的測試結果對比,確定更新後的性能是提升的,防止不恰當的更新或者錯誤的配置引起性能下降

了解了 mysqlslap 的用處,下面看一下如何使用 mysqlslap

mysqlslap 示例

01簡單用法

對資料庫做一個簡單的自動測試

mysqlslap –user=root –password=111111 –auto-generate-sql

MySQL自帶的性能壓力測試工具mysqlslap詳解

–auto-generate-sql 作用是自動生成測試SQL

結果中各項含義:

Average number of …

運作所有語句的平均秒數

Minimum number of …

運作所有語句的最小秒數

Maximum number of …

運作所有語句的最大秒數

Number of clients …

用戶端數量

Average number of queries per client

每個用戶端運作查詢的平均數

02添加并發

mysqlslap –user=root –password=111111 –concurrency=100 –number-of-queries=1000 –auto-generate-sql

–concurrency=100 指定同時有100個用戶端連接配接

–number-of-queries=1000 指定總的測試查詢次數(并發用戶端數 * 每個用戶端的查詢次數)

03自動生成複雜表

自動測試時,建立的表結構非常簡單,隻有兩列,實際的産品環境肯定會更複雜,可以使用參數指定列的數量和類型,例如

mysqlslap –user=root –password=111111 –concurrency=50 –number-int-cols=5 –number-char-cols=20 –auto-generate-sql

–number-int-cols=5 指定生成5個 int 類型的列

–number-char-cols=20 指定生成20個 char 類型的列

04使用自己的測試庫和測試語句

自動測試可以幫助我們了解硬體層面的狀況,對于我們産品特定的情況,還是使用自己的庫來測試比較好,可以複制一份産品庫過來,然後對此庫測試,例如

mysqlslap –user=root –password=111111 –concurrency=50 –create-schema=employees –query=”SELECT * FROM dept_emp;”

–create-schema 用來指定測試庫名稱

–query 是自定義的測試語句

實際使用時,一般是測試多個複雜的語句,可以定義一個腳本檔案,例如

echo “SELECT * FROM employees;SELECT * FROM titles;SELECT * FROM dept_emp;SELECT * FROM dept_manager;SELECT * FROM departments;” > ~/select_query.sql

把多個查詢語句寫入了一個 sql 檔案,然後使用此檔案執行測試

mysqlslap –user=root –password=111111 –concurrency=20 –number-of-queries=1000 –create-schema=employees –query=”select_query.sql” –delimiter=”;”

–query 中指定了sql檔案

–delimiter 說明sql檔案中語句間的分隔符是什麼

PS:今天一同僚問我有木有比較靠譜的mysql壓力測試工具可用。其實mysql自帶就有一個叫mysqlslap的壓力測試工具,還是模拟的不錯的。下面舉例說說。mysqlslap是從5.1.4版開始的一個MySQL官方提供的壓力測試工具。通過模拟多個并發用戶端通路MySQL來執行壓力測試,同時詳細的提供了“高負荷攻擊MySQL”的資料性能報告。并且能很好的對比多個存儲引擎在相同環境下的并發壓力性能差别。通過mysqlslap –help可以獲得可用的選項,這裡列一些主要的參數,更詳細的說明參考官方手冊。如果是系統自帶或者使用rpm包安裝的mysql,安裝了MySQL-client端的包就有mysqlslap這個工具。

下圖是運作mysqlslap -a -c 500 -i 10 -uroot -p123456測試時mysql的連接配接程序數:

MySQL自帶的性能壓力測試工具mysqlslap詳解

使用文法如下:

# mysqlslap [options]

常用參數 [options] 詳細說明:

--auto-generate-sql, -a 自動生成測試表和資料,表示用mysqlslap工具自己生成的SQL腳本來測試并發壓力。 --auto-generate-sql-load-type=type 測試語句的類型。代表要測試的環境是讀操作還是寫操作還是兩者混合的。取值包括:read,key,write,update和mixed(預設)。 --auto-generate-sql-add-auto-increment 代表對生成的表自動添加auto_increment列,從5.1.18版本開始支援。 --number-char-cols=N, -x N 自動生成的測試表中包含多少個字元類型的列,預設1 --number-int-cols=N, -y N 自動生成的測試表中包含多少個數字類型的列,預設1 --number-of-queries=N 總的測試查詢次數(并發客戶數×每客戶查詢次數) --query=name,-q 使用自定義腳本執行測試,例如可以調用自定義的一個存儲過程或者sql語句來執行測試。 --create-schema 代表自定義的測試庫名稱,測試的schema,MySQL中schema也就是database。 --commint=N 多少條DML後送出一次。 --compress, -C 如果伺服器和用戶端支援都壓縮,則壓縮資訊傳遞。 --concurrency=N, -c N 表示并發量,也就是模拟多少個用戶端同時執行select。可指定多個值,以逗号或者--delimiter參數指定的值做為分隔符。例如:--concurrency=100,200,500。 --engine=engine_name, -e engine_name 代表要測試的引擎,可以有多個,用分隔符隔開。例如:--engines=myisam,innodb。 --iterations=N, -i N 測試執行的疊代次數,代表要在不同并發環境下,各自運作測試多少次。 --only-print 隻列印測試語句而不實際執行。 --detach=N 執行N條語句後斷開重連。 --debug-info, -T 列印記憶體和CPU的相關資訊。

說明:

測試的過程需要生成測試表,插入測試資料,這個mysqlslap可以自動生成,預設生成一個mysqlslap的schema,如果已經存在則先删除。可以用

--only-print

來列印實際的測試過程,整個測試完成後不會在資料庫中留下痕迹。

各種測試參數執行個體(-p後面跟的是mysql的root密碼):

單線程測試。測試做了什麼。

# mysqlslap -a -uroot -p123456

多線程測試。使用–concurrency來模拟并發連接配接。

# mysqlslap -a -c 100 -uroot -p123456

疊代測試。用于需要多次執行測試得到平均值。

# mysqlslap -a -i 10 -uroot -p123456

# mysqlslap ---auto-generate-sql-add-autoincrement -a -uroot -p123456 # mysqlslap -a --auto-generate-sql-load-type=read -uroot -p123456 # mysqlslap -a --auto-generate-secondary-indexes=3 -uroot -p123456 # mysqlslap -a --auto-generate-sql-write-number=1000 -uroot -p123456 # mysqlslap --create-schema world -q "select count(*) from City" -uroot -p123456 # mysqlslap -a -e innodb -uroot -p123456 # mysqlslap -a --number-of-queries=10 -uroot -p123456

測試同時不同的存儲引擎的性能進行對比:

# mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --iterations=5 --engine=myisam,innodb --debug-info -uroot -p123456

執行一次測試,分别50和100個并發,執行1000次總查詢:

# mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --debug-info -uroot -p123456

50和100個并發分别得到一次測試結果(Benchmark),并發數越多,執行完所有查詢的時間越長。為了準确起見,可以多疊代測試幾次:

# mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --iterations=5 --debug-info -uroot -p123456

參考

  • Percona sysbench oltp.lua
  • sysbench manual 0.4
  • sysbench介紹與使用
  • sysbench測試mysql性能
  • sysbench 0.5使用手冊