為什么要測試，測什么東西？

測試的種類非常多，測試的目的也非常多，我這里主要的目的就兩個

1. 測試MySQL的極限IO

2. 對比不同版本MySQL，不同參數, 不同硬件，不同系統對MySQL的性能影響

為什么選擇sysbench

1. 因為MySQL官方的測試就是用sysbench哦
2. 盡量選擇最新版本的sysbench哦，大于0.4版本的sysbench有實時顯示功能

如何下載sysbench

http://github.com/akopytov/sysbench

文檔在哪里

http://github.com/akopytov/sysbench

如何安裝

* 基本步驟 cd sysbench-1.0;
./autogen.sh;
./configure --with-mysql-includes=/usr/local/mysql/include --with-mysql-libs=/usr/local/mysql/lib/;
make;
make install; 

* 過程中可能會遇到的故障 

sysbench: error while loading shared libraries: libmysqlclient.so.20: cannot open shared object file: No such file or directory 

* 解決方案 export LD_LIBRARY_PATH=/usr/local/mysql/lib/; 

* 測試是否安裝成功 shell> sysbench --version sysbench 1.0 

介紹sysbench的核心用法

1. 它可以用來測試很多東西，測試io，cpu，mem，mysql，oracle，pg等等。
2. 這里主要介紹我關心的兩個，IO & MySQL
3. 以下前半部分是0.4版本的用法，0.4以上的版本用法不一樣，會注明。

一、通用語法

sysbench [common-options] --test=name [test-options] command 

• command

* prepare 準備階段，也就是裝載數據。
 filo test 中： 就是創建指定大小的文件
 oltp test 中： 就是創建指定大小的表 

* run 實際測試階段 

* cleanup 收尾階段，清除之前測試的數據。 

• common-options

只介紹常用的選項

• --test=fileio 模塊的選項

提前注明：--file-test-mode

* seqwr
sequential write 

* seqrewr
sequential rewrite

* seqrd

sequential read 

* rndrd random read 

* rndwr random write 

* rndrw
combined random read/write 

• test option for fileio

舉例：

$ sysbench --num-threads=16 --test=fileio --file-total-size=3G --file-test-mode=rndrw prepare
$ sysbench --num-threads=16 --test=fileio --file-total-size=3G --file-test-mode=rndrw run 

$ sysbench --num-threads=16 --test=fileio --file-total-size=3G --file-test-mode=rndrw cleanup 

OLTP-MySQL

此模式用于測試真實數據庫性能。在prepare階段創建表，sbtest默認

CREATE TABLE `sbtest` ( `id` int(10) unsigned NOT NULL auto_increment, `k` int(10) unsigned NOT NULL default '0', `c` char(120) NOT NULL default '', `pad` char(60) NOT NULL default '',
PRIMARY KEY (`id`), KEY `k` (`k`)); 

在run階段

• simple模式

SELECT c FROM sbtest WHERE id=N 

• Point queries

SELECT c FROM sbtest WHERE id=N 

• Range queries:

SELECT c FROM sbtest WHERE id BETWEEN N AND M 

• Range SUM() queries

SELECT SUM(K) FROM sbtest WHERE id BETWEEN N and M 

• Range ORDER BY queries

SELECT c FROM sbtest WHERE id between N and M ORDER BY c 

• Range DISTINCT queries

SELECT DISTINCT c FROM sbtest WHERE id BETWEEN N and M ORDER BY c 

• UPDATEs on index column

UPDATE sbtest SET k=k+1 WHERE id=N 

• UPDATEs on non-index column:

UPDATE sbtest SET c=N WHERE id=M 

• DELETE queries

DELETE FROM sbtest WHERE id=N 

• INSERT queries

INSERT INTO sbtest VALUES (...) 

• oltp test 模式通用參數

• mysql test 參數

 --mysql-host=[LIST,...]      MySQL server host [localhost]  

--mysql-port=[LIST,...]      MySQL server port [3306]  

--mysql-socket=[LIST,...]    MySQL socket  

--mysql-user=STRING          MySQL user [sbtest]  

--mysql-password=STRING      MySQL password []  

--mysql-db=STRING            MySQL database name [sbtest]  

--mysql-table-engine=STRING  storage engine to use for the test table {myisam,innodb,bdb,heap,ndbcluster,federated} [innodb]  

--mysql-engine-trx=STRING    whether storage engine used is transactional or not {yes,no,auto} [auto]  

--mysql-ssl=[on|off]         use SSL connections, if available in the client library [off]  

--mysql-ssl-cipher=STRING    use specific cipher for SSL connections []  

--mysql-compression=[on|off] use compression, if available in the client library [off]  

--myisam-max-rows=N          max-rows parameter for MyISAM tables [1000000]  

--mysql-debug=[on|off]       dump all client library calls [off]  

--mysql-ignore-errors=[LIST,...]list of errors to ignore, or "all" [1213,1020,1205]  

--mysql-dry-run=[on|off]     Dry run, pretent that all MySQL client API calls are successful without executing them [off] 

以上0.4版本的語法介紹完畢。

接下來是大于0.4版本的新語法，尤其是--test=oltp模塊

用--test=xx.lua (完整路徑來傳遞)來代替
[szq@upright91 local]$ locate select.lua 
/home/szq/sysbench-1.0.3/src/lua/oltp_point_select.lua
/home/szq/sysbench-1.0.3/tests/include/oltp_legacy/select.lua
/usr/local/share/sysbench/oltp_point_select.lua
/usr/local/share/sysbench/tests/include/oltp_legacy/select.lua
[szq@upright91 local]$ ll /home/szq/sysbench-1.0.3/tests/include/oltp_legacy
總用量 52
-rw-r--r-- 1 szq szq 1195 2月  26 05:12 bulk_insert.lua
-rw-r--r-- 1 szq szq 4696 2月  26 05:12 common.lua
-rw-r--r-- 1 szq szq  366 2月  26 05:12 delete.lua
-rw-r--r-- 1 szq szq 1171 2月  26 05:12 insert.lua
-rw-r--r-- 1 szq szq 3004 2月  26 05:12 oltp.lua
-rw-r--r-- 1 szq szq  368 2月  26 05:12 oltp_simple.lua
-rw-r--r-- 1 szq szq  527 2月  26 05:12 parallel_prepare.lua
-rw-r--r-- 1 szq szq  369 2月  26 05:12 select.lua
-rw-r--r-- 1 szq szq 1448 2月  26 05:12 select_random_points.lua
-rw-r--r-- 1 szq szq 1556 2月  26 05:12 select_random_ranges.lua
-rw-r--r-- 1 szq szq  369 2月  26 05:12 update_index.lua
-rw-r--r-- 1 szq szq  578 2月  26 05:12 update_non_index.lua

FileIO實戰

磁盤：S3610 * 6 raid10, 內存128G
測試出相關場景下的極限IOPS

• 隨機讀寫（3:2 oltp場景）

* sysbench --num-threads=16 --report-interval=3 --max-requests=0 --max-time=300 --test=fileio --file-num=200 --file-total-size=200G \

--file-test-mode=rndrw --file-block-size=16384 --file-extra-flags=direct run 

cdn.com/663010e67787f986aa351eef3168a3c2767eda7f.jpeg">

• 隨機讀寫（5：1 oltp場景）

* sysbench --num-threads=16 --report-interval=3 --max-requests=0 --max-time=300 --test=fileio --file-num=200 --file-total-size=200G \

--file-test-mode=rndrw --file-block-size=16384 --file-extra-flags=direct --file-rw-ratio=5 run 

• 隨機寫

* sysbench --num-threads=16 --report-interval=3 --max-requests=0 --max-time=300 --test=fileio --file-num=200 --file-total-size=200G \

--file-test-mode=rndwr --file-block-size=16384 --file-extra-flags=direct run 

• 隨機讀

* sysbench --num-threads=16 --report-interval=3 --max-requests=0 --max-time=300 --test=fileio --file-num=200 --file-total-size=200G \

--file-test-mode=rndrd --file-block-size=16384 --file-extra-flags=direct run 

MySQL5.6 vs MySQL5.7 測試

磁盤：S3610 * 6 raid10, 內存128G

• Point select

* 產生數據 sysbench --num-threads=128 --report-interval=3 --max-requests=0 --max-time=300 --test=/root/sysbench-1.0/sysbench/tests/db/select.lua \

--mysql-table-engine=innodb --oltp-table-size=50000000 --mysql-user=sysbench --mysql-password=sysbench --oltp-tables-count=2 --mysql-host=xx --mysql-port=3306 prepare 

* 執行 sysbench --num-threads=128 --report-interval=3 --max-requests=0 --max-time=300 --test=/root/sysbench-1.0/sysbench/tests/db/select.lua \

--mysql-table-engine=innodb --oltp-table-size=50000000 --mysql-user=sysbench --mysql-password=sysbench --oltp-tables-count=2 --mysql-host=xx --mysql-port=3306 run 

• Point oltp

* 產生數據 sysbench --num-threads=128 --report-interval=3 --max-requests=0 --max-time=300 --test=/root/sysbench-1.0/sysbench/tests/db/oltp.lua \

--mysql-table-engine=innodb --oltp-table-size=50000000 --mysql-user=sysbench --mysql-password=sysbench --oltp-tables-count=2 --mysql-host=xx --mysql-port=3306 prepare 

* 執行 sysbench --num-threads=128 --report-interval=3 --max-requests=0 --max-time=300 --test=/root/sysbench-1.0/sysbench/tests/db/oltp.lua \

--mysql-table-engine=innodb --oltp-table-size=50000000 --mysql-user=sysbench --mysql-password=sysbench --oltp-tables-count=2 --mysql-host=xx --mysql-port=3306 run 

結論

1. 在性能方面，雖然官方號稱5.7性能比5.6快3倍，但是在實際測試中5.7比5.6卻稍微差一點點
2. 是否會選擇5.7生產環境？當然，因為5.7的新特性太誘人了

參考：

https://www.percona.com/blog/2016/04/07/mysql-5-7-sysbench-oltp-read-results-really-faster/
http://dimitrik.free.fr/blog/archives/2013/09/mysql-performance-reaching-500k-qps-with-mysql-57.html
https://github.com/akopytov/sysbench
http://www.mysql.com/why-mysql/benchmarks/