乐趣区

关于mysql:MySQL-57和80性能测试比拼结局有点意外

背景

测试 mysql5.7 和 mysql8.0 别离在读写、只读、只写模式下不同并发时的性能(tps,qps)

前提

  • 测试应用版本为 mysql5.7.22 和 mysql8.0.15
  • sysbench 测试前先重启 mysql 服务,并清空 os 的 cache(防止屡次测试时命中缓存)
  • 每次进行测试都是新生成测试数据后再进行 mysql5.7 和 mysql8.0 的测试
  • 每次测试时保障 mysql5.7 和 mysql8.0 的配置参数统一

环境

机器

`cat /etc/redhat-release | xargs echo '版本' && dmidecode -s system-product-name | xargs echo '是否虚拟化' && cat /proc/cpuinfo |grep "processor"|wc -l | xargs echo 'cpu 核数'`
  • 版本 CentOS Linux release 7.5.1804 (Core)
  • 是否虚拟化 KVM
  • cpu 核数 4

myql5.7.22

`5.7.22-log`
`innodb_buffer_pool_size 128M`
`innodb_log_buffer_size  64M`
`innodb_log_file_size    48M`
`binlog_format   ROW`
`log_bin ON`
`transaction_isolation   REPEATABLE-READ`

mysql8.0.15

`8.0.15`
`innodb_buffer_pool_size 128M`
`innodb_log_buffer_size  64M`
`innodb_log_file_size    48M`
`binlog_format   ROW`
`log_bin ON`
`transaction_isolation   REPEATABLE-READ`

sysbench

`sysbench -V`
`sysbench 1.1.0 (using bundled LuaJIT 2.1.0-beta3)`

测试

  • 在不同的长久化策略下(binlog, redo log 长久化)mysql5.7 和 mysql8.0 在读写模式、只读模式、只写模式(oltp\_read\_write,oltp\_read\_only,oltp\_write\_only)下的性能体现
  • sysbench 测试工夫为 60s,测试的表数量为 20
  • 测试别离在 双 1 模式(安全性)和0 2 模式(高性能)下进行

参数

任选值

意味着

sync\_binlog

0

binlog 刷盘长久化由操作系统实现,性能好,存在失落 binlog 的危险

sync\_binlog

1 个

事务提交后刷盘长久化,最平安

sync\_binlog

ñ

在每 N 个事务提交后进行刷盘长久化

innodb\_flush\_log\_at\_trx\_commit

0

每秒钟写 redo log 并刷盘长久化

innodb\_flush\_log\_at\_trx\_commit

1 个

事务提交后写 redo log 并刷盘长久化,最平安

innodb\_flush\_log\_at\_trx\_commit

2

事务提交后写 redo log,两次刷盘长久化

双 1 模式下

`SHOW GLOBAL  VARIABLES WHERE Variable_name IN('sync_binlog','innodb_flush_log_at_trx_commit');`
`+--------------------------------+-------+`
`| Variable_name                  | Value |`
`+--------------------------------+-------+`
`| innodb_flush_log_at_trx_commit | 1     |`
`| sync_binlog                    | 1   |`
`+--------------------------------+-------+`

5.7 和 8.0 在读写模式下的体现

双 1 配置,读写模式下,mysql5.7.22 和 mysql8.0.15 tps、qps 性能差不多,mysql8.0.15 在 120 线程并发时,性能呈现了降落抖动

5.7 和 8.0 在只读模式下的体现

双 1 配置,只读模式下,mysql5.7.22 的 tps、qps 比 mysql8.0.15 好 1 /3 左右;并发线程数减少后,tps、qps 并没有随着减少,反而呈现了降落的趋势

5.7 和 8.0 在只写模式下的体现

双 1 配置,只写模式下,随着并发数的回升,mysql5.7.22 的性能比 mysql8.0.15 好 1 / 4 左右

0 2 模式下

`SHOW GLOBAL  VARIABLES WHERE Variable_name IN('sync_binlog','innodb_flush_log_at_trx_commit');`
`+--------------------------------+-------+`
`| Variable_name                  | Value |`
`+--------------------------------+-------+`
`| innodb_flush_log_at_trx_commit | 2     |`
`| sync_binlog                    | 0   |`
`+--------------------------------+-------+`

5.7 和 8.0 在读写模式下的体现

0 2 配置,读写模式下,并发数低时,mysql5.7.22 性能好于 mysql8.0.15; 并发数比拟高时,mysql8.0.15 性能好于 mysql5.7.22;在 80 线程的并发以上时,性能开始降落

5.7 和 8.0 在只读模式下的体现

0 2 配置,只读模式下,mysql5.7.22 性能比 mysql8.0.15 好 1 / 3 左右;随着并发数的回升,性能也没有回升,反而有降落的趋势

5.7 和 8.0 在只写模式下的体现

0 2 配置,只写模式下,mysql5.7.22 的 tps 抖动比拟大;mysql5.7.22 的 qps 比 mysql8.0.15 好 1 / 3 左右

论断

  • 整体来看,mysql5.7.22 在读写模式、只读模式、只写模式下的体现是优于 mysql8.0.15 的
  • 随着并行数的减少,性能体现不会也跟着减少,还会呈现降落
  • 本次测试后果是在配置很低的状况下进行的,不代表相对

留神

sysbench 须要设置 –db-ps-mode=disable 禁用预编译语句,不然并发测试线程多时会报上面的谬误

`FATAL: mysql_stmt_prepare() failed`
`FATAL: MySQL error: 1461 "Can't create more than max_prepared_stmt_count statements (current value: 16382)"`
`FATAL: mysql_stmt_prepare() failed`
`FATAL: MySQL error: 1461 "Can't create more than max_prepared_stmt_count statements (current value: 16382)"`
`FATAL:`
`thread_init'function failed: /usr/local/share/sysbench/oltp_common.lua:288: SQL API error FATAL: mysql_stmt_prepare() failed FATAL: MySQL error: 1461"Can't create more than max_prepared_stmt_count statements (current value: 16382)"` 
`FATAL:thread_init' function failed: /usr/local/share/sysbench/oltp_common.lua:288: SQL API error`
`FATAL: mysql_stmt_prepare() failed`

应用脚本

 `cat sysbench_test_mysql5.7_8.0_tps_qps.sh`
`#!/bin/bash`
`# 用于 sysbench 测试在读写模式、只读模式、只写模式下 mysql5.7 和 mysql8.0 的 tps,qps`
`#nohup bash $0 >/tmp/sysbench_test 2>& 1 &`
`#`
`user=admin`
`passwd=admin`
`ports="8015 57222"`
`host=127.0.0.1`
`sysbench_test_mode="oltp_read_write oltp_read_only oltp_write_only"`
`sysbench_test_info_path=/tmp/sysbench-test`
`function red_echo () {`
 `local what="$*"`
 `echo -e "$(date +%F-%T) \e[1;31m ${what} \e[0m"`
`}`
`function check_las_comm(){`
 `if [$1 -ne 0];then`
 `red_echo $2`
 `exit 1`
 `fi`
`}`
`function  restart_mysqld(){`
 `service mysqld${1} restart`
 `sleep 2`
`}`
`function  purge_binlog(){`
`port=$1`
`mysql -u$user -p$passwd -P$port -h$host<<EOF`
`purge binary logs before now();`
`EOF`
`}`
`function clean_os_cache(){`
 `echo 3 > /proc/sys/vm/drop_caches`
`}`
`function  sysbench_with_diff_thread(){`
`thread_num=$1`
`port=$2`
`order=$3`
`test_mode=$4`
`sysbench /usr/local/share/sysbench/${test_mode}.lua --mysql_storage_engine=innodb  --table-size=100000 --tables=20 --mysql-db=test_1 --mysql-user=$user --mysql-password=$passwd --mysql-port=$port  --mysql-host=$host --threads=$thread_num  --time=60 --report-interval=2 --db-ps-mode=disable --events=0 --db-driver=mysql $order`
`}`
`function  main(){`
`for test_mode in $sysbench_test_mode;do`
 `for port in $ports;do`
 `for thread_num in {5,10,20,30,40,80,120,200};do`
 `restart_mysqld "$port"`
 `check_las_comm  "$?" "restart mysqld${port} failed"`
 `clean_os_cache`
 `purge_binlog "$port"`
 `red_echo "sysbench $thread_num  threads cleanup mysqld${port}"`
 `sysbench_with_diff_thread "$thread_num" "$port" "cleanup" "$test_mode">/dev/null`
 `red_echo "sysbench $thread_num  threads prepare mysqld${port}"`
 `sysbench_with_diff_thread "$thread_num" "$port" "prepare" "$test_mode">/dev/null`
 `mkdir -p $sysbench_test_info_path`
 `red_echo "sysbench $thread_num  threads run mysqld${port} $test_mode"`
 `sysbench_with_diff_thread "$thread_num" "$port" "run" "$test_mode" > $sysbench_test_info_path/${test_mode}_${thread_num}_$port`
 `# service mysqld{port} stop`
 `done`
 `done`
`done`
`}`
`main`

源于:cnblogs.com/YangJiaXin

退出移动版