关于java-ee:数据库000-????Sysbench-数据库压力测试工具

000 – ????Sysbench 数据库压力测试工具

  • sysbench 是一个开源的、模块化的、跨平台的多线程性能测试工具,能够用来进行CPU、内存、磁盘I/O、线程、数据库的性能测试。目前反对的数据库有MySQLOraclePostgreSQL。以下操作都将以反对MySQL数据库为例进行。
1. Linux 上装置 sysbench 工具
  • 装置形式有两种,一种是通过 yum/apt 等来装置,另一种本人下载源码包来装置,笔者这里采纳的是centos ,采纳yum 装置
  • sysbench 的源码包下载地址: http://sourceforge.net/projects/sysbench ,采纳源码装置的可转这里
  • 通过 yum 装置如下:

    • 设置 yum repo 仓库

curl -s https://packagecloud.io/install/repositories/akopytov/sysbench/script.rpm.sh | sudo bash

  • 装置

sudo yum -y install sysbench

  • 装置完查看是否胜利

sysbench –version

2. 数据库测试用例筹备
  • 咱们这里测试的是 MySQL ,首先咱们在数据库创立一个专门用来测试的库 test_db

  • 通过sysbench 创立20个测试表,每个表中创立100万数据,再通过10个线程对测试库发动拜访,继续5分钟,对其进行压测
3. sysbench 构建表与数据
  • 执行上面命令筹备数据

sysbench –db-driver=mysql –time=300 –threads=10 –report-interval=1 –mysql-host=192.168.56.10 –mysql-port=3306 –mysql-user=root –mysql-password=root –mysql-db=test_db –tables=20 –table_size=1000000 oltp_read_write –db-ps-mode=disable prepare

  • 下面命令的参数阐明:

    • --db-driver=mysql : 示意数据库的驱动类型,咱们应用的是 MySQL 所以填mysql ,如果应用 Oracle 则填写相应的oracle
    • --time=300 : 这个参数示意继续拜访的工夫 300秒
    • --threads=10 : 示意应用10个线程模仿并发拜访
    • --report-interval=1 : 示意每隔一秒输入以此压测状况
    • --mysql-host=192.168.56.10 --mysql-port=3306 --mysql-user=root --mysql-password=root : 这一块的配置,就是根本的数据库链接信息,指定数据库IP ,端口,账号密码
    • --mysql-db=test_db --tables=20 --table_size=1000000 : 这三个参数设置,示意指定测试的库为test_db , 同时在这个库中构建20个表,并且每个表中构建出 100万条测试数据,表的名字会相似 sbtest1,sbtest2 这种格局
    • oltp_read_write : 示意执行oltp 数据库的读写测试
    • --db-ps-mode=disable : 禁止 ps 模式
    • prepare : 示意依照命令设置去构建出咱们的数据,也就是对后面所有命令的执行计划
4. 全方位测试
1. 综合读写测试
  • 测试数据库的综合读写TPS ,应用 oltp_read_write 模式

sysbench –db-driver=mysql –time=300 –threads=10 –report-interval=1 –mysql-host=192.168.56.10 –mysql-port=3306 –mysql-user=root –mysql-password=root –mysql-db=test_db –tables=20 –table_size=1000000 oltp_read_write –db-ps-mode=disable run

留神:命令最初不再是 之前的 prepare,这里是 run ,示意运行压测,后面的是筹备数据

  • 成果

  • 下面是间接输入到控制台,咱们也能够将其全副记录在文件中,通过管道,| tee /tmp/mysysbench.log 整个命令如下:

sysbench –db-driver=mysql –time=300 –threads=10 –report-interval=1 –mysql-host=192.168.56.10 –mysql-port=3306 –mysql-user=root –mysql-password=root –mysql-db=test_db –tables=20 –table_size=1000000 oltp_read_write –db-ps-mode=disable run | tee /tmp/mysysbench.log

2. 只读性能测试
  • 测试数据库的只读性能,应用 oltp_read_only 模式,命令如下:

sysbench –db-driver=mysql –time=300 –threads=10 –report-interval=1 –mysql-host=192.168.56.10 –mysql-port=3306 –mysql-user=root –mysql-password=root –mysql-db=test_db –tables=20 –table_size=1000000 oltp_read_only –db-ps-mode=disable run

  • 后果:

  • 如果要输入到文件如上
3. 删除性能测试
  • 测试数据库的删除性能,应用模式:oltp_delete ,命令如下:

sysbench –db-driver=mysql –time=300 –threads=10 –report-interval=1 –mysql-host=192.168.56.10 –mysql-port=3306 –mysql-user=root –mysql-password=root –mysql-db=test_db –tables=20 –table_size=1000000 oltp_delete –db-ps-mode=disable run

4. 更新索引字段测试
  • 测试数据库的更新索引字段的性能,应用模式:oltp_update_index , 命令如下:

sysbench –db-driver=mysql –time=300 –threads=10 –report-interval=1 –mysql-host=192.168.56.10 –mysql-port=3306 –mysql-user=root –mysql-password=root –mysql-db=test_db –tables=20 –table_size=1000000 oltp_update_index –db-ps-mode=disable run

5. 更新非索引字段测试
  • 测试数据库中更新非索引字段的性能,应用模式:oltp_update_non_index, 命令如下:

sysbench –db-driver=mysql –time=300 –threads=10 –report-interval=1 –mysql-host=192.168.56.10 –mysql-port=3306 –mysql-user=root –mysql-password=root –mysql-db=test_db –tables=20 –table_size=1000000 oltp_update_non_index –db-ps-mode=disable run

6. 插入性能测试
  • 测试数据库的数据插入性能,应用模式:oltp_insert,命令如下:

sysbench –db-driver=mysql –time=300 –threads=10 –report-interval=1 –mysql-host=192.168.56.10 –mysql-port=3306 –mysql-user=root –mysql-password=root –mysql-db=test_db –tables=20 –table_size=1000000 oltp_insert –db-ps-mode=disable run

7. 写入性能测试
  • 测试数据库的写入性能,应用模式:oltp_write_only, 命令如下:

sysbench –db-driver=mysql –time=300 –threads=10 –report-interval=1 –mysql-host=192.168.56.10 –mysql-port=3306 –mysql-user=root –mysql-password=root –mysql-db=test_db –tables=20 –table_size=1000000 oltp_write_only –db-ps-mode=disable run

8. 清理数据
  • 后面命令进行了各种测试,在测试完之后咱们能够通过上面的 cleanup 命令来革除构建的测试数据

sysbench –db-driver=mysql –time=300 –threads=10 –report-interval=1 –mysql-host=192.168.56.10 –mysql-port=3306 –mysql-user=root –mysql-password=root –mysql-db=test_db –tables=20 –table_size=1000000 oltp_read_write –db-ps-mode=disable cleanup

9. 压测后果剖析
  • 通过下面的命令咱们能够全方位的失去测试的后果,咱们间接每个一秒输入一次后果,在控制台会输入相似上面的货色:

[ 31s ] thds: 10 tps: 350.35 qps: 5575.50 (r/w/o: 4874.81/0.00/700.69) lat (ms,95%): 36.89 err/s: 0.00 reconn/s: 0.00

  • 咱们来解释一下其中的含意,首先[31s] 示意这是在第31秒的时候输入的一段压测统计后果,其余字段如下:

    • thds:10 : 示意以后有10个线程正在压测
    • tps:350.35 : 示意以后每秒执行了 350.35 个事务
    • qps:5575.50: 示意以后每秒能够执行 5575.50 个申请
    • (r/w/o: 4874.81/0.00/700.69) : 示意在每秒 5575.50 个申请中,有 4874.81 个读申请,0.00 个写申请,700.69 个其余申请,其实就是对 qps 的细化
    • lat (ms,95%): 36.89:示意 95% 的申请的提早都在36.89 毫秒以下
    • err/s: 0.00 reconn/s: 0.00:示意有0个申请失败,产生了0次的网络重连
  • 在压测完结后会输入一个总的压测后果,如下:

  • 其中的参数的解释:

10. 罕用监控命令
  • 在压测过程中咱们要时刻关注服务器的 CPU 、磁盘I/O 、网络负载等信息,一旦发现任何一个超出肯定负荷,则不适宜再持续加大线程数来压测了
  • 肯定要留神,压测的过程是要保障机器各项指标在失常范畴内的最大负载,而不是咱们一直的增大 sysbench 的线程数,不关系其余指标,这样即便机器每秒抗住了很高的qps ,然而这时候的机器曾经是满负荷运行了,内存,cpu,网络带宽等都简直被打满,这种状况机器随时可能挂掉,这时候的测压就没有什么代表性了,因为你不可能在生产者让它达到这样的负荷
察看 CPU 的的负荷
  • Linux下最常见的命令就是top 命令,能够输入具体的状况,如下:

  • 对于下面的输入,咱们具体来剖析一下,首先看第一行的输入

top – 16:24:21 up 13:41, 4 users, load average: 0.11, 3.10, 3.72

    • 16:24:21 : 示意以后的工夫
    • up 13:41:示意曾经运行了多长时间
    • 4 users:以后机器有几个用户在应用
    • load average: 0.11, 3.10, 3.72:这是外围。示意 CPU 在 一分钟、五分钟、十五分钟 内的均匀负载状况,简略解释一下,假如咱们是一个四核的CPU ,此时如果咱们的CPU 负载是 0.15 ,那么示意这四个外围中连一个外围都没应用满,表明整体比拟闲暇;如果整个负载是1,则示意四个核中有一个曾经应用的比拟忙碌了,然而其余三个还是比拟闲暇的;如果负载是4,则阐明以后四个外围都处于跑满的状态,如果负载大于四,假如6,那阐明四核的CPU 被超负荷应用也无奈解决完以后的工作,有很多线程与要期待CPU 资源
    • 前面有内存的应用状况,

    KiB Mem : 498684 total, 6216 free, 366620 used, 125848 buff/cache

    • 498684 total : 总的内存,差不多 490M
    • 6216 free:以后可用内存,6M
    • 366620 used:已应用内存
    • 125848 buff/cache:用于IO 缓冲的内存
    磁盘IO检测
    • 在检测CPU 和内存应用的同时,咱们还须要检测磁盘的应用情况,包含IO 吞吐量,IOPS 等信息
    • 次要通过 dstat 命令来查看,如果零碎没有装能够通过 yum install dstat 进行装置
    • 执行 dstat -d 命令,能够看到如下:

    下面显示的内存能够看到存储的IO吞吐量的具体数据,每秒读19M数据,每秒写 6521K的数据,这个吞吐量并不是很高,个别一般的机械硬盘能够达到上百MB的读写量

    • 应用命令 dstat -r 来查看IOPS 的状况,如下:

    如下面后果能够看到,读写别离的IOPS 的值,也就是说随即磁盘读取/写入每秒多少次,通常来说磁盘的读写每秒在两三百次是可承受的

    网卡流量检测
    • 同样咱们能够通过 dstat -n 来查看网卡的具体流量状况,如下:

    能够看到下面所示,网卡每秒接管和发送的数据量。通常来说如果咱们电脑是千兆网卡,那么每秒钟网卡的总流量也就在100M 左右,甚至更低


    本文由AnonyStar 公布,可转载但需申明原文出处。
    欢送关注微信公账号 :云栖简码 获取更多优质文章
    更多文章关注笔者博客 :云栖简码 i-code.online

    评论

    发表回复

    您的邮箱地址不会被公开。 必填项已用 * 标注

    这个站点使用 Akismet 来减少垃圾评论。了解你的评论数据如何被处理