MySQL压测相关内容

1、机器配置与相关概念

  • 4核8G : 每秒500个请求
  • 8核16G : 1000~2000
  • 16核32G :3000~4000

  当然你也要考虑你请求耗时

2、IO相关的性能指标

  • IOPS:机器随机IO并发处理的能力,内存中更新的数据会由线程在不确定的时间刷入磁盘中,这就是随机IO的过程。如果你的IOPS过低,会导致内存中刷入磁盘的效率不够高
  • 吞吐量:机器的磁盘每秒可以读写多少节点的数据量,提交事务的时候,会把大量的redo log日志刷入磁盘,所以吞吐量就决定了每秒可以写入多少redo log,redo log是顺序写入的。一般磁盘的吞吐量可以达到每秒200M
  • latency :往磁盘写入一条数据的延迟

3、压测的时候要关注的其他性能指标

  • CPU负载:假设你压测的时候每秒可以处理3000个请求,可能其他的性能指标都正常,但是CPU负载过高,那么说明数据库不能压测更高的QPS了,否则CPU会吃不消
  • 网络负载:观察机器带宽,在压测一定的QPS和TPS的时候,每秒钟机器的网卡输入多少MB数据,输出多少数据,网卡打满的话说明你的压测不能继续了
  • 内存负载:如果机器内存消耗过高,那么你的压测也停止了

4、压测工具sysbench

  • linux安装sysbench
  • 测试命令:
    • 准备 :sysbench --db-driver=mysql --time=300 --threads=10 --report-interval=1 --mysql-host=127.0.0.1 --mysql-port=3306 --mysql-user=slp --mysql-password=Lll001972 --mysql-db=tpl_system --tables=20 --table_size=1000000 oltp_read_write --db-ps-mode=disable prepare
    • 跑起来:sysbench --db-driver=mysql --time=300 --threads=10 --report-interval=1 --mysql-host=127.0.0.1 --mysql-port=3306 --mysql-user=slp --mysql-password=Lll001972 --mysql-db=tpl_system --tables=20 --table_size=1000000 oltp_read_write --db-ps-mode=disable run
  • 如果要对不同的操作进行压测,可以更改oltp_read_write参数,可改为:
    • oltp_read_only : 读
    • oltp_delete : 删
    • oltp_update_index :更新索引字段的性能
    • oltp_update_non_index : 更新非索引字段
    • oltp_insert :插
    • oltp_write :写
  • 压测完成后可执行clean up指令:sysbench --db-driver=mysql --time=300 --threads=10 --report-interval=1 --mysql-host=127.0.0.1 --mysql-port=3306 --mysql-user=slp --mysql-password=Lll001972 --mysql-db=tpl_system --tables=20 --table_size=1000000 oltp_read_write --db-ps-mode=disable cleanup
  • 压测完成后,会有压测报告出现,我的服务器宕机了,法克,commback
  • [ 81s ] thds: 10 tps: 8.99 qps: 204.88 (r/w/o: 145.92/39.98/18.99) lat (ms,95%): 995.51 err/s: 0.00 reconn/s: 0.00

    参数表示10线程,每秒tps:9,qps:204(读/写/其他),95%的请求在995ms之内,每秒由0个请求是失败的,发生0次网络重连

 5、压测时如何观察机器的CPU负载情况

  最最常用的监测linux机器性能的命令,就是top命令

top - 15:52:00 up 42:35, 1 user, load average: 0.15, 0.05, 0.01

先来解释一下这行信息,这行信息是最直观可以看到机器的cpu负载情况的,首先15:52:00指的是当前时间,up 42:35指的是机器已经运行了多长时间,1 user就是说当前机器有1个用户在使用。最重要的是load average: 0.15, 0.05, 0.01这行信息,他说的是CPU在1分钟、5分钟、15分钟内的负载情况。这里要给大家着重解释一下这个CPU负载是什么意思,假设我们是一个4核的CPU,此时如果你的CPU负载是0.15,这就说明,4核CPU中连一个核都没用满,4核CPU基本都很空闲,没啥人在用。依次类推

6、内存负载

MiB Mem :   1830.0 total,     67.8 free,   1460.3 used,    302.0 buff/cache

7、压测时如何观察机器的磁盘IO情况?

  dstat -d命令、dstat -r命令

8、压测时观察网卡的流量情况

  dstat -n命令

9、数据库可视化监控和报表

  Prometheus + Grafana

原文地址:https://www.cnblogs.com/TripL/p/13654999.html