_____ ______   ________  _______   ________  ___       ________      ___    ___ _______   ________     
|\   _ \  _   \|\   __  \|\  ___ \ |\   __  \|\  \     |\   __  \    |\  \  /  /|\  ___ \ |\   __  \    
\ \  \\\__\ \  \ \  \|\  \ \   __/|\ \  \|\  \ \  \    \ \  \|\  \   \ \  \/  / | \   __/|\ \  \|\  \   
 \ \  \\|__| \  \ \   _  _\ \  \_|/_\ \   ____\ \  \    \ \   __  \   \ \    / / \ \  \_|/_\ \   _  _\  
  \ \  \    \ \  \ \  \\  \\ \  \_|\ \ \  \___|\ \  \____\ \  \ \  \   \/  /  /   \ \  \_|\ \ \  \\  \| 
   \ \__\    \ \__\ \__\\ _\\ \_______\ \__\    \ \_______\ \__\ \__\__/  / /      \ \_______\ \__\\ _\ 
    \|__|     \|__|\|__|\|__|\|_______|\|__|     \|_______|\|__|\|__|\___/ /        \|_______|\|__|\|__|
                                                                    \|___|/                             

作用

对测试环境数据库重放录制的MySQL请求

录制方式

该工具读取tcpdump的产物，因此需要使用tcpdump进行流量录制，命令如下：

tcpdump -s 0 -i eth0 dst port 4000 and tcp -w /run/test.pcap

其中-s 0表示捕获整个数据包，-i eth0表示在eth0网卡上录制数据，dst port 4000 and tcp表示捕获目标端口为4000的TCP数据包，取决于线上数据库在哪个端口监听，然后-w /run/test/pcap表示将录制的数据写到/run/test.pcap

如果记不住这么多参数又经常需要录制的话，可以把上述命令写到一个脚本里record.sh:

#! /bin/sh

tcpdump -s 0 -i eth0 dst port 4000 and tcp -w /run/test.pcap

这就是我们录制流量的小工具啦！当然你可以对脚本内容做一些小调整让它更高效，比如加上-B参数来避免突发流量时tcpdump处理不过来造成的丢包

回放

回放命令文档:

mysql-replayer bench -i input-dir [-x <transfer,>] [-u user] [-p passwd] [-s speed] [-c concurrent]:
        Bench mysql server with data from input-dir.
  -x string
        use <transfer,> to specify the IPs and ports of the source and target. The format of <transfer,> could be as follow: 'sourceIP:sourcePort-targetIP:targetPort,...' (default ":3306-127.0.0.1:3306")
  -c int
        the bench concurrent, 0 or negative number means dynamic concurrent
  -i string
        the directory contains bench data
  -p string
        password to use when connecting to server
  -s int
        the bench speed (default 1)
  -u string
        user for login (default "root")

假设将上一步pcap文件放至目录/tmp/test，测试数据库用户为root，数据库监听本地端口13306，设置并发为200，速度为录制时实际速度的2倍（实测结果这个并不太准），那么实际的命令为:

mysql-replayer -i /tmp/test -x ':4000-127.0.0.1:13306' -c 200 -s 2 # 用户和端口由于是默认值不用填

如果不使用参数-c，它将使用默认值0，这表示根据录制流量时的实际情况动态调整并发（比如录制的时候为200过了一会儿增至1000，那么这里也会自动从200增至1000）

结果

录制20s sysbench压测流量（768并发），sysbench实际输出为:

[ 10s ] thds: 768 tps: 0.00 qps: 260.12 (r/w/o: 213.19/0.00/46.93) lat (ms,95%): 0.00 err/s: 0.00 reconn/s: 0.00
[ 20s ] thds: 768 tps: 0.00 qps: 243.40 (r/w/o: 225.36/0.00/18.04) lat (ms,95%): 0.00 err/s: 0.00 reconn/s: 0.00

以录制的结果为数据源使用mysql-replayer回放结果:

[root@vps mysql-replayer]# ./mysql-replayer bench -i test  -c 500
Processing...
Process 6273 querys in 32 seconds, QPS: 196
[root@vps mysql-replayer]# ./mysql-replayer bench -i test -c 500 -s 10
Processing...
Process 6273 querys in 8 seconds, QPS: 784
[root@vps mysql-replayer]# ./mysql-replayer bench -i test -c 2000 -s 10
Processing...
Process 6273 querys in 5 seconds, QPS: 1254

实际结果取决于当时的网络环境