压力测试

测试环境

使用谷歌云的服务器进行测试,型号为 n1-highcpu-8 (8 vCPUs, 7.2 GB memory)

我们最多只使用 4 核去运行 APISIX,剩下的 4 核用于系统和压力测试工具 wrk

测试反向代理

我们把 APISIX 当做反向代理来使用,不开启任何插件,响应体的大小为 1KB。

QPS

下图中 x 轴为 CPU 的使用个数,y 轴为每秒处理的请求数:

benchmark-1

延时

请注意 y 轴延时的单位是微秒(μs),而不是毫秒:

latency-1

火焰图

火焰图的采样结果:

flamegraph-1

如果你需要在本地服务器上运行基准测试,你需要同时运行另一个 NGINX 实例来监听 80 端口:

压力测试 - 图4note

您可以这样从 config.yaml 中获取 admin_key 并存入环境变量:

  1. admin_key=$(yq '.deployment.admin.admin_key[0].key' conf/config.yaml | sed 's/"//g')
  1. curl http://127.0.0.1:9180/apisix/admin/routes/1 -H "X-API-KEY: $admin_key" -X PUT -d '
  2. {
  3. "methods": ["GET"],
  4. "uri": "/hello",
  5. "upstream": {
  6. "type": "roundrobin",
  7. "nodes": {
  8. "127.0.0.1:80": 1,
  9. "127.0.0.2:80": 1
  10. }
  11. }
  12. }'

在完成配置并安装 wrk 之后,可以使用以下命令进行测试:

  1. wrk -d 60 --latency http://127.0.0.1:9080/hello

测试反向代理,开启 2 个插件

我们把 APISIX 当做反向代理来使用,开启限速和 prometheus 插件,响应体的大小为 1KB。

QPS

下图中 x 轴为 CPU 的使用个数,y 轴为每秒处理的请求数:

benchmark-2

Latency

请注意 y 轴延时的单位是微秒(μs),而不是毫秒:

latency-2

火焰图

火焰图的采样结果:

火焰图采样结果

如果你需要在本地服务器上运行基准测试,你需要同时运行另一个 NGINX 实例来监听 80 端口:

  1. curl http://127.0.0.1:9180/apisix/admin/routes/1 -H "X-API-KEY: $admin_key" -X PUT -d '
  2. {
  3. "methods": ["GET"],
  4. "uri": "/hello",
  5. "plugins": {
  6. "limit-count": {
  7. "count": 999999999,
  8. "time_window": 60,
  9. "rejected_code": 503,
  10. "key": "remote_addr"
  11. },
  12. "prometheus":{}
  13. },
  14. "upstream": {
  15. "type": "roundrobin",
  16. "nodes": {
  17. "127.0.0.1:80": 1,
  18. "127.0.0.2:80": 1
  19. }
  20. }
  21. }'

在完成配置并安装 wrk 之后,可以使用以下命令进行测试:

  1. wrk -d 60 --latency http://127.0.0.1:9080/hello

有关如何运行基准测试的更多参考,你可以查看此PR和此脚本

压力测试 - 图8tip

如果您想使用大量连接运行基准测试,您可能需要更新 keepalive 配置,将配置添加到 config.yaml 并重新加载 APISIX。否则超过配置数量的连接将成为短连接。你可以使用以下命令运行大量连接的基准测试:

  1. wrk -t200 -c5000 -d30s http://127.0.0.1:9080/hello

如果你需要了解更多信息,请参考:ngx_http_upstream_module