3. 堪比JMeter的.Net压测工具 – Crank 进阶篇 – 认识bombardier

虚幻大学 xuhss 579℃ 0评论

Python微信订餐小程序课程视频

https://edu.csdn.net/course/detail/36074

Python实战量化交易理财系统

https://edu.csdn.net/course/detail/35475

目录

  1. 堪比JMeter的.Net压测工具 - Crank 入门篇
  2. 堪比JMeter的.Net压测工具 - Crank 进阶篇 - 认识yml
  3. 堪比JMeter的.Net压测工具 - Crank 进阶篇 - 认识bombardier
  4. 堪比JMeter的.Net压测工具 - Crank 进阶篇 - 认识wrk、wrk2
  5. 堪比JMeter的.Net压测工具 - Crank 实战篇 - 接口以及场景压测
  6. 堪比JMeter的.Net压测工具 - Crank 实战篇 - 收集诊断跟踪信息与如何分析瓶颈
  7. 堪比JMeter的.Net压测工具 - Crank 总结篇 - crank带来了什么

1. 前言

通过之前的学习,我们已经了解了各参数以及配置的意义,接下来的文章我们分别从bombardier以及wrk入手,进一步了解彼此之间的联系

2. 认识 bombardier

bombardier 是一个 HTTP(S) 基准测试工具。它是用 Go 编程语言编写的,并使用优秀的fasthttp代替 Go 的默认 http 库,因为它具有闪电般的快速性能,详细文档查看

其支持参数:

复制代码
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22
  • 23
  • 24
  • 25
  • 26
  • 27
  • 28
  • 29
  • 30
  • 31
  • 32
  • 33
  • 34
  • 35
  • 36
  • 37
  • 38
  • 39
  • 40

参数`-c, --connections=125 Maximum number of concurrent connections
-t, --timeout=2s Socket/request timeout
-l, --latencies Print latency statistics
-m, --method=GET Request method
-b, --body="" Request body
-f, --body-file="" File to use as request body
-s, --stream Specify whether to stream body using chunked
transfer encoding or to serve it from memory
--cert="" Path to the client's TLS Certificate
--key="" Path to the client's TLS Certificate Private Key
-k, --insecure Controls whether a client verifies the server's
certificate chain and host name
-H, --header="K: V" ... HTTP headers to use(can be repeated)
-n, --requests=[pos. int.] Number of requests
-d, --duration=10s Duration of test
-r, --rate=[pos. int.] Rate limit in requests per second
--fasthttp Use fasthttp client
--http1 Use net/http client with forced HTTP/1.x
--http2 Use net/http client with enabled HTTP/2.0
-p, --print= Specifies what to output. Comma-separated list of
values 'intro' (short: 'i'), 'progress' (short:
'p'), 'result' (short: 'r'). Examples:

  • i,p,r (prints everything)

  • intro,result (intro & result)

  • r (result only)

  • result (same as above)
    -q, --no-print Don't output anything
    -o, --format= Which format to use to output the result.
    is either a name (or its shorthand) of some format
    understood by bombardier or a path to the
    user-defined template, which uses Go's
    text/template syntax, prefixed with 'path:' string
    (without single quotes), i.e.
    "path:/some/path/to/your.template" or
    "path:C:\some\path\to\your.template" in case of
    Windows. Formats understood by bombardier are:

  • plain-text (short: pt)

  • json (short: j)`
    并且bombardier支持多平台,可以在Windows、Linux、OSX系统上运行,那接下来我们使用bombardier测试一下百度的压测情况

安装(WSL-Ubuntu):

复制代码
  • 1
  • 2

shellsudo apt install wget sudo wget https://github.com/codesenberg/bombardier/releases/download/v1.2.5/bombardier-linux-arm64
运行:

复制代码
  • 1

shell./bombardier-linux-arm64 -c 200 -d 1s --insecure -l https://www.baidu.com --print r --format json
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-cQlkq3Ru-1646973911131)(https://asciinema.org/a/KEr5VQgAzTzKq9HX5EMyVkC9m.svg)]

其中:

  • req1xx代表http响应码为1**
  • req2xx代表http响应码为2**
  • req3xx代表http响应码为3**
  • req4xx代表http响应码为4**
  • req5xx代表http响应码为5**
  • result.rps.mean代表每秒请求数
  • result.rps.max代表每秒最大请求数
  • result.latency.mean代表每毫秒延迟
  • result.latency.max代表每毫秒最大延迟

3. 了解Microsoft.Crank.Jobs.Bombardier

在Microsoft.Crank.Jobs.Bombardier项目中Program.cs

  1. 根据参数获取-w、-d、-n、-f参数信息
  2. 校验压测时长、请求数等参数信息
  3. 判断当前运行环境是Windows、Linux、OSX,根据环境下载对应的bombardier,并根据传递的
  4. 根据yml参数最后拼装bombardier的原始命令:

bombardier -c 200 -d 1s --insecure -l https://www.baidu.com --print r --format json

  1. 将输出的结果使用追加到stringBuilder上,再赋值给output
  2. 通过JObject.Parse解析指标,最后通过BenchmarksEventSource存储并输出到控制台或数据库、csv、json中

其中

  • 请求总数 = req1xx + req2xx + req3xx + req4xx + req5xx + others
  • 成功请求数 = req2xx + req3xx
  • 失败请求数 = 请求总数 - 成功请求数
复制代码
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22
  • 23
  • 24
  • 25
  • 26
  • 27
  • 28
  • 29
  • 30
  • 31
  • 32
  • 33
  • 34
  • 35
  • 36
  • 37
  • 38

language-swift`BenchmarksEventSource.Register("bombardier/requests;http/requests", Operations.Max, Operations.Sum, "Requests", "Total number of requests", "n0");
BenchmarksEventSource.Register("bombardier/badresponses;http/requests/badresponses", Operations.Max, Operations.Sum, "Bad responses", "Non-2xx or 3xx responses", "n0");

BenchmarksEventSource.Register("bombardier/latency/mean;http/latency/mean", Operations.Max, Operations.Avg, "Mean latency (us)", "Mean latency (us)", "n0");
BenchmarksEventSource.Register("bombardier/latency/max;http/latency/max", Operations.Max, Operations.Max, "Max latency (us)", "Max latency (us)", "n0");

BenchmarksEventSource.Register("bombardier/rps/mean;http/rps/mean", Operations.Max, Operations.Sum, "Requests/sec", "Requests per second", "n0");
BenchmarksEventSource.Register("bombardier/rps/max;http/rps/max", Operations.Max, Operations.Sum, "Requests/sec (max)", "Max requests per second", "n0");
BenchmarksEventSource.Register("bombardier/throughput;http/throughput", Operations.Max, Operations.Sum, "Read throughput (MB/s)", "Read throughput (MB/s)", "n2");

BenchmarksEventSource.Register("bombardier/raw", Operations.All, Operations.All, "Raw results", "Raw results", "json");

var total =
document["result"]["req1xx"].Value()

  • document["result"]["req2xx"].Value()
  • document["result"]["req3xx"].Value()
  • document["result"]["req3xx"].Value()
  • document["result"]["req4xx"].Value()
  • document["result"]["req5xx"].Value()
  • document["result"]["others"].Value();

var success = document["result"]["req2xx"].Value() + document["result"]["req3xx"].Value();

BenchmarksEventSource.Measure("bombardier/requests;http/requests", total);
BenchmarksEventSource.Measure("bombardier/badresponses;http/requests/badresponses", total - success);

BenchmarksEventSource.Measure("bombardier/latency/mean;http/latency/mean", document["result"]["latency"]["mean"].Value());
BenchmarksEventSource.Measure("bombardier/latency/max;http/latency/max", document["result"]["latency"]["max"].Value());

BenchmarksEventSource.Measure("bombardier/rps/max;http/rps/max", document["result"]["rps"]["max"].Value());
BenchmarksEventSource.Measure("bombardier/rps/mean;http/rps/mean", document["result"]["rps"]["mean"].Value());

BenchmarksEventSource.Measure("bombardier/raw", output);

var bytesPerSecond = document["result"]["bytesRead"].Value() / document["result"]["timeTakenSeconds"].Value();

// B/s to MB/s
BenchmarksEventSource.Measure("bombardier/throughput", bytesPerSecond / 1024 / 1024);`

4. 解读bombardier.yml各参数作用

  • connections: 最大并发连接数,默认: 256
  • warmup: 预热时间,默认15s,与执行duration类似,而并非压测次数
    • 当warmup > 0时,会先预热warmup秒后再执行一次压测,第二次的压测才是最后返回的结果
    • 当warmup = 0时,不进行预热,直接开始压测
  • duration: 测试时长,单位: s
  • requests: 请求数
  • rate: 每秒请求数限制
  • transport: 传输方式。默认: fasthttp 、支持fasthttp、http1、http2三种
  • presetHeaders: 预设header,根据全局参数headers,自选其一即可,选择json,那请求的header即为: --header "Accept: application/json,text/html;q=0.9,application/xhtml+xml;q=0.9,application/xml;q=0.8,/;q=0.7" --header "Connection: keep-alive"
  • customHeaders: 自定义headers,如果预设headers中没有需要的header,则通过重写customHeaders,以完成自定义header的目的
  • serverUri: 自定义url,如果此参数存在,则请求地址为: {serverUri}:{serverPort}{path}
  • serverPort: 服务端口
  • serverScheme: 服务的Scheme,默认http、支持http、https两种
  • serverAddress: 服务地址、不包含http、例如: www.baidu.com,如果serverUri存在,此配置无效,如果不存在,请求格式为: {serverScheme}?/{serverAddress}:{serverPort}{path}
  • path: 服务接口地址,不包含域,例如: /api/check/healthy
  • bodyFile: body内容,仅在非Get请求时使用,支持远程路径与本地绝对路径(Agent服务的绝对地址,非Controller端的绝对地址)
  • verb: 请求方式: 默认GET、支持POST、PUT、DELETE、PATCH、GET

5. 总结

优势:

  • 跨平台
  • 用法简单
  • 使用go语言开发、性能高

劣势:

  • 不支持动态参数
  • 不支持多个接口同时压测

bombardier.yml的存在是为Microsoft.Crank.Jobs.Bombardier提供配置参数,Microsoft.Crank.Jobs.Bombardier通过调用开源项目bombardier实现压测,并将压测结果通过BenchmarksEventSource存储并输出到控制台或数据库、csv、json中

源码地址:https://github.com/doddgu/crank/tree/sample

开源地址

MASA.BuildingBlocks:https://github.com/masastack/MASA.BuildingBlocks

MASA.Contrib:https://github.com/masastack/MASA.Contrib

MASA.Utils:https://github.com/masastack/MASA.Utils

MASA.EShop:https://github.com/masalabs/MASA.EShop

MASA.Blazor:https://github.com/BlazorComponent/MASA.Blazor

如果你对我们的 MASA Framework 感兴趣,无论是代码贡献、使用、提 Issue,欢迎联系我们

b935d785f3f519758b78c10b33a0e9e9 - 3. 堪比JMeter的.Net压测工具 - Crank 进阶篇 - 认识bombardier

转载请注明:xuhss » 3. 堪比JMeter的.Net压测工具 – Crank 进阶篇 – 认识bombardier

喜欢 (0)

您必须 登录 才能发表评论!