使用Gatling做web压力测试

Gatling是什么

Gatling是一个使用Scala编写的开源的负载测试框架,基于Akka和Netty,具有以下亮点:

  • 高性能
  • 友好的HTML报告
  • 基于情境的记录器(recoder),对开发友好的DSL

Gatling VS Jmeter

Jmeter是目前非常成熟的负载测试工具,支持相当多的协议,支持插件,可以轻松的扩展。

而Gatling性能上更有优势,并且使用Scala DSL代替xml做配置,相比jmeter要更灵活,而且更容易修改和维护。

关于Jmeter和Gatling的一个比较好的对比可以参见infoq的文章

同时,Gatling也对MavenGradle这样的构建工具比较友好,易于集成到Jenkins中,轻松加入到CI流程中。

TIPS: 在实际使用中建议版本化管理gatling的配置,使用maven插件gradle插件形成对应的maven/gradle工程项目管理,更容易,而且容量更小,升级gatling也会更方便,减少了很多手工的操作。

Gatling的基本使用

从官方网站下载zip压缩包,解压就行了,需要预先安装有JDK,并设置好JAVA_HOME,熟悉JAVA的朋友应该都懂,就不细说了。

Gatling的目录结构看起来像这样:

│  LICENSE
│
├─bin
│      gatling.bat
│      gatling.sh
│      recorder.bat
│      recorder.sh
│
├─conf
│      gatling-akka.conf
│      gatling.conf
│      logback.xml
│      recorder.conf
│
├─lib
├─results
│      .keep
│
└─user-files
    ├─bodies
    │      .keep
    │
    ├─data
    │      search.csv
    │
    └─simulations
        └─computerdatabase
            │  BasicSimulation.scala
            │
            └─advanced
                    AdvancedSimulationStep01.scala
                    AdvancedSimulationStep02.scala
                    AdvancedSimulationStep03.scala
                    AdvancedSimulationStep04.scala
                    AdvancedSimulationStep05.scala

bin/目录存放gatling的可执行文件,conf/存放配置,通常保持默认即可,lib/存放gatling本身的依赖,用户不用管,results/存放报告,user-files/是用户最主要使用的目录,用户定义的测试场景相关的代码均存放于此目录下。

zip包解压缩以后已经带有了一个官方的示例文件BasicSimulation.scala,想看看演示效果的直接使用bin/gatling.(bat|sh)启动就可以了。这个演示的场景描述见官方文档。那几个AdvancedSimulationStep其实效果上和BasicSimulation完全一致,只是官方提供了一些参考的DSL写法而已。

一些实战中的DSL参考范例

尽管gatling和jmeter一样,带有一个图形化的recorder,但是功能极其简陋,只能模拟一个用户,并且没有结构化代码架构。因此只能用来生成最基本的框架,绝大多数情况需要用户自己编写DSL,其实官方文档中几乎已经涵盖了大部分的用例,照着抄就可以了。这里提供几个参考的DSL

Random不起作用?

有时候我们需要在测试场景中引入随机数,从而更好的模拟大量用户请求的场景。很自然的想到几乎各个编程语言都带有Random函数库。而Scala自然也不例外,带有一个scala.util.Random类库。但是实际使用的时候可能会发现没用。比如下面这个例子:

forever(
    exec(http("Random id browse")
        .get("/articles/" + scala.util.Random.nextInt(100))
        .check(status.is(200))
)

这个scala.util.Random.nextInt(100)会发现只有第一次会随机生成一个数字,后面都不变。按照gatling的官方文档的解释,由于DSL会预编译,在整个执行过程中是静态的。因此Random在运行过程中就已经静态化了,不会再执行。应改为Feeder实现。Feeder是gatling用于实现注入动态参数或变量的。改用Feeder实现:

val randomIdFeeder = 
    Iterator.continually(Map("id" -> 
        (scala.util.Random.nextInt(100))))

forever(
    feed(randomIdFeeder)
    .exec(http("Random id browse")
        .get("/articles/${id}"))
        .check(status.is(200))
)

feed()在每次执行时都会从Iterator[Map[String, T]]对象中取出一个值,这样才能实现这个需求。

使用import引入外部方法

例如专门写一个Feeders.scala文件,存储着各种需要用到的Feeder:

import scala.util.Random
object LinchangFeeders {
    def randomGeoFeeder() : Iterator[Map[String, Number]] = {
        val LNG_RANGE = List(108.75, 109.1)
        val LAT_RANGE = List(34.0, 34.4)
        return Iterator.continually(
            Map(
                "lng" -> (
                    Random.nextFloat() * (LNG_RANGE(1) 
                    - LNG_RANGE(0)) + LNG_RANGE(0)
                )
                ,"lat" -> (
                    Random.nextFloat() * (LAT_RANGE(1) 
                    - LAT_RANGE(0)) + LAT_RANGE(0)
                )
            )
        )
    }

    def randomOffsetFeeder() : Iterator[Map[String, Number]] = {
        Iterator.continually(Map("offset" -> Random.nextInt(100)))
    }
}

然后在MySimulation.scala就可以import,使用里面定义好的方法了:

import scala.concurrent.duration._
import scala.util.Random

import io.gatling.core.Predef._
import io.gatling.http.Predef._
import io.gatling.jdbc.Predef._

import Feeders._
class MySimulation extends Simulation {
    val brownse = feed(randomOffsetFeeder)
        .exec(
            home
        )
}

用户注入策略

  • <= 10: 一把注入
  • > 10: 每10秒注入10个用户
    val injectStrategy =
        if (USERS_COUNT > 10) {
            splitUsers(USERS_COUNT) into(
                rampUsers(10) over(5 seconds)
            ) separatedBy(10 seconds)
        } else {
            atOnceUsers(USERS_COUNT)
        }

压测时间策略

  • = 0: 所有模拟用户不循环,执行完测试场景即退出
  • > 0: 所有模拟用户循环执行测试场景,直到达到指定时间
    val scn = scenario("My test scenario")
        .doIfOrElse(DURATION > 0) {
            forever(
                exec(steps)
            )
        } {
            exec(steps)
        }

    val setup = setUp(
        scn.inject(
            injectStrategy
        ).protocols(httpProtocol)
    )

    if (DURATION > 0) {
        setup.maxDuration(DURATION minutes)
    }

错误处理

这个是gatling的一大亮点。在压力测试的过程中,无可避免会遇到各种花式错误。比如服务器超时无响应,服务端执行错误返回了非预期结果等等。这些错误如果不进行处理,将会影响后续测试。

比如后续所有链接请求都依赖于登录成功,一旦登录失败,后续请求将无任何意义,而且会影响到最终汇总的测试结果。

gatling可以通过check指令检测URL的返回结果是否符合预期(如返回的HTTP code,返回的内容是否包含预期的内容等等)。通过tryMax, doIf等指令进行失败重试以及处理链接之间的依赖问题。

更多关于失败处理可以参考: http://gatling.io/docs/2.2.3/advanced_tutorial.html#step-05-check-and-failure-management

比如一个简单的登录请求的DSL:

  val login = tryMax(MAX_RETRY) {
    pause(PAUSE_BEFORE_RETRY)
      .exec(http("登录系统")
        .post("/login")
        .formParam("code", "${code}")
        .headers(jwtRequestHeader)
        .check(status.is(200),
          jsonPath("$.token").find.saveAs("token")))
  }

  val brownse = doIf("${token.exists()}") {
    exec(
      // other steps
    )
  }

登录成功会返回一个JSON,包含有token属性,将token存储于session(这个session指gatling的session,作用是存储每个虚拟用户各自的属性,并不是服务器端的session),用于以后的登录请求。通过check期望返回200 OK,并且期望返回一个token属性。

由于后续的请求都必须依赖于token属性存在,因此使用doIf来确保这个依赖关系成立,遇到登录失败时将不会继续向下请求。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,711评论 5 468
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,932评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,770评论 0 330
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,799评论 1 271
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,697评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,069评论 1 276
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,535评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,200评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,353评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,290评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,331评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,020评论 3 315
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,610评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,694评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,927评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,330评论 2 346
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,904评论 2 341

推荐阅读更多精彩内容