自从学了这套框架,自动化+性能都搞定了

Posted Tester 老baby_银子

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了自从学了这套框架,自动化+性能都搞定了相关的知识,希望对你有一定的参考价值。

框架介绍

1、HttpRunner
是一款面向 HTTP(S) 协议的通用测试框架,只需编写维护一份YAML/JSON脚本,即可实现自动化测试、性能测试、线上监控、持续集成等多种测试需求。

2、Locust
Locust是一款易于使用的分布式用户负载测试工具。它用于对网站(或其他系统)进行负载测试,并确定系统可以处理多少并发用户。HttpRunner 通过复用Locust ,可以在无需对 YAML/JSON 进行任何修改的情况下,直接运行性能测试。

3、 httprunner使用手册
附httprunner中文使用文档地址:https://cn.httprunner.org/

环境安装

1 安装httprunner: pip install httprunner==2.2.5
2 安装har2case: pip install har2case
3 检查安装是否成功:hrun -h/-v;har2case -h/-v
4 安装locust: pip install locustio

新增命令

在 HttpRunner 安装成功后,系统中会新增如下 5 个命令:
1 httprunner: 核心命令
2 hrun: httprunner 的缩写,功能与 httprunner 完全相同
3 locusts: 基于 Locust 实现性能测试
4 har2case: 辅助工具,可将标准通用的 HAR 格式(HTTP Archive)转换为YAML/JSON格式的测试用例

用例生成

(1)利用fiddler/charles对接口数据进行抓包,将结果导出为XX.har文件

(2)将导出的XX.har文件转化为json文件/yaml文件

转化为json文件:har2case  xx.har
转化为yaml文件:har2case  xx.har   -2y/--to-yml

(3) 转化成功后的yaml文件如下:

status_code: 请求的状态码
headers.Content-Type: 将响应头的内容格式做验证
content.msg: 响应内容的关键字作为验证
config: 作为整个测试用例集的全局配置项,包括变量(variables,name)
test: 对应单个测试用例
name 这个test的名字(用例的名称)
request 这个test具体发送http请求的各种信息, 如下:
url 请求的路径 (若config中有定义base_url, 则完整路径是用 base_url + url )
method 请求方法 POST, GET等等
headers: 请求头
请求体: json格式的数据
validate(断言): 完成请求后, 所要进行的验证内容. 所有验证内容均通过该test才算通过,否则失败.

参数化:

testcases:
-
name: call demo_testcase with data 1
testcase: testcases/test_login.yml
parameters:
#      username: ["admin1","admin"]
      -username:
        - ["admin1"]
        - ["admin"]

测试用例(testcase)嵌套testcases

测试用例集是测试用例的无序集合,集合中的测试用例应该都是相互独立,不存在先后依赖关系的。
如果确实存在先后依赖关系怎么办,例如登录功能和下单功能。正确的做法应该是,在下单测试用例的前置步骤中执行登录操作。

- config:
   name:order product
- test:
   name:login
   testcase:testcases/login.yml
- test:
   name:add to cart
   api:api/add_cart.yml
- test:
   name:make order
   api:api/make_order.yml

变量取值:

在测试用例内部,HttpRunner划分了两层变量空间作用域context。

  • config:作为整个测试用例的全局配置项,作用域为整个测试用例;
  • test:测试步骤的变量空间context会继承或覆盖config中的定义的内容;
    • 若某变量在config中定义了,在某test中没有定义,则该test会继承该变量
    • 若某变量在config中和某test中都定义了,则该test中使用自己定义的变量值
  • 各个测试步骤test的变量空间相互独立,互不影响;
  • 如需在多个测试步骤test中传递参数值,则需要使用extract关键字,并且只能从前往后传递

响应头和响应体的提取:

//response headers:
{
   “Content - Type”:"application/json",
   “Content - Length”:69
}
//response body:
{
    “success”:false,
     “person”:{
         "name":{
          “first_name”:"cs",
          “last_name”:"css",
     },
      “age”:29,
      “cities”:["Guangzhou","Shenzhen"]
     }
}

那么对应的字段提取方式就为:

“headers.content-type”=>"application/json"
“headers.content-length”=>69
“body.success"/"content.success"/"text.success=>false

"content.person.name.first_name"=>"cs"
"content.person.age"=>29
"content.person.cities"=>["Guangzhou","Shenzhen"]
"content.person.cities.0"=>"Guangzhou"
"content.person.cities.1"=>"Shenzhen"

可以看出,通过点( . )运算符,我们可以从上往下逐级定位到具体的字段:

  • 当下一级为字典时,通过.key来指定下一级的节点,例如.person,指定了content下的person节点;
  • 当下一级为列表时,通过.index来指定下一级的节点,例如.0,指定了cities下的第一个元素。

提取HTML的内容(正则表达式)

上传文件场景

生成项目文档

1、进入D盘
2、输入命令:hrun --startproject 项目名称
testcases:存放用例
testsuites:存放套件
reports:自动生成报告并放到该目录


3、 进入到目录,查看对应的文件和目录

可以看到生成的3个目录和一个py文件,api debugtalk.py testcases suite

4、将转化好的XX.har文件放置在项目文件夹testcases目录中

5、运行用例
(1) 运行单个用例:指定具体的xx.yml或xx.json文件
hrun 文件路径/hrun 文件路径 --log-level info

(2) 运行多个用例:hrun 文件的testcases目录

(3) 运行testsuites目录:运行testsuites目录中所有的yml用例

参数化:多个参数三种类型参数化

查看报告

在项目文件夹report中,生成了html格式的测试报告,包括log日志记录(包含request and response data)



注意事项:
(1) 对于依赖性强的测试用例,当前测试用例执行失败后,之后用例都将失败,因此无执行必要,遇到失败时不再继续运行后续用例命令如下:

$ hrun filepath/testcase.yml --failfast

(2) 运行日志中查看更详细的响应内容

$ hrun docs/data/demo-quickstart-6.json --log-level debug
hrun xx.yaml --log-level debug


(3) 将运行过程中的中间数据作为日志保存:hrun xx.yaml --log-file xx.log

在这里插入图片描述

接口的性能测试—locusts

1、执行性能测试用例:locusts -f 文件路径(相对路径) --processes
(在 Locust 中需使用多核处理器的能力,–processes 参数,可以一次性启动 1 个 master 和多个 salve。若在 --processes 参数后没有指定具体的数值,则启动的 slave 个数与机器的 CPU 核数相同。)

2、用例运行完成后,在浏览器中输入地址 http://localhost:8089/,可查看到locust页面

  • Number of total users to simulate:并发用户数
  • Hatch rate (users spawned/second):多少秒启动这些并发
  • Host:接口的主机地址

    locustos在执行请求动作

    3、查看性能测试报告:

    (1) 每秒完成的请求数(RPS:Requests Per Second)

    (2)响应时间(Response Times),单位ms

    (3)不同时间的虚拟用户数:稳定值(一定时间后)

    (4)查看cpu并发压力:类似负载均衡–CPU usage(cpu的使用率)

    (5)参数说明
host:http://10.0.10.27:10080
请求路径(name):/api/login


(6)脚本执行结果

从测试结果可以看出,实际上每秒并没有触发10个请求(RPS值不到10),因为在locustfile.py文件里面有个等待机制
min_wait = 1000 最小等待时间1秒
max_wait = 5000 最大等待时间5秒
把max_wait改成1000就可以达到 10 RPS了
locustfile.py
当启动locusts的时候,会在当前目录自动生成一个locustfile.py文件。这个才是locust的脚本文件

使用locust执行locustfile.py脚本文件
locust -f locustfile.py
测试结果 RPS=9.9 接近10

🌻交流学习

最后,为大家奉上我整理的一份包含测试开发入门,基础到进阶自动化的全部系列知识点PDF,还有测试开发学习笔记、面试真题汇总文档、测试求职精选简历的学习资源包。希望对大家有所帮助…… 关注微信公众号【程序员一凡】,获取更多资讯~也可加我好友,大家一起学习交流🤗。

🌻推荐阅读:

💜在简历上写了“精通”后,拥有工作经验的我被面试官问到窒息
💜字节跳动测试岗面试挂在二面,我复盘总结了失败原因,决定再战一次
💜“我转行做测试开发的这一年多,月薪5K变成了24K”,文科女生的自白
💜测试工程师真的可以轻松月收入破万吗?看了这20张图(市场+学习指南),我跪了!

以上是关于自从学了这套框架,自动化+性能都搞定了的主要内容,如果未能解决你的问题,请参考以下文章

自从学了这套框架,自动化+性能都搞定了

自从上了这套调优方案,睡觉真香!!

自从搞定了微服务架构与RPC,我在公司都横着走!

自从学了 Flask,我就铁了心转向了 Django

这套架构经验,价值 300 万!

四个类搞定分层自动化测试框架