一文搞懂Python Unittest测试方法执行顺序

Posted 软件测试君

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了一文搞懂Python Unittest测试方法执行顺序相关的知识,希望对你有一定的参考价值。

Unittest

unittest大家应该都不陌生。它作为一款博主在5-6年前最常用的单元测试框架,现在正被pytest,nose慢慢蚕食。

渐渐地,看到大家更多的讨论的内容从unittest+htmlTestRunner变为pytest+allure2等后起之秀。

不禁感慨,终究是自己落伍了,跟不上时代的大潮了。

回到主题

感慨完了,回到正文。虽然unittest正在慢慢被放弃,但是它仍然是一款很全面的测试框架。

今天在群里看到有个群友的一番言论,激起了我的一番回忆。

自己以前是知道unittest的执行顺序并不是按照编写test方法的顺序执行,而是按照字典序执行的。但遗憾的是我都是投机取巧去解决的问题(后面会讲)。

下面我们就来探讨下unittest类的test方法的执行顺序问题。

源码初窥

研究一下源码(unittest.TestLoader)可以发现,在加载一个class下面的test方法的时候,原生Loader进行了排序,并且根据functools.cmp_to_key方法对测试方法列表进行了排序。


我们知道,unittest是不需要我们指定对应的方法,说白了,它是从类里面自动获取到咱们的方法,并约定了以test开头的方法都会被视为测试方法。

查询一下self.sortTestMethodsUsing(这个是一个排序的方式)。

可以看到这个比较方法写的很明确了,如果x < y那么返回-1,x = y则返回0,x > y返回1。

其实大家可能不知道Python里面的字符串也是可以比较的,在此必须说明一下字典序。我们来看看这个例子:

a = "abc"
b = "abcd"
c = "abce"
print(a > b)
print(b > c)

猜猜看执行结果,很显然,字典序的比较,是按A-Z的顺序来比较的,如果前缀一样但长度不一样,那么长度长的那个,字典序靠后。

了解了字典序以后,我们就不难知道,在unittest里面它寻找case的过程可以这样简化:

  • 找到对应类下面以test开头的测试方法

  • 对他们进行字典序排序

  • 依次执行

    这样就不难解释为什么我们有时候写的case不按照自己想的顺序来。

回到问题的本质

搞清楚为什么用例会乱,那就想到对应的解决方案。由于修改源码是不太合适的,那我们有2个策略去达成目的。

比如我有多个test方法:

class Testcase(unittest.TestCase):

    def setUp(self) -> None:
        pass

    def test_1(self):
        print("执行第一个")

    def test_2(self):
        print("第二个")

    def test_3(self):
        print("第三个")

    def test_10(self):
        print("第四个")

    def test_11(self):
        print("第五个")

    def tearDown(self) -> None:
        pass
        
if __name__ == "__main__":
    unittest.main()

执行起来,按照字典序,其实是1 10 11 2 3的顺序。

1. 以字典序的方式编写test方法

我们可以手动修改test方法的名称,这也是我早前的处理方式。也就是说把想要先执行的case字典序排到前面:

class Testcase(unittest.TestCase):

    def setUp(self) -> None:
        pass

    def test_0_1(self):
        print("执行第一个")

    def test_0_2(self):
        print("第二个")

    def test_0_3(self):
        print("第三个")

    def test_1_0(self):
        print("第四个")

    def test_1_1(self):
        print("第五个")

    def tearDown(self) -> None:
        pass

我们可以把数字按位数拆开,个位数就把10位补0,这样就能达到效果,如果会写100个case,我们就需要补2个0,比如0_0_1,当然一个文件里面也不会有太多case。

如果遇到test_login这种怎么办呢,不是数字结尾的方法。

其实是一样的,可以写成test_数字_业务的模式。番货写了一个装饰器专门解决这样的问题,大家可以去参考下。

2. 回归本质,从根本解决问题

方案1用了番货的装饰器,好是好,但是改变了方法本身的名称,我们其实可以针对他的排序方式入手,按照我们编写case的顺序排序测试方法,就能达到想要的目的。

说说思路:

  1. 手写一个loader继承自TestLoader类,改写里面的排序方法
  2. 在unittest运行的时候传入这个新的loader

来看看完整代码,注释里面写的很完善了。

import unittest


class MyTestLoader(unittest.TestLoader):
    def getTestCaseNames(self, testcase_class):
        # 调用父类的获取“测试方法”函数
        test_names = super().getTestCaseNames(testcase_class)
        # 拿到测试方法list
        testcase_methods = list(testcase_class.__dict__.keys())
        # 根据list的索引对testcase_methods进行排序
        test_names.sort(key=testcase_methods.index)
        # 返回测试方法名称
        return test_names


class Testcase(unittest.TestCase):

    def setUp(self) -> None:
        pass

    def test_1(self):
        print("执行第一个")

    def test_2(self):
        print("第二个")

    def test_3(self):
        print("第三个")

    def test_10(self):
        print("第四个")

    def test_11(self):
        print("第五个")

    def tearDown(self) -> None:
        pass


if __name__ == "__main__":
    unittest.main(testLoader=MyTestLoader())


执行了一下还是不对,是不是哪里出了什么问题呢?

是因为pycharm有一种默认的unittest的调试方法,我们要改成普通的方法去执行。



试试用控制台执行:

今天的内容就讲到这里了,看懂的记得给个赞哦~

最后: 可以关注公众号:伤心的辣条 ! 进去有许多资料共享!资料都是面试时面试官必问的知识点,也包括了很多测试行业常见知识,其中包括了有基础知识、Linux必备、Shell、互联网程序原理、mysql数据库、抓包工具专题、接口测试工具、测试进阶-Python编程、Web自动化测试、APP自动化测试、接口自动化测试、测试高级持续集成、测试架构开发测试框架、性能测试、安全测试等。

如果我的博客对你有帮助、如果你喜欢我的博客内容,请 “点赞” “评论” “收藏” 一键三连哦!推荐软件测试交流学习群:914172719 里面会分享一些资深架构师录制的视频录像


好文推荐

转行面试,跳槽面试,软件测试人员都必须知道的这几种面试技巧!

面试经:一线城市搬砖!又面软件测试岗,5000就知足了…

面试官:工作三年,还来面初级测试?恐怕你的软件测试工程师的头衔要加双引号…

什么样的人适合从事软件测试工作?

那个准点下班的人,比我先升职了…

测试岗反复跳槽,跳着跳着就跳没了…

一篇文章搞懂unittest单元测试框架

参考技术A

码同学公众号:自动化软件测试

码同学抖音号:小码哥聊软件测试

Python 2.1及以后的版本,将 unittest 作为一个标准模块放入Python开发包中。


01 使用unittest编写测试用例


规则:

unittest的执行结果

02 三个重要概念



03 测试用例执行顺序


unittest默认按照 ASCII码 的顺序加载测试用例(包括测试目录和测试文件、测试类、测试方法),即 它并不是按照测试用例的创建顺序从上到下执行的。

discover() 和 main() 方法的执行顺序是一样的。故想让某个测试文件先执行,可以在命名上加以控制。


如何控制测试用例的执行顺序?


04 执行多个测试用例


unittest.defaultTestLoader.discover() 方法可以从多个文件中查找测试用例。

该类根据各种标准加载测试用例,并将它们返回给测试套件


如果想让 discover() 查找子目录下的测试文件,得将子目录标记为一个python模块(子目录下放 __init__.py 文件)


05 跳过测试和预期失败


执行结果:

以上四个装饰器同样适用于测试类。


06 Setup和Teardown


执行结果如下:

免费领取 码同学软件测试 课程笔记+超多学习资料+完整视频+最新面试题,可以 转发文章 + 私信「码同学666」获取资料哦

07 Web自动化测试


08

Parameterized





Parameterized 是python的一个参数化库,同时 支持unittest、pytest单元测试框架。


09

DDT





Data-Driven Tests 是 针对unittest单元测试框架 设计的扩展库。

安装:

导入:

使用规则:

执行报错如下时,是 因为文件名也为ddt:


10

数据文件的参数化





@file_data() 装饰器中内容为文件名称。支持 json格式 和 yaml格式 。

END

以上是关于一文搞懂Python Unittest测试方法执行顺序的主要内容,如果未能解决你的问题,请参考以下文章

python unittest addCleanup中也加失败截图功能

Python单元测试-Unittest

python+unittest 控制用例的执行顺序

Python基础篇:单元测试unittest

Python基础篇:单元测试unittest

Python基础篇:单元测试unittest