python+appium+pytest自动化测试-跳过测试与预期失败的测试建议收藏

Posted 程序员小濠

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python+appium+pytest自动化测试-跳过测试与预期失败的测试建议收藏相关的知识,希望对你有一定的参考价值。

在我们自动化测试过程中,经常会遇到功能阻塞、功能未实现、环境等一系列外部因素问题导致的一些用例执行不了,这时我们就可以用到跳过skip用例,如果我们注释掉或删除掉,后面还要进行恢复操作。

一、跳过测试类

该方法用于需要跳过的测试类,在测试类前面添加装饰器:@pytest.mark.skip()。

1.skip():被标记的类中所有方法测试用例都会被跳过

import pytest

@pytest.mark.skip()
class TestPhoneLogin:
    def test_error_phone_format(self):
        assert 1 == 1

    def test_error_phone_longer(self):
        assert 1 == 1

    def test_error_phone_shorter(self):
        assert 1 == 1

    def test_error_write_verification_code(self):
        assert 1 == 1
复制代码

执行结果如下图所示:

image.png

2.skip(reason=''):被标记的测试类在执行过程中会直接跳过,结果会显示reason。

import pytest

@pytest.mark.skip(reason='该类不需要执行测试')
class TestPhoneLogin:
    def test_error_phone_format(self):
        assert 1 == 1

    def test_error_phone_longer(self):
        assert 1 == 1

    def test_error_phone_shorter(self):
        assert 1 == 1

    def test_error_write_verification_code(self):
        assert 1 == 1
复制代码

在执行时使用”pytest -v -rs“,结果才会显示reason。若不添加“-rs“,则只显示跳过的数量(同1),不显示reason。

image.png

3.skipif(条件, reason=''):被标记的测试类在满足条件的情况下会跳过,不满足条件的情况下会执行测试类中的测试函数。

a.满足条件:跳过测试类中的所有测试用例。

import pytest

@pytest.mark.skipif(1 == 1, reason='该类不需要执行测试')
class TestPhoneLogin:
    def test_error_phone_format(self):
        assert 1 == 1
......
复制代码

b.不满足条件:执行测试类中的所有测试用例。测试结果同2

import pytest

@pytest.mark.skipif(1 == 2, reason='该类不需要执行测试')
class TestPhoneLogin:
    def test_error_phone_format(self):
        assert 1 == 1
......
复制代码

二、跳过测试函数

该方法用于需要跳过的测试用例,在测试用例前面添加装饰器:@pytest.mark.skip()。

1.skip():被标记的测试用例函数在执行过程中会直接跳过。

import pytest

class TestPhoneLogin:
    @pytest.mark.skip()
    def test_error_phone_format(self):
        assert 1 == 1
......
复制代码

结果显示:

image.png

2.skip(reason=''):被标记的测试用例函数在执行过程中会直接跳过,结果会显示reason,

在执行时使用”pytest -v -rs“,结果才会显示reason。若不添加“-rs“,则只显示跳过的数量(同1),不显示reason。

import pytest

class TestPhoneLogin:
    @pytest.mark.skip(reason='该类不需要执行测试')
    def test_error_phone_format(self):
        assert 1 == 1
......
复制代码

image.png

3.skipif():被标记的测试函数在满足条件的情况下会跳过,不满足条件的情况下会测试函数。有条件地跳过。

a.满足条件:跳过测试类中的所有测试用例。

import pytest

class TestPhoneLogin:
    @pytest.mark.skipif(1 == 1, reason='该类不需要执行测试')
    def test_error_phone_format(self):
        assert 1 == 1
......
复制代码

b.不满足条件:执行测试类中的所有测试用例。测试结果同2

import pytest

class TestPhoneLogin:
    @pytest.mark.skipif(1 == 2, reason='该类不需要执行测试')
    def test_error_phone_format(self):
        assert 1 == 1
......
复制代码

三、skip赋值给变量,可多处

无论是@pytest.mark.skip()标签还是@pytest.mark.skipif()标签,如果你想在多个测试方法上装饰,依次写起来很麻烦的话,你可以选择定义个变量让它等于标签,然后在装饰的时候用该变量代替标签。这种方法,你还可以通过在其他模块中导入的变量的方式,在其他模块中共享标签。

赋值:myskip=pytest.mark.skipif(1==1,reason='skip赋值给变量,可多处调用')

调用:@myskip

import pytest

my_skip = pytest.mark.skipif(1 == 1, reason=**reason='**skip赋值给变量,可多处调用**'**)
class TestPhoneLogin:
    @my_skip 
    def test_error_phone_format(self):
        assert 1 == 1
......
复制代码

四、Xfail-期望测试失败

1.xfail

您可以使用xfail标记来指示您期望测试失败。一个常见的用例是当你发现在你的软件中的错误,你编写一个测试文档软件如何应该的行为。在修复该错误之前,该测试当然会失败。为避免测试失败,请将测试标记为xfail。修复错误后,请删除xfail标记并进行回归测试,以确保该错误不会再次发生。

import pytest

class TestPhoneLogin:
    @pytest.mark.xfail()
    def test_error_phone_format(self):
        assert 1 == 2
......
复制代码

image.png

拥有xfail标记仍然可以运行测试,但是一旦失败就不会报告回溯。相反,终端报告将在“预期失败”(XFAIL)部分列出该报告。如果测试没有失败,它将报告为“意外通过”(XPASS)。

import pytest

class TestPhoneLogin:
    @pytest.mark.xfail()
    def test_error_phone_format(self):
        assert 1 == 1
......
复制代码

2.strict参数

将strict参数设置为True,即strict=True,若在执行测试用例时结果为xpass,那么设置该参数后会使测试记录为失败,原因是如果您按照xfail预期的实际失败标记了测试。如果它突然通过,也许有人修复了该错误,或者说明测试没有按照您的想法进行。

import pytest

class TestPhoneLogin:
    @pytest.mark.xfail(strict=True)
    def test_error_phone_format(self):
        assert 1 == 1
......
复制代码

虽然测试用例是正确的,但由于设置了strict参数为True,所以在最后执行结果中仍然为Failed。若将strict参数设置为False,那么最后的执行结果为xpass。

3.reason 参数

如果需要说明期望测试失败的理由,可以添加reason参数

import pytest

class TestPhoneLogin:
    @pytest.mark.xfail(reason='期望失败的理由')
    def test_error_phone_format(self):
        assert 1 == 2
......
复制代码

4.raises 参数

如果要更具体地说明测试失败的原因,可以在设置raises 参数。设置该参数后,如果执行失败,则标记为常规Fail,除非是出现raises设置的错误,才会显示xfail。

import pytest

class TestPhoneLogin:
    @pytest.mark.xfail(raises=AttributeError)
    def test_error_phone_format(self):
        assert 1 == 2

最后:【可能给予你帮助】然后下面分享一些我的自学资料,希望可以帮到大家。

å¨è¿éæå¥å¾çæè¿°

这份资料整体是围绕着【软件测试】来进行整理的,主体内容包含:python自动化测试专属视频、Python自动化详细资料、全套面试题等知识内容。对于软件测试的的朋友来说应该是最全面和完整的备战仓库了,这个仓库也陪伴我走过了很多坎坷的路,希望也能帮助到你,全都了解的话,拿个15k的工资还是随随便便的

关注我的微信公众号:【 程序员小濠】免费获取~

加群:175317069,也可以获取,群里有测试大牛分享经验。

最后感谢相遇,感谢缘分,感谢支持,感谢选择,感谢信任。也祝大家可以顺利找到心仪的工作,成功转行软件测试工程师!拿下高薪!

如果我的博客对你有帮助、如果你喜欢我的博客内容,请 “点赞” “评论” “收藏” 一键三连哦!
 

以上是关于python+appium+pytest自动化测试-跳过测试与预期失败的测试建议收藏的主要内容,如果未能解决你的问题,请参考以下文章

Python+Appium+Pytest+Allure实战APP自动化测试框架,小试牛刀!

app 自动化测试 - 多设备并发 -appium+pytest+ 多线程

python+appium+pytest自动化测试-跳过测试与预期失败的测试建议收藏

python ----> pytest 测试框架

pytest学习

Pytest 可视化测试报告之 Allure