python+appium+pytest自动化测试-跳过测试与预期失败的测试建议收藏
Posted 程序员小濠
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python+appium+pytest自动化测试-跳过测试与预期失败的测试建议收藏相关的知识,希望对你有一定的参考价值。
在我们自动化测试过程中,经常会遇到功能阻塞、功能未实现、环境等一系列外部因素问题导致的一些用例执行不了,这时我们就可以用到跳过skip用例,如果我们注释掉或删除掉,后面还要进行恢复操作。
一、跳过测试类
该方法用于需要跳过的测试类,在测试类前面添加装饰器:@pytest.mark.skip()。
1.skip():被标记的类中所有方法测试用例都会被跳过
import pytest
@pytest.mark.skip()
class TestPhoneLogin:
def test_error_phone_format(self):
assert 1 == 1
def test_error_phone_longer(self):
assert 1 == 1
def test_error_phone_shorter(self):
assert 1 == 1
def test_error_write_verification_code(self):
assert 1 == 1
复制代码
执行结果如下图所示:
2.skip(reason=''):被标记的测试类在执行过程中会直接跳过,结果会显示reason。
import pytest
@pytest.mark.skip(reason='该类不需要执行测试')
class TestPhoneLogin:
def test_error_phone_format(self):
assert 1 == 1
def test_error_phone_longer(self):
assert 1 == 1
def test_error_phone_shorter(self):
assert 1 == 1
def test_error_write_verification_code(self):
assert 1 == 1
复制代码
在执行时使用”pytest -v -rs“,结果才会显示reason。若不添加“-rs“,则只显示跳过的数量(同1),不显示reason。
3.skipif(条件, reason=''):被标记的测试类在满足条件的情况下会跳过,不满足条件的情况下会执行测试类中的测试函数。
a.满足条件:跳过测试类中的所有测试用例。
import pytest
@pytest.mark.skipif(1 == 1, reason='该类不需要执行测试')
class TestPhoneLogin:
def test_error_phone_format(self):
assert 1 == 1
......
复制代码
b.不满足条件:执行测试类中的所有测试用例。测试结果同2
import pytest
@pytest.mark.skipif(1 == 2, reason='该类不需要执行测试')
class TestPhoneLogin:
def test_error_phone_format(self):
assert 1 == 1
......
复制代码
二、跳过测试函数
该方法用于需要跳过的测试用例,在测试用例前面添加装饰器:@pytest.mark.skip()。
1.skip():被标记的测试用例函数在执行过程中会直接跳过。
import pytest
class TestPhoneLogin:
@pytest.mark.skip()
def test_error_phone_format(self):
assert 1 == 1
......
复制代码
结果显示:
2.skip(reason=''):被标记的测试用例函数在执行过程中会直接跳过,结果会显示reason,
在执行时使用”pytest -v -rs“,结果才会显示reason。若不添加“-rs“,则只显示跳过的数量(同1),不显示reason。
import pytest
class TestPhoneLogin:
@pytest.mark.skip(reason='该类不需要执行测试')
def test_error_phone_format(self):
assert 1 == 1
......
复制代码
3.skipif():被标记的测试函数在满足条件的情况下会跳过,不满足条件的情况下会测试函数。有条件地跳过。
a.满足条件:跳过测试类中的所有测试用例。
import pytest
class TestPhoneLogin:
@pytest.mark.skipif(1 == 1, reason='该类不需要执行测试')
def test_error_phone_format(self):
assert 1 == 1
......
复制代码
b.不满足条件:执行测试类中的所有测试用例。测试结果同2
import pytest
class TestPhoneLogin:
@pytest.mark.skipif(1 == 2, reason='该类不需要执行测试')
def test_error_phone_format(self):
assert 1 == 1
......
复制代码
三、skip赋值给变量,可多处
无论是@pytest.mark.skip()标签还是@pytest.mark.skipif()标签,如果你想在多个测试方法上装饰,依次写起来很麻烦的话,你可以选择定义个变量让它等于标签,然后在装饰的时候用该变量代替标签。这种方法,你还可以通过在其他模块中导入的变量的方式,在其他模块中共享标签。
赋值:myskip=pytest.mark.skipif(1==1,reason='skip赋值给变量,可多处调用')
调用:@myskip
import pytest
my_skip = pytest.mark.skipif(1 == 1, reason=**reason='**skip赋值给变量,可多处调用**'**)
class TestPhoneLogin:
@my_skip
def test_error_phone_format(self):
assert 1 == 1
......
复制代码
四、Xfail-期望测试失败
1.xfail
您可以使用xfail标记来指示您期望测试失败。一个常见的用例是当你发现在你的软件中的错误,你编写一个测试文档软件如何应该的行为。在修复该错误之前,该测试当然会失败。为避免测试失败,请将测试标记为xfail。修复错误后,请删除xfail标记并进行回归测试,以确保该错误不会再次发生。
import pytest
class TestPhoneLogin:
@pytest.mark.xfail()
def test_error_phone_format(self):
assert 1 == 2
......
复制代码
拥有xfail标记仍然可以运行测试,但是一旦失败就不会报告回溯。相反,终端报告将在“预期失败”(XFAIL)部分列出该报告。如果测试没有失败,它将报告为“意外通过”(XPASS)。
import pytest
class TestPhoneLogin:
@pytest.mark.xfail()
def test_error_phone_format(self):
assert 1 == 1
......
复制代码
2.strict参数
将strict参数设置为True,即strict=True,若在执行测试用例时结果为xpass,那么设置该参数后会使测试记录为失败,原因是如果您按照xfail预期的实际失败标记了测试。如果它突然通过,也许有人修复了该错误,或者说明测试没有按照您的想法进行。
import pytest
class TestPhoneLogin:
@pytest.mark.xfail(strict=True)
def test_error_phone_format(self):
assert 1 == 1
......
复制代码
虽然测试用例是正确的,但由于设置了strict参数为True,所以在最后执行结果中仍然为Failed。若将strict参数设置为False,那么最后的执行结果为xpass。
3.reason 参数
如果需要说明期望测试失败的理由,可以添加reason参数
import pytest
class TestPhoneLogin:
@pytest.mark.xfail(reason='期望失败的理由')
def test_error_phone_format(self):
assert 1 == 2
......
复制代码
4.raises 参数
如果要更具体地说明测试失败的原因,可以在设置raises 参数。设置该参数后,如果执行失败,则标记为常规Fail,除非是出现raises设置的错误,才会显示xfail。
import pytest
class TestPhoneLogin:
@pytest.mark.xfail(raises=AttributeError)
def test_error_phone_format(self):
assert 1 == 2
最后:【可能给予你帮助】然后下面分享一些我的自学资料,希望可以帮到大家。
这份资料整体是围绕着【软件测试】来进行整理的,主体内容包含:python自动化测试专属视频、Python自动化详细资料、全套面试题等知识内容。对于软件测试的的朋友来说应该是最全面和完整的备战仓库了,这个仓库也陪伴我走过了很多坎坷的路,希望也能帮助到你,全都了解的话,拿个15k的工资还是随随便便的
关注我的微信公众号:【 程序员小濠】免费获取~
加群:175317069,也可以获取,群里有测试大牛分享经验。
最后感谢相遇,感谢缘分,感谢支持,感谢选择,感谢信任。也祝大家可以顺利找到心仪的工作,成功转行软件测试工程师!拿下高薪!
如果我的博客对你有帮助、如果你喜欢我的博客内容,请 “点赞” “评论” “收藏” 一键三连哦!
以上是关于python+appium+pytest自动化测试-跳过测试与预期失败的测试建议收藏的主要内容,如果未能解决你的问题,请参考以下文章
Python+Appium+Pytest+Allure实战APP自动化测试框架,小试牛刀!
app 自动化测试 - 多设备并发 -appium+pytest+ 多线程