51Testing软件测试论坛

标题: Pytest中如何解决测试用例的依赖执行问题 [打印本页]

作者: lsekfe 时间: 2020-10-19 10:41
标题: Pytest中如何解决测试用例的依赖执行问题
需求场景:如果A用例执行失败, 那么B用例直接跳过不执行
　　遇到问题:如果pytest默认先执行B用例,再执行A用例, 那么在使用pytest-dependency插件后, B用例永远都不会被执行
　　解决思路: 用pytest-ordering插件来强制指定用例执行顺序; 用pytest-dependency插件设置用例依赖关系
　　一. 安装pytest插件

# 改变测试用例的执行顺序
　　pip install pytest-ordering
　　# 管理测试用例的依赖关系
　　pip install pytest-dependency

复制代码

　二. pytest-ordering插件的使用
　　2.1 代码示例:

　# test_1.py文件
　　import pytest
　　class Test1():
　　　　
　　 @pytest.mark.run(order=5)
　　 def test_1(self): pass
　　 @pytest.mark.run(order=0)
　　 def test_2(self): pass
　　 @pytest.mark.run(order=1)
　　 def test_3(self): pass
　　 @pytest.mark.run(order=-1)
　　 def test_4(self): pass
　　 @pytest.mark.run(order=-5)
　　 def test_5(self): pass
　　 def test_6(self): pass
　　if __name__ == '__main__':
　　 pytest.main(["-v", "-s", "test_1.py"])

复制代码

2.2 执行结果:
　　order为非负整数(值越小优先级越高) > 无排序装饰器 > order为负整数(负的值越大优先级越高)
　　0(test_2) > 1(test_3) > 5(test_1) > 无(test_6) > -5(test_5) > -1(test_4)

　collected 6 items
　　test_1.py::Test1::test_2 PASSED
　　test_1.py::Test1::test_3 PASSED
　　test_1.py::Test1::test_1 PASSED
　　test_1.py::Test1::test_6 PASSED
　　test_1.py::Test1::test_5 PASSED
　　test_1.py::Test1::test_4 PASSED
　　============================== 6 passed in 0.04s ==============================

复制代码

2.3 分析小结:
　　1) 排序装饰器@pytest.mark.run(order=1)既可以装饰函数,也可以装饰类
　　2) 用例优先级: order为负整数 < 无排序装饰器 < order为非负整数
　　3) order为负整数时,值越小(负的值越大),优先级越高
　　4) order为非负整数时,值越小, 优先级越高
　　三. pytest-dependency插件的使用
　　3.1 test_1用例先执行, test_2用例后执行
　　3.1.1 代码示例:

　# test_21
　　import pytest
　　class Test1():
　　 @pytest.mark.dependency(name="a")
　　 def test_1(self):
　　 assert True
　　 @pytest.mark.dependency(depends=['a']) # 明确指出test_2用例依赖于test_1用例
　　 def test_2(self):
　　 assert True
　　if __name__ == '__main__':
　　 pytest.main(["-v", "-s", "test_21.py"])

复制代码

3.1.2 执行结果:

test_1.py::Test1::test_1 PASSED
　　test_1.py::Test1::test_2 PASSED
　　============================== 2 passed in 0.04s ==============================

复制代码

3.1.3 分析小结
　　1) 如果test_1用例执行失败,则test_2用例会直接跳过执行
　　2) 通过name="a"来给test_1用例定义一个别名,方便其他用例来指定依赖
　　3.2 test_2用例先执行, test_1用例后执行
　　3.2.1 代码示例

　import pytest
　　class Test1():
　　 @pytest.mark.dependency(depends=['b'])
　　 def test_1(self):
　　 assert True
　　 @pytest.mark.dependency(name="b")
　　 def test_2(self):
　　 assert True
　　if __name__ == '__main__':
　　 pytest.main(["-v", "-s", "test_1.py"])

复制代码

　3.2.2 执行结果:

test_1.py::Test1::test_1 SKIPPED
　　test_1.py::Test1::test_2 PASSED
　　======================== 1 passed, 1 skipped in 0.05s =========================

复制代码

3.2.3 问题分析:
　　1) pytest默认会先执行test_1用例, 然后执行test_2用例
　　2) 上述代码的意图是想让test_2用例作为test_1用例的前置用例, 但是在pytest默认情况下,先执行了test_1用例,最后导致test_1用例跳过
　　3) 若想解决上述问题,需要使用pytest-ordering来指定用例的执行顺序, 让test_2先执行
　　3.2.4 改进代码:

import pytest
　　class Test1():
　　 @pytest.mark.dependency(depends=['b'])
　　 def test_1(self):
　　 assert True
　　 @pytest.mark.run(order=0)
　　 @pytest.mark.dependency(name="b")
　　 def test_2(self):
　　 assert True
　　if __name__ == '__main__':
　　 pytest.main(["-v", "-s", "test_1.py"])

复制代码

3.4.5 分析小结:
　　1) 通过@pytest.mark.run(order=0)装饰器, 让test_2用例优先于test_1用例执行
　　2) 通过@pytest.mark.dependency装饰器来定义用例的依赖关系
　　3.3 跨模块或文件来指定用例依赖
　　3.3.1 代码示例:

# test_31.py文件
　　import pytest
　　@pytest.mark.run(order=-5)
　　@pytest.mark.dependency(depends=["test_32.py::test_32"], scope='session')
　　def test_31():
　　 assert True
　　# test_32.py文件
　　import pytest
　　@pytest.mark.run(order=-10)
　　@pytest.mark.dependency()
　　def test_32():
　　 assert True
　　# run.py文件
　　import pytest
　　pytest.main(["-v", "-s", "."])

复制代码

　3.3.2 执行结果:

test_32.py::test_32 PASSED
　　test_31.py::test_31 PASSED
　　============================== 2 passed in 0.04s ==============================

复制代码

3.3.3 分析小结:
　　1) 被@pytest.mark.run(order=-10)修饰的用例执行优先级高于被@pytest.mark.run(order=-5)修饰的用例
　　2) @pytest.mark.dependency装饰器的depends值为一个nodeid列表. e.g:形如test_32.py::test_32就是一个nodeid
　　3) 如果需要跨文件来指定依赖用例, 可以设置@pytest.mark.dependency的scope参数为"session"

作者: Miss_love 时间: 2020-10-19 11:12
666666

欢迎光临 51Testing软件测试论坛 (http://bbs.51testing.com/)