Pytest自动化测试 - 必知必会的一些插件-白红宇的个人博客

Pytest自动化测试 - 必知必会的一些插件

发布日期：2021-05-09 04:23:08 浏览次数：19 分类：博客文章

本文共 13293 字，大约阅读时间需要 44 分钟。

Pytest拥有丰富的插件架构，超过800个以上的外部插件和活跃的社区，在PyPI项目中以“ pytest- *”为标识。

本篇将列举github标星超过两百的一些插件进行实战演示。

插件库地址：

1、：用于生成HTML报告

一次完整的测试，测试报告是必不可少的，但是pytest自身的测试结果过于简单，而pytest-html正好可以给你提供一份清晰报告。

安装：

pip install -U pytest-html

用例：

# test_sample.pyimport pytest# import time# 被测功能def add(x, y):    # time.sleep(1)    return x + y# 测试类class TestLearning:    data = [        [3, 4, 7],        [-3, 4, 1],        [3, -4, -1],        [-3, -4, 7],    ]    @pytest.mark.parametrize("data", data)    def test_add(self, data):        assert add(data[0], data[1]) == data[2]

运行：

E:\workspace-py\Pytest>pytest test_sample.py --html=report/index.html========================================================================== test session starts ==========================================================================platform win32 -- Python 3.7.3, pytest-6.0.2, py-1.9.0, pluggy-0.13.0rootdir: E:\workspace-py\Pytestplugins: allure-pytest-2.8.18, cov-2.10.1, html-3.0.0, rerunfailures-9.1.1, xdist-2.1.0collected 4 items                                                                                                                                                        test_sample.py ...F                                                                                                                                                [100%]=============================================================================== FAILURES ================================================================================_____________________________________________________________________ TestLearning.test_add[data3] ______________________________________________________________________self = 
    
     , data = [-3, -4, 7]    @pytest.mark.parametrize("data", data)    def test_add(self, data):>       assert add(data[0], data[1]) == data[2]E       assert -7 == 7E        +  where -7 = add(-3, -4)test_sample.py:20: AssertionError------------------------------------------------- generated html file: file://E:\workspace-py\Pytest\report\index.html --------------------------------------------------======================================================================== short test summary info ========================================================================FAILED test_sample.py::TestLearning::test_add[data3] - assert -7 == 7====================================================================== 1 failed, 3 passed in 0.14s ======================================================================

运行完，会生产一个html文件和 css样式文件夹assets，用浏览器打开html即可查看清晰的测试结果。

后面我将会更新更加清晰美观的测试报告插件：

2、：用于生成覆盖率报告

在做单元测试时，代码覆盖率常常被拿来作为衡量测试好坏的指标，甚至，用代码覆盖率来考核测试任务完成情况。

安装：

pip install -U pytest-cov

运行：

E:\workspace-py\Pytest>pytest --cov=.========================================================================== test session starts ==========================================================================platform win32 -- Python 3.7.3, pytest-6.0.2, py-1.9.0, pluggy-0.13.0rootdir: E:\workspace-py\Pytestplugins: allure-pytest-2.8.18, cov-2.10.1, html-3.0.0, rerunfailures-9.1.1, xdist-2.1.0collected 4 items                                                                                                                                                        test_sample.py ....                                                                                                                                                [100%]----------- coverage: platform win32, python 3.7.3-final-0 -----------Name             Stmts   Miss  Cover------------------------------------conftest.py          5      3    40%test_sample.py       7      0   100%------------------------------------TOTAL               12      3    75%=========================================================================== 4 passed in 0.06s ===========================================================================

3、：实现多线程、多平台执行

通过将测试发送到多个CPU来加速运行，可以使用-n NUMCPUS指定具体CPU数量，或者使用-n auto自动识别CPU数量并全部使用。

安装：

pip install -U pytest-xdist

用例：

# test_sample.pyimport pytestimport time# 被测功能def add(x, y):    time.sleep(3)    return x + y# 测试类class TestAdd:    def test_first(self):        assert add(3, 4) == 7    def test_second(self):        assert add(-3, 4) == 1    def test_three(self):        assert add(3, -4) == -1    def test_four(self):        assert add(-3, -4) == 7

运行：

E:\workspace-py\Pytest>pytest test_sample.py========================================================================== test session starts ==========================================================================platform win32 -- Python 3.7.3, pytest-6.0.2, py-1.9.0, pluggy-0.13.0rootdir: E:\workspace-py\Pytestplugins: allure-pytest-2.8.18, cov-2.10.1, html-3.0.0, rerunfailures-9.1.1, xdist-2.1.0collected 4 items                                                                                                                                                        test_sample.py ....                                                                                                                                                [100%]========================================================================== 4 passed in 12.05s ===========================================================================E:\workspace-py\Pytest>pytest test_sample.py -n auto========================================================================== test session starts ==========================================================================platform win32 -- Python 3.7.3, pytest-6.0.2, py-1.9.0, pluggy-0.13.0rootdir: E:\workspace-py\Pytestplugins: allure-pytest-2.8.18, assume-2.3.3, cov-2.10.1, forked-1.3.0, html-3.0.0, rerunfailures-9.1.1, xdist-2.1.0gw0 [4] / gw1 [4] / gw2 [4] / gw3 [4]....                                                                                                                                                               [100%]=========================================================================== 4 passed in 5.35s ===========================================================================E:\workspace-py\Pytest>pytest test_sample.py -n 2========================================================================== test session starts ==========================================================================platform win32 -- Python 3.7.3, pytest-6.0.2, py-1.9.0, pluggy-0.13.0rootdir: E:\workspace-py\Pytestplugins: allure-pytest-2.8.18, assume-2.3.3, cov-2.10.1, forked-1.3.0, html-3.0.0, rerunfailures-9.1.1, xdist-2.1.0gw0 [4] / gw1 [4]....                                                                                                                                                               [100%]=========================================================================== 4 passed in 7.65s ===========================================================================

上述分别进行了未开多并发、开启4个cpu、开启2个cpu，从运行耗时结果来看，很明显多并发可以大大缩减你的测试用例运行耗时。

4、：实现重新运行失败用例

我们在测试时可能会出现一些间接性故障，比如接口测试遇到网络波动，web测试遇到个别插件刷新不及时等，这时重新运行则可以帮忙我们消除这些故障。

安装：

pip install -U pytest-rerunfailures

运行：

E:\workspace-py\Pytest>pytest test_sample.py --reruns 3========================================================================== test session starts ==========================================================================platform win32 -- Python 3.7.3, pytest-6.0.2, py-1.9.0, pluggy-0.13.0rootdir: E:\workspace-py\Pytestplugins: allure-pytest-2.8.18, cov-2.10.1, html-3.0.0, rerunfailures-9.1.1, xdist-2.1.0collected 4 items                                                                                                                                                        test_sample.py ...R                                                                                                                                                [100%]R [100%]R [100%]F [100%]=============================================================================== FAILURES ================================================================================___________________________________________________________________________ TestAdd.test_four ___________________________________________________________________________self = 
    
         def test_four(self):>       assert add(-3, -4) == 7E       assert -7 == 7E        +  where -7 = add(-3, -4)test_sample.py:22: AssertionError======================================================================== short test summary info ========================================================================FAILED test_sample.py::TestAdd::test_four - assert -7 == 7================================================================= 1 failed, 3 passed, 3 rerun in 0.20s ==================================================================

如果你想设定重试间隔，可以使用 --rerun-delay 参数指定延迟时长（单位秒）；

如果你想重新运行指定错误，可以使用 --only-rerun 参数指定正则表达式匹配，并且可以使用多次来匹配多个。

pytest --reruns 5 --reruns-delay 1 --only-rerun AssertionError --only-rerun ValueError

如果你只想标记单个测试失败时自动重新运行，可以添加 pytest.mark.flaky() 并指定重试次数以及延迟间隔。

@pytest.mark.flaky(reruns=5, reruns_delay=2)def test_example():    import random    assert random.choice([True, False])

5、：实现随机排序测试

测试中的随机性非常越大越容易发现测试本身中隐藏的缺陷，并为你的系统提供更多的覆盖范围。

安装：

pip install -U pytest-randomly

运行：

E:\workspace-py\Pytest>pytest test_sample.py========================================================================== test session starts ==========================================================================platform win32 -- Python 3.7.3, pytest-6.0.2, py-1.9.0, pluggy-0.13.0Using --randomly-seed=3687888105rootdir: E:\workspace-py\Pytestplugins: allure-pytest-2.8.18, cov-2.10.1, html-3.0.0, randomly-3.5.0, rerunfailures-9.1.1, xdist-2.1.0collected 4 items                                                                                                                                                        test_sample.py F...                                                                                                                                                [100%]=============================================================================== FAILURES ================================================================================___________________________________________________________________________ TestAdd.test_four ___________________________________________________________________________self = 
    
         def test_four(self):>       assert add(-3, -4) == 7E       assert -7 == 7E        +  where -7 = add(-3, -4)test_sample.py:22: AssertionError======================================================================== short test summary info ========================================================================FAILED test_sample.py::TestAdd::test_four - assert -7 == 7====================================================================== 1 failed, 3 passed in 0.13s ======================================================================E:\workspace-py\Pytest>pytest test_sample.py========================================================================== test session starts ==========================================================================platform win32 -- Python 3.7.3, pytest-6.0.2, py-1.9.0, pluggy-0.13.0Using --randomly-seed=3064422675rootdir: E:\workspace-py\Pytestplugins: allure-pytest-2.8.18, assume-2.3.3, cov-2.10.1, forked-1.3.0, html-3.0.0, randomly-3.5.0, rerunfailures-9.1.1, xdist-2.1.0collected 4 items                                                                                                                                                        test_sample.py ...F                                                                                                                                                [100%]=============================================================================== FAILURES ================================================================================___________________________________________________________________________ TestAdd.test_four ___________________________________________________________________________self = 
     
          def test_four(self):>       assert add(-3, -4) == 7E       assert -7 == 7E        +  where -7 = add(-3, -4)test_sample.py:22: AssertionError======================================================================== short test summary info ========================================================================FAILED test_sample.py::TestAdd::test_four - assert -7 == 7====================================================================== 1 failed, 3 passed in 0.12s ======================================================================

这功能默认情况下处于启用状态，但可以通过标志禁用（假如你并不需要这个模块，建议就不要安装）。

pytest -p no:randomly

如果你想指定随机顺序，可以通过 --randomly-send 参数来指定，也可以使用 last 值来指定沿用上次的运行顺序。

pytest --randomly-seed=4321

pytest --randomly-seed=last

6、其他活跃的插件

还有一些其他功能性比较活跃的、一些专门为个别框架所定制的、以及为了兼容其他测试框架，这里暂不做演示，我就简单的做个列举：

：用于测试Django应用程序（Python Web框架）。

：用于测试Flask应用程序（Python Web框架）。

：兼容Splinter Web自动化测试工具。

：兼容Selenium Web自动化测试工具。

：测试由Salt，Ansible，Puppet， Chef等管理工具配置的服务器的实际状态。

：提供一个mock固件，创建虚拟的对象来实现测试中个别依赖点。

：结合factoryboy工具用于生成各式各样的数据。

：提供为PyQt5和PySide2应用程序编写测试。

：用于使用pytest测试异步代码。

：实现了Gherkin语言的子集，以实现自动化项目需求测试并促进行为驱动的开发。

：为pytest提供一套快捷CLI工具。

：可以自动选择并重新执行仅受最近更改影响的测试。

：用于每个测试允许多次失败。

：用于测试用例的排序功能。

：可立即显示失败和错误并显示进度条。

/：可以重复(可指定次数)执行单个或多个测试。

作者：

出处：

本文版权归作者和博客园共有，欢迎转载，但未经作者同意必须保留此段声明，且在文章页面明显位置给出原文连接，否则保留追究法律责任的权利。

上一篇：Pytest自动化测试 - 完美结合Allure

下一篇：Pytest自动化测试 - 简易教程

发表评论

关于作者

喝酒易醉，品茶养心，人生如梦，品茶悟道，何以解忧？唯有杜康！

-- 愿君每日到此一游！

插件库地址：

1、：用于生成HTML报告

安装：

用例：

运行：

后面我将会更新更加清晰美观的测试报告插件：

2、：用于生成覆盖率报告

安装：

运行：

3、：实现多线程、多平台执行

安装：

用例：

运行：

4、：实现重新运行失败用例

安装：

运行：

5、：实现随机排序测试

安装：

运行：

6、其他活跃的插件

：用于测试Django应用程序（Python Web框架）。

：用于测试Flask应用程序（Python Web框架）。

：兼容Splinter Web自动化测试工具。

：兼容Selenium Web自动化测试工具。

：测试由Salt，Ansible，Puppet， Chef等管理工具配置的服务器的实际状态。

：提供一个mock固件，创建虚拟的对象来实现测试中个别依赖点。

：结合factoryboy工具用于生成各式各样的数据。

：提供为PyQt5和PySide2应用程序编写测试。

：用于使用pytest测试异步代码。

：实现了Gherkin语言的子集，以实现自动化项目需求测试并促进行为驱动的开发。

：为pytest提供一套快捷CLI工具。

：可以自动选择并重新执行仅受最近更改影响的测试。

：用于每个测试允许多次失败。

：用于测试用例的排序功能。

：可立即显示失败和错误并显示进度条。

/：可以重复(可指定次数)执行单个或多个测试。

发表评论

最新留言

关于作者

推荐文章