分布式测试插件 pytest-xdist 使用详解

目录

使用背景:

使用前提:

使用快速入门:

使用小结:


使用背景:

  1. 大型测试套件:当你的测试套件非常庞大,包含了大量的测试用例时,pytest-xdist可以通过并行执行来加速整体的测试过程。它利用多个进程或计算机的计算资源,可以显著减少测试执行的时间。

  2. 高计算资源需求:某些测试场景可能需要大量的计算资源,例如进行复杂的计算、模拟或数据处理。在这种情况下,使用pytest-xdist可以将测试任务分发给多个进程或计算机,以充分利用计算资源,加快测试速度。

  3. 并行测试需求:当你需要并行执行多个测试用例时,pytest-xdist非常有用。它可以将测试用例分发给多个进程或计算机,同时运行多个测试,从而提高整体的测试效率。

使用前提:

  1. 测试用例独立性:确保测试用例之间相互独立,不会相互干扰或依赖。由于pytest-xdist并行执行测试用例,测试用例之间的顺序是不确定的。因此,每个测试用例应该独立于其他测试用例,能够以任意顺序执行而不会影响结果。

  2. 数据共享和同步:如果测试用例之间需要共享数据或进行某种形式的同步操作,确保在使用pytest-xdist时正确处理这些情况。例如,可以使用共享的数据库或文件系统来存储和访问共享数据,或者通过网络进行通信来实现进程或计算机之间的同步。

  3. 并发问题:并行执行测试用例可能会引发并发问题,例如资源竞争、死锁等。在设计测试用例时,要特别注意并发问题,并采取适当的措施来避免或解决这些问题,例如使用互斥锁、线程安全的数据结构等。

  4. 结果收集和报告:由于测试用例在多个进程或计算机上执行,因此结果收集和报告的过程可能会有所不同。确保使用适当的机制来收集和汇总测试结果,并生成全面和准确的测试报告。

  5.  资源合理的分配使用:并行执行测试用例可能会占用大量的计算资源和内存。确保在使用pytest-xdist时,计算资源和内存的分配是合理的,以避免资源耗尽或系统崩溃

使用快速入门:

  1. 插件安装

pip3 install pytest-xdist -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com

      2.  编写耗时大型用例

# content of test_example.pyimport pytest@pytest.mark.parametrize('input', [1, 2, 3, 4, 5])
def test_square(input):result = input ** 2assert result == input * input

定义了一个名为test_square的测试用例。它使用@pytest.mark.parametrize装饰器来指定多个输入值进行测试。在这个例子中,我们提供了输入值1、2、3、4和5

  3. 使用pytest-xdist进行分布式测试,需要在命令行中指定使用的进程数。例如,要使用4个进程进行分布式测试,可以运行以下命令:

pytest -n 4 test_example.py

  -n参数指定要使用的进程数。在这个例子中,我们使用了4个进程。当你运行上述命令时,pytest-xdist会将测试用例分发给4个进程,并在这些进程上并行执行测试。每个进程将负责执行一部分测试用例。

  4. pytest-xdist不仅可以在多进程上运行测试,还可以在多个计算机上进行分布式测试

    4.1 安装pytest-xdist插件:首先,确保在所有计算机上都安装了pytest-xdist插件。可以使用pip或conda等包管理工具进行安装。

    4.2 配置主机和从机:选择一台计算机作为主机,其他计算机作为从机。在主机和从机上创建一个配置文件(例如pytest.inipyproject.toml),并设置以下参数:

# pytest.ini[pytest]
addopts = -n auto

    4.3 启动从机:在每台从机上运行以下命令,使其准备好接收测试任务:

pytest --dist=loadscope

    4.4 启动主机:在主机上运行以下命令,开始分布式测试:

pytest test_example.py

使用小结:

  1. 并不是并发进程数越多好,-n值越大越好,因为pytest-xdist的并发数量取决于多个因素,如CPU核数(主要),内存,io等计算资源。

  2. 测试用例很少,计算并不复杂,徒增繁琐。

  3.  测试套件很大时,合理利用pytest-xdist的并发数量将会节约约近一半的时间。

  4. pytest-xdist默认是无序执行的,可以通过 --dist 参数来控制顺序


以下是我收集到的比较好的学习教程资源,虽然不是什么很值钱的东西,如果你刚好需要,可以评论区,留言【777】直接拿走就好了

各位想获取资料的朋友请点赞 + 评论 + 收藏,三连!

三连之后我会在评论区挨个私信发给你们~

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/33093.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

如何使用ChatGPT设计LOGO,只需知道品牌名字就能完成傻瓜式操作

​独特且引人注目的LOGO对于引导用户/消费者快速识别并与你建立联系至关重要。然而,聘请专业的设计师来创建个性化LOGO可能非常昂贵。这里可以使用使用ChatGPT。[1] 你只需要: 准备好公司名称; 能用ChatGPT,用来给BingChat喂log…

学习总结(TAT)

好久都没交总结了,今天把之前的思路和错误整理了一下: 在服务器和客户端两侧,不可以同时先初始化获取输入流,否则会造成堵塞,同时为这位作者大大打call: (3条消息) 关于Java Socket和创建输入输出流的几点…

一、安全世界观

文章目录 1、 Web安全简史1.1 中国黑客简史1.2 黑客技术的发展历程1.3 web安全的兴起 2、黑帽子、白帽子3、安全的本质4、安全三要素5、如何实施安全评估5.1 资产等级划分5.2 威胁分析5.3 风险分析5.4 设计安全方案 6、白帽子兵法6.1 Secure By Default6.2 纵深防御原则6.3 数据…

学习51单片机怎么开始?

学习的过程不总是先打好基础,然后再盖上层建筑,尤其是实践性的、工程性很强的东西。如果你一定要先全面打好基础,再学习单片机,我觉得你一定学不好,因为你的基础永远打不好,因为基础太庞大了,基…

Oracle 知识篇+会话级全局临时表在不同连接模式中的表现

标签:会话级临时表、全局临时表、幻读释义:Oracle 全局临时表又叫GTT ★ 结论 ✔ 专用服务器模式:不同应用会话只能访问自己的数据 ✔ 共享服务器模式:不同应用会话只能访问自己的数据 ✔ 数据库驻留连接池模式:不同应…

探索数据之美:初步学习 Python 柱状图绘制

文章目录 一 基础柱状图1.1 创建简单柱状图1.2 反转x和y轴1.3 数值标签在右侧1.4 演示结果 二 基础时间线柱状图2.1 创建时间线2.2 时间线主题设置取值表2.3 演示结果 三 GDP动态柱状图绘制3.1 需求分析3.2 数据文件内容3.3 列表排序方法3.4 参考代码3.5 运行结果 一 基础柱状图…

Nodejs安装及环境变量配置(修改全局安装依赖工具包和缓存文件夹及npm镜像源)

本机环境:win11家庭中文版 一、官网下载 二、安装 三、查看nodejs及npm版本号 1、查看node版本号 node -v 2、查看NPM版本号(安装nodejs时已自动安装npm) npm -v 四、配置npm全局下载工具包和缓存目录 1、查看安装目录 在本目录下创建no…

瓴羊发布All in One 产品,零售SaaS的尽头是DaaS?

“打破烟囱、化繁为简,让丰富的能力、数据和智能All in One”,这是瓴羊新发布的产品瓴羊One承担的使命,也意味着瓴羊DaaS事业迈入了一个新阶段。 成立伊始,瓴羊就打出了“Not SaaS,But DaaS”旗号,将自己的…

小程序裂变怎么做?小程序裂变机制有哪些?

做了小程序就等于“生意上门”?其实并不是这样。小程序跟流量平台较为明显的区别就在于小程序并非“自带流量”,而是需要企业利用自己的营销推广能力来建立引流渠道,从而完成用户的拉新和留存、转化。因此,想要用小程序来增加自己…

[虚幻引擎] UE DTBase64 插件说明 使用蓝图对字符串或文件进行Base64加密解密

本插件可以在虚幻引擎中使用蓝图对字符串,字节数组,文件进行Base64的加密和解密。 目录 1. 节点说明 String To Base64 Base64 To String Binary To Base64 Base64 To Binary File To Base64 Base64 To File 2. 案例演示 3. 插件下载 1. 节点说…

自定义element-plus的弹框样式

项目中弹框使用频繁,需要统一样式风格,此组件可以自定义弹框的头部样式和内容 一、文件结构如下: 二、自定义myDialog组件 需求: 1.自定义弹框头部背景样式和文字 2.自定义弹框内容 3.基本业务流程框架 components/myDialog/index.vue完整代码: &…

采用pycharm在虚拟环境使用pyinstaller打包python程序

一年多以前,我写过一篇博客描述了如何虚拟环境打包,这一次有所不同,直接用IDE pycharm构成虚拟环境并运行pyinstaller打包 之前的博文: 虚拟环境venu使用pyinstaller打包python程序_伊玛目的门徒的博客-CSDN博客 第一步&#xf…

山西电力市场日前价格预测【2023-08-12】

日前价格预测 预测明日(2023-08-12)山西电力市场全天平均日前电价为330.52元/MWh。其中,最高日前电价为387.00元/MWh,预计出现在19: 45。最低日前电价为278.05元/MWh,预计出现在13: 00。 价差方向预测 1: 实…

伯俊ERP对接打通金蝶云星空表头表体组合查询接口与采购订单新增接口

伯俊ERP对接打通金蝶云星空表头表体组合查询接口与采购订单新增接口 数据源平台:伯俊ERP 伯俊科技,依托在企业信息化建设方面的领先技术与实践积累,致力于帮助企业实现全渠道一盘货。伯俊提供数字经营的咨询与系统实施,助力企业信息化升级、加…

vue3使用pinia和pinia-plugin-persist做持久化存储

插件和版本 1、安装依赖 npm i pinia // 安装 pinia npm i pinia-plugin-persist // 安装持久化存储插件2、main.js引入 import App from ./App.vue const app createApp(App)//pinia import { createPinia } from pinia import piniaPersist from pinia-plugin-persist //持…

tomcat多实例与动静分离

实验:在一台虚拟机上配置多台tomcat 1.配置 tomcat 环境变量 vim /etc/profile.d/tomcat.sh source /etc/profile.d/tomcat.sh 2.修改 tomcat2 中的 server.xml 文件,要求各 tomcat 实例配置不能有重复的端口号 vim /usr/local/tomcat/tomcat2/conf/…

CAP理论与MongoDB一致性,可用性的一些思考

正文 大约在五六年前,第一次接触到了当时已经是hot topic的NoSql。不过那个时候学的用的都是mysql,Nosql对于我而言还是新事物,并没有真正使用,只是不明觉厉。但是印象深刻的是这么一张图片(后来google到图片来自这里&…

【密码学】密码棒密码

密码棒密码 大约在公元前700年,古希腊军队使用一种叫做scytale的圆木棍来进行保密通信。其使用方法是这样的:把长带子状羊皮纸缠绕在圆木棍上,然后在上面写字;解下羊皮纸后,上面只有杂乱无章的字符,只有再次以同样的方式缠绕到同样粗细的棍子上,才能看出所写的内容。快速且不容…

Git全栈体系(六)

第十章 自建代码托管平台-GitLab 一、GitLab 简介 GitLab 是由 GitLabInc.开发,使用 MIT 许可证的基于网络的 Git 仓库管理工具,且具有 wiki 和 issue 跟踪功能。使用 Git 作为代码管理工具,并在此基础上搭建起来的 web 服务。GitLab 由乌克…

Python-OpenCV中的图像处理-傅里叶变换

Python-OpenCV中的图像处理-傅里叶变换 傅里叶变换Numpy中的傅里叶变换Numpy中的傅里叶逆变换OpenCV中的傅里叶变换OpenCV中的傅里叶逆变换 DFT的性能优化不同滤波算子傅里叶变换对比 傅里叶变换 傅里叶变换经常被用来分析不同滤波器的频率特性。我们可以使用 2D 离散傅里叶变…