pytorch实现数据增强的原理

pytorch的数据增强功能并非是事先对整个数据集进行数据增强处理,而是在从dataloader中获取训练数据的时候(获取每个epoch的时候)才进行数据增强。

举个例子,如下面的数据增强代码:

transform_train = transforms.Compose([transforms.RandomCrop(32, padding=4),  # 对图像四周各填充4个0像素,然后随机裁剪成32*32transforms.RandomHorizontalFlip(),  # 按0.5的概率水平翻转图片transforms.ToTensor(),transforms.Normalize((0.4914, 0.4822, 0.4465), (0.2023, 0.1994, 0.2010)),
])

假设数据集一共有100张图片,pytorch并非对数据集中的每张图片进行随机裁剪,再随机翻转,将数据集扩增到200张,然后用这固定的200张图来训练网络,这是错误的理解。

正确的理解应该是dataloader在每次生成epoch时才对数据集进行以上数据增强操作。由于数据增强有些操作是具有随机性的(例如上面的随机裁剪和随机翻转),导致每次epoch产生的数据都不相同,例如同一张图片在有的epoch翻转了,在有的epoch没有翻转,或者同一张图片在各个epoch裁剪的位置不一样,所以每次用来训练的数据不相同,到达了数据增强的目的。

当然,有些数据增强操作不具有随机性,如CenterCrop,每次都是对图片中间位置进行裁剪,不管在哪个epoch,裁剪出来的图片都一样。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/491187.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

【全文】Libra回应质疑:Facebook将放弃控制权,不与主权货币竞争

Facebook的全球数字货币计划Libra遭到多方抨击质疑之后,将于明日直面国会听证会。目前Facebook能否发行数字货币,悬于监管机构的许可决定,而这也会成为数字货币命运的一个重要转折点。Libra项目的负责人David Marcus提前发布了他的证词。硅星…

Git从零教你入门(4):Git服务之 gogs部署安装

Git从零入门系列4:先看上一篇文章:http://www.51testing.com/index.php?uid-497177-action-viewspace-itemid-3706817今日主题:gogs安装部署环境:centos安装包地址:https://dl.gogs.io/gogs_v0.8.25_linux_amd64.zip部署步骤&…

OpenCV学习笔记(六):非线性滤波-中值、双边:medianBlur(),bilateralFilter()

OpenCV学习笔记(六):非线性滤波-中值、双边:medianBlur(),bilateralFilter() 1、中值滤波(Median filter) 是一种典型的非线性滤波技术,基本思想是用像素点邻域灰度值的中值来代替该像素点的灰…

Batch Normalization原理及pytorch的nn.BatchNorm2d函数

下面通过举个例子来说明Batch Normalization的原理,我们假设在网络中间经过某些卷积操作之后的输出的feature map的尺寸为4322,4为batch的大小,3为channel的数目,22为feature map的长宽 整个BN层的运算过程如下图: 上…

JSP简单练习-获取表单数据

在JSP中,server端程序与client交互最经常使用的方法就是採用表单提交数据。表单提交的方法主要有两种,一种是get方法。还有一种是post方法。两者最大的差别:使用get方法提交的数据会显示在浏览器的地址栏中,而post方法则不会显示&…

OpenCV学习笔记(八):形态学morpholgy(2):开/闭运算,形态学梯度、顶帽/黑帽morphologyEx()

OpenCV学习笔记(八):形态学morpholgy(2):开、闭运算,形态学梯度、顶帽、黑帽:morphologyEx() 数学形态学(Mathematical morphology) 是一门建立在格论和拓扑学基础之上的图像分析学…

PPT将图片变为平行四边形形状

点击图片→ 格式→ 旋转→ 其它旋转选项→ 三维旋转

“人工智能之父”艾伦·图灵登上英国50英镑新钞

图源:BBC来源:海外网海外网7月15日电英国广播公司(BBC)报道,“计算机科学和人工智能之父”艾伦图灵登上英国50英镑新钞。此前有媒体报道称,英格兰银行计划于2020年推出新版50英镑,用更耐磨的聚合…

PPT将立方体形状变为很薄的长方体

方法是选中立方体,调节箭头所示的黄色节点,即可调节立方体的厚度:

老李谈HTTP1.1的长连接

老李谈HTTP1.1的长连接 poptest是国内唯一一家培养测试开发工程师的培训机构,以学员能胜任自动化测试,性能测试,测试工具开发等工作为目标。如果对课程感兴趣,请大家咨询qq:908821478,咨询电话010-84505200…

OpenCV学习笔记(七):形态学morpholgy(1):腐蚀/膨胀:enrode(),dilate()

OpenCV学习笔记(七):形态学(morpholgy):腐蚀/膨胀:enrode(),dilate() 数学形态学(Mathematical morphology) 是一门建立在格论和拓扑学基础之上的图像分析学科,是数学形态学图像处理…

【中台】“中台”概念究竟是什么?制造业企业需要拥抱吗?

来源:中国电子报“忽如一夜春风来,千树万树梨花开。” 这首诗形容当前“中台”概念的风靡非常恰当。IT圈里不乏新的概念、新的“网红”,如今,“中台”一词占据了C位,成为软硬件企业尤其是互联网企业在各大演讲中经常挂…

PPT立方体三面同色

我们知道PPT插入的立方体有一面的颜色比其它两面深一点,例如我插入一个立方体,并将其填充为白色: 可以看到有一面并不是白色,而是灰色。但如果我需要的是三面都为白色的立方体呢? 这时可以插入一个平行四边形&#xf…

OpenCV学习笔记(九): 漫水填充:floodFill()

OpenCV学习笔记(九): 漫水填充:floodFill() 定义: 漫水填充法是一种用特定的颜色填充联通区域(自动选中了和种子点相连的区域,接着将该区域替换成指定的颜色)通过设置可连通像素的上…

68页PPT,读懂中、美、德三国智能制造战略!

来源:清华大学深圳研究生院导 读这份来自清华大学深圳研究生院物流与交通学部的研究和报告,分析了工业4.0趋势下德、中、美竞争与合作,共68页,对于ICT领域投资者是难得好文。张亚勤、刘慈欣、周鸿祎、王飞跃、约翰.翰兹联合推荐这…

事件处理

⼀、事件的基本概念事件 是当⽤户⼿指触击屏幕及在屏幕上移动时,系统不断 发送给应⽤程序的 对象。系统将事件按照特定的路径传递给可以对其进⾏处理的对 象。在iOS中,⼀个UITouch对象表⽰⼀个触摸,⼀个UIEvent 对象表⽰⼀个事件。事件对象…

pytorch查看打印网络参数总个数

print("Total number of paramerters in networks is {} ".format(sum(x.numel() for x in net.parameters())))其中net是代码中的网络模型

OpenCV学习笔记(十):图像金字塔Pyramid和图像缩放:pyrDown(),pyrUp(),resize()

OpenCV学习笔记(十):图像金字塔Pyramid和图像缩放:pyrDown(),pyrUp(),resize() 一、图像金字塔定义: 图像金字塔是图像中多尺度表达的一种,最主要用于图像的分割,是一种以多分辨率来解释图像的…

php分享二十四:数组

1:isset() 对于数组中为 NULL 的值不会返回 TRUE,而 array_key_exists() 会。 2:利用array_filter和strlen快速过滤数组中等于0的值 $path str_replace(array(/, \\), DIRECTORY_SEPARATOR, $path); $parts array_filter(explode(DIRECTORY…

量子纠缠和宇宙黑洞

2019年7月,量子纠缠(两个光子)照片首次公布2019年4月,宇宙黑洞(质量为太阳的65亿倍)照片首次公布来源:吴志刚科学网博客量子纠缠和宇宙黑洞,一个极小,一个极大&#xff0…