生命在于学习——Python人工智能原理(3.1)

在这里插入图片描述

三、深度学习

在这里插入图片描述

(一)深度学习的概念

1、深度学习的来源

深度学习的概念来源于人工神经网络,所以又称深度神经网络
人工神经网络主要使用计算机的计算单元和存储单元模拟人类大脑神经系统中大量的神经细胞(神经元)通关神经纤维传导并相互协同工作的原理。深度学习在一定程度上等同于多层或者深层神经网络。

2、深度学习的定义

所谓深度是指原始数据进行非线性特征转换的次数,如果把一个表示学习系统看作一个有向图结构,深度也可以看作从输入节点到输出节点所经过的最长路径的长度。这样我们就需要一种学习方法可以从数据中学习一个深度模型,这就是深度学习。
深度学习是机器学习的一个子问题,其主要目的是从数据中自动学习到有效的特征表示。

3、深度学习的分类

在这里插入图片描述

(1)监督学习

将训练样本的数据加入到神经网络的输入端,将期望答案和实际输出作差,可以得到误差信号,通过得到的误差信号调整权值大小,以此来优化模型输出。

(2)无监督学习

不给定数据标签,直接训练数据,模型根据数据特征进行自动学习。
无监督学习算法训练含有很多特征的数据集X,在该数据集上学习出有用的结构性质。在深度学习中,通常学习生成数据集的整个概率分布,显式的如概率估计,隐式的如合成或去噪。

(3)半监督学习

介于有监督和无监督之间,不需要给定具体的数据标签,但需要对神经网络的输出进行评价,以此来调整网络参数。

4、深度学习的常用模型举例

在这里插入图片描述

典型的深度学习模型有卷积神经网络、循环神经网络、长短时记忆网络、深度执行网络模型等。

5、深度学习的步骤

原始数据——底层特征——中层特征——高层特征——预测——结果
其中。底层特征-中层特征-高层特征为表示学习,底层特征-中层特征-高层特征-预测为深度学习。
和浅层学习不同,深度学习需要解决的关键问题是贡献度分配问题,即一个系统中不同的组件或其参数对最终系统输出结果的贡献或影响。

6、深度学习的训练过程

在这里插入图片描述

对深度学习的所有层同时进行训练,复杂度会很高,如果每次只训练一层,偏差就会逐层传递。
总体来说,训练过程分为两步:

(1)使用自下而上的非监督学习

采用无标签或有标签数据分层训练各层参数,这一步可以看成无监督训练过长,或者特征学习过程。
先用数据学习第一层,学习第一层的参数,在学习并得到N-1层后,将N-1的输出作为第N层的输入,训练第N层,从而得到各层的参数。

(2)自顶而下的监督学习

基于(1)中学到的各层参数进一步调整多层模型的参数,这是一个有监督的过程。
第一步类似神经网络的随机初始化初值过程,由于深度学习的第一步不是随机初始化,而是通过学习输入数据的结构得到,因而这个初值更接近全局最优,从而能够取得更好的效果,所以深度学习效果好在很大程度上归功于第一步的特征学习过程。

7、深度学习与浅层学习

在这里插入图片描述

相较于传统的浅层学习,深度学习的不同之处在于:

(1)强调了模型结构的深度

通常有5、6层,甚至十几层的隐层节点。

(2)明确了特征学习的重要性

8、深度学习与传统机器学习

端到端学习,也称端到端训练,是指在学习过程中不进行分模块或分阶段训练,直接优化任务的总体目标,目前大部分采用神经网络模型的深度学习也可以看作一种端到端的学习。
相比传统的机器学习,深度学习有更好的特征学习能力,在传统的机器学习算法中需要手工编码特征,相比之下深度学习对特征的识别由算法自动完成,机器学习的这个处理过程不仅耗时,而且还需要较高的专业知识和一定的人工参与才能完成。而深度学习通过大数据技术直接从数据中自动学习各种特征并进行分类或者识别,做到全自动数据分析。

9、深度学习的发展及重要人物介绍

在这里插入图片描述

(1)反向传播算法

简称BP,是一种监督学习算法,常被用来训练多层感知机。
于1974年,Paul Werbos首次给出了如何训练一般网络的学习算法,而人工神经网络只是其中的特例,直到80年代中期,David Rumelhart、Geoffrey Hinton、RonaldWilliams、David Parker和YannLeCun提出多层网络中的反向传播算法,引起人工神经网络领域研究的第二次热潮。

(2)卷积神经网络

是一种深度学习模型或类似于人工神经网络的多层感知器,常用来分析视觉图像。
现代卷积神经网络的创始人是计算机科学家Xann LeCun,他是第一个通过卷积神经网络在MNIST数据集上解决手写数字问题的人。
严格意义上讲,LeCun是第一个使用误差反向传播训练卷积神经网络架构的人,但他不是第一个发明这个结构的人,福岛博士引入的Neocognitron,是第一个使用卷积和采样的神经网络,也是卷积神经网络的雏形。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/web/20964.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

06.持久化存储

6.持久化存储 pv: persistent volume 全局的资源 pv,node pvc: persistent volume claim 局部的资源(namespace)pod,rc,svc 6.1:安装nfs服务端(192.168.111.11) yum install nfs-utils.x86_64 -y mkdir /data vim /…

赶紧收藏!2024 年最常见 20道 Kafka面试题(一)

一、Kafka都有哪些特点? Kafka是一个分布式流处理平台,它被设计用于高吞吐量的数据管道和流处理。以下是Kafka的一些主要特点: 高吞吐量、低延迟:Kafka每秒可以处理数十万条消息,延迟可以低至几毫秒。这是通过优化数据…

MyBatis 的在使用上的注意事项及其辨析

1. MyBatis 的在使用上的注意事项及其辨析 文章目录 1. MyBatis 的在使用上的注意事项及其辨析2. 准备工作3. #{ } 与 ${ } 的区别和使用3.1 什么情况下必须使用 ${ }3.1.1 拼接表名3.1.2 批量删除3.1.3 模糊查询3.1.3.1 使用 ${ }的方式3.1.3.2 使用 #{ } 的方式 4. typeAlias…

什么是PYTHONPATH?它在Python中有什么作用

PYTHONPATH 是一个环境变量,用于在 Python 中指定额外的搜索路径,以便 Python 解释器可以找到要导入的模块和包。在 Unix-like 系统(如 Linux 和 macOS)以及 Windows 系统上,都可以设置和使用 PYTHONPATH。 当你在 Py…

风景的短视频一分钟:成都科成博通文化传媒公司

风景的短视频一分钟:时光凝固的画卷 在快节奏的现代生活中,我们常常被繁忙和琐碎所困扰,渴望在喧嚣中找到一丝宁静与美好。而风景的短视频,正是这样一份能够让我们在短时间内沉浸于自然之美的奇妙礼物。成都科成博通文化传媒公司…

14.FreeRTOS 流媒体缓存 Stream Buffer

FreeRTOS 中的 Stream Buffer(流媒体缓存) 在实时操作系统(RTOS)中,处理流媒体数据是一项非常关键的任务。FreeRTOS 提供了一种名为 Stream Buffer(流媒体缓存)的机制,用于高效地管…

面试官问:Redis 为什么这么快?只会说一个内存...

本文将围绕 Redis 为什么这么快这一主题,从多个角度进行深入分析。我们将探讨 Redis 的数据结构、网络模型、持久化机制、内存管理等关键因素,并分析它们如何共同作用,使 Redis 成为高性能的内存数据库。 一、引言 在当今大数据时代,高性能的数据库系统对于处理海量数据至…

插入排序详解及Java代码实现

在计算机科学中,排序是一种基本的操作,它广泛应用于各种数据处理场景。插入排序(Insertion Sort)是一种简单直观的排序算法,它的工作原理是通过构建有序序列,对于未排序数据,在已排序序列中从后…

牛客BM85 验证IP地址【中等 字符串 Java/Go/PHP】

题目 题目链接: https://www.nowcoder.com/practice/55fb3c68d08d46119f76ae2df7566880 https://www.lintcode.com/problem/1222/description 思路 直接模拟,注意IPv4,ipv6的条件Java代码 import java.util.*;public class Solution {/*** 验证IP地址…

关于IDEA创建Maven一直爆红无法下载的问题

你能看到这我就知道你肯定已经试过了网上的很多方法了,我之前也是,试过了很多一直无法正常下载,我也是找人给 线下看了看解决了,我总结一下从头到尾排除问题,试到最后要是还解决不了你直接私信我,我给你看看…

【TB作品】msp430g2553,读取ADXL345+读取DS18B20

硬件 OLED ADXL345 msp430g2553 ds18b20 功能 //OLED 接线 /* NEW P2.0 CSP2.1 DCP2.2 RESP2.3 D1 SDAP2.4 D0 */ //ADXL345 接线 //只需要接五根线,其余乱七八糟的不用接 //P1.4接SCL //P1.5接SDA //3.3接3.3V //CS接3.3V //GND接GND // //执行到while1之后&a…

路由策略实验1

先把地址全部配通 对R1 对R2 对R4 对R3 对R5 对R6 对R7 然后起路由协议 对R1 对R2 对R3 对R4 对R5 对R6 对R7

C++17之std::void_t

目录 1.std::void_t 的原理 2.std::void_t 的应用 2.1.判断成员存在性 2.1.1.判断嵌套类型定义 2.1.2 判断成员是否存在 2.2 判断表达式是否合法 2.2.1 判断是否支持前置运算符 2.2.3 判断两个类型是否可做加法运算 3.std::void_t 与 std::enable_if 1.std::void_t 的…

NAS的外网访问设置

1.公网IP 2.备案域名 3.DDNS解析 4.光猫桥接路由器拨号上网 5.nginx证书accesskey 我使用在阿里云注册备案的域名,使用阿里云的DNS解析服务,使用阿里云提供的api实现DDNS解析。 在NAS中需要安装DNSSERVER插件并创建解析空间和解析域名。 在阿里云…

猫头虎分享已解决Bug || **Eslint插件安装问题Unable to resolve eslint-plugin-猫头虎

猫头虎分享已解决Bug || **Eslint插件安装问题Unable to resolve eslint-plugin-猫头虎 博主猫头虎的技术世界 🌟 欢迎来到猫头虎的博客 — 探索技术的无限可能! 专栏链接: 🔗 精选专栏: 《面试题大全》 — 面试准备的…

将 py 文件编译成 pyd 文件

文章目录 一、简介1.1、Python中的文件类型:.py .pyc .pyd1.2、基本原理1.2.1、函数详解:Extension() —— 用于定义扩展模块(C/C 扩展)的类1.2.2、函数详解:setup() —— 用于配置和构建包的函数 二、构建过程2.0、…

百度文心一言API批量多线程写文章软件-key免费无限写

百度文心大模型的两款主力模型ENIRE Speed、ENIRE Lite全面免费,即刻生效。 百度文心大模型的两款主力模型 这意味着,大模型已进入免费时代! 据了解,这两款大模型发布于今年 3 月,支持 8K 和 128k 上下文长度。 ER…

Java集合面试题(概述,list,Map)

一个常见的"fail-safe"集合例子是CopyOnWriteArrayList。这个集合在每次修改时都会复制当前的数组,修改操作在新数组上进行,而遍历操作则在旧数组上进行。这样,即使在遍历过程中进行了修改,也不会影响遍历的进行。 插入…

小程序的数据驱动和vue的双向绑定有何异同

小程序的数据驱动和Vue的双向绑定在概念和应用上既有相似之处,也存在明显的差异。以下是它们之间的异同点: 相同点 数据驱动: 小程序和Vue都采用了数据驱动的方式,即将数据作为中心,通过更新数据来驱动视图的渲染。当…

车载诊断内容汇总(培训+视频)

车载诊断内容汇总 我是穿拖鞋的汉子,魔都中坚持长期主义的汽车电子工程师。 老规矩,分享一段喜欢的文字,避免自己成为高知识低文化的工程师: 屏蔽力是信息过载时代一个人的特殊竞争力,任何消耗你的人和事&#xff0c…