python之多任务爬虫——线程、进程、协程的介绍与使用（16）

文章目录

  • 1、什么是多任务？
    • 1.1 进程和线程的概念
    • 1.2 多线程与多进程的区别
    • 1.3 并发和并行
  • 2、python中的全局解释器锁
  • 3、多线程执行机制
  • 4、python中实现多线程（threading模块）
    • 4.1 模块介绍
    • 4.2 模块的使用
  • 5、python实现多进行程（Multiprocessing模块）
    • 5.1 导入模块
    • 5.2 模块的使用
    • 5.3 进程池工作原理
  • 6、多线程和多进程的优缺点及使用场景
  • 7、异步协程（asyncio模块）
    • 7.1 协程的介绍
    • 7.2 协程的使用

1、什么是多任务？

1.1 进程和线程的概念

  • 什么是进程？

进程（Process）：指程序的一次执行，对于操作系统来说，一个任务就是一个进程，如：电脑打开一个APP，就代表启动了一个进程，打开两个APP，就是两个进程

如：
在这里插入图片描述

特点：

  1. 每个进程都包括地址空间、内存、数据栈、记录运行轨迹的辅助数据等
  2. 所有进程由操作系统统一管理，并被公平分配时间
  3. 进程间不能直接共享信息，需要通过IPC（进程间通信）
  • 什么是线程？

线程（Thread）：进程中的一个子任务，用于完成进程中的各项工作，一个进程中可以有

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/bicheng/58147.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

Caffeine本地缓存框架

Caffeine本地缓存框架

Caffeine本地缓存框架 hi，我是阿昌，今天记录一下Java最强本地缓存Caffeine 1、缓存介绍 缓存(Cache)，在软件无处不在。从底层CPU多级缓存，再到客户页面缓存，和服务器数据缓存，导出都存在着缓存的身影&am…
阅读更多...
HBuilder X 中Vue.js基础使用2（三）

HBuilder X 中Vue.js基础使用2（三）

一、条件渲染 1、条件判断 v-if ： 表达式返回真值时才被渲染 v-else ：表达式返回为假时不被渲染 2、 分支条件判断 v-else-if ：使用v-if , v-else-if 和 v-else 来表示其他的条件分支 3、显示隐藏 v-show v-show true 把节点显示 …
阅读更多...
PortQry下载安装使用教程（超详细），Windows测试UDP端口

PortQry下载安装使用教程（超详细），Windows测试UDP端口

《网络安全自学教程》 PortQry是微软官方提供的一款TCP/IP连接「排障工具」，用来「检查」TCP/UDP「端口状态」。 平时检查端口状态，最常用的是telnet，但它是基于TCP协议的，无法检测「UDP端口」，这篇文章教大家如何在W…
阅读更多...
Axure随机验证码高级交互

Axure随机验证码高级交互

亲爱的小伙伴，在您浏览之前，烦请关注一下，在此深表感谢！ 课程主题：字母数字随机验证码高级交互 主要内容：4位字母数字随机验证码生成、错误提示与State状态同步 应用场景：登录验证码、其他类…
阅读更多...
面试宝典（五）：用三个线程按顺序循环打印123三个数字，比如123123123

面试宝典（五）：用三个线程按顺序循环打印123三个数字，比如123123123

要使用三个线程按顺序循环打印123三个数字，势必要控制线程的执行顺序，可以使用java.util.concurrent包中的Semaphore类来控制线程的执行顺序。 代码示例 import java.util.concurrent.Semaphore;public class SequentialPrinting123 {private static Se…
阅读更多...
leetcode:34. 在排序数组中查找元素的第一个和最后一个位置（python3解法）

leetcode:34. 在排序数组中查找元素的第一个和最后一个位置（python3解法）

#1024程序员节 | 征文# 难度：中等 给你一个按照非递减顺序排列的整数数组 nums，和一个目标值 target。请你找出给定目标值在数组中的开始位置和结束位置。 如果数组中不存在目标值 target，返回 [-1, -1]。 你必须设计并实现时间复杂度为 O(lo…
阅读更多...
初识算法 · 前缀和(1)

初识算法 · 前缀和(1)

目录 前言： 一维数组的前缀和 题目解析 算法原理 算法编写 二维数组的前缀和 题目解析 算法原理 算法编写 前言： ​本文的主题是前缀和，通过两道题目讲解，一道是一维数组的模板，一道是二维数组的模板。 链接…
阅读更多...
【WebGIS实例】（18）MapboxGL 绘制矢量——线、面

【WebGIS实例】（18）MapboxGL 绘制矢量——线、面

前言 Mapbox GL JS 版本：3.6.0 该博客仅供学习参考，如果您是计划在实际项目中实现该功能，也推荐您直接使用已有的功能库： 官方案例：Draw a polygon and calculate its areamapbox-gl-draw：mapbox/mapbox-g…
阅读更多...
基于Django+python的酒店客房入侵检测系统设计与实现

基于Django+python的酒店客房入侵检测系统设计与实现

项目运行 需要先安装Python的相关依赖：pymysql，Django3.2.8，pillow 使用pip install 安装 第一步：创建数据库 第二步：执行SQL语句，.sql文件，运行该文件中的SQL语句 第三步：修改源…
阅读更多...
HTTPS讲解

HTTPS讲解

前瞻 HTTP与HTTPS的关系 HTTPS也是一个在应用层的协议，是在HTTP协议基础上的一个加密解密层 明文 密文 秘钥 明文->秘钥 加密 秘钥->明文 解密 例如:明文为7 秘钥为2 7^21015； 5就是密文例子: 因为http的内容是明文传输的，明文…
阅读更多...
危险物品图像分割系统：一键训练

危险物品图像分割系统：一键训练

危险物品图像分割系统源码＆数据集分享 [yolov8-seg-GFPN＆yolov8-seg-CSwinTransformer等50全套改进创新点发刊_一键训练教程_Web前端展示] 1.研究背景与意义 项目参考ILSVRC ImageNet Large Scale Visual Recognition Challenge 项目来源AAAI Global…
阅读更多...
LabVIEW共享变量通信故障

LabVIEW共享变量通信故障

问题概述： 在LabVIEW项目中，使用IO服务器创建共享变量，并通过LabVIEW作为从站进行数据通信。通讯在最初运行时正常，但在经过一段时间或几个小时后，VI前面板出现错误输出，导致数据传输失败。虽然“分布式系统…
阅读更多...
折扣影票接口对接渠道如何选择？

折扣影票接口对接渠道如何选择？

选择折扣影票接口对接渠道需要综合多方面因素考虑，以下是一些建议： 1.合法性和合规性： 确认供应商资质：优先选择具有相关票务经营资质的渠道。比如一些大型的在线票务平台，它们通常经过官方认证和监管，在…
阅读更多...
[JAVAEE] 多线程的案例(二) - 阻塞队列 生产者消费者模型

[JAVAEE] 多线程的案例(二) - 阻塞队列 生产者消费者模型

目录 一. 什么是阻塞队列 二. java中的阻塞队列 三. 生产者消费者模型 3.1 生产者消费者模型与阻塞队列密不可分的关系 3.2 阻塞队列在生产者消费者模型的作用 a. 解耦合 b. 削峰填谷 四. 模拟实现阻塞队列 4.1 实现put方法 4.2 实现take方法 4.3 生产者消费者模型​…
阅读更多...
了解C# 程序结构

了解C# 程序结构

本节我们将学习 C# 编程语言的结构，为了让大家能够对 C# 程序结构有个更好的理解，我们会先演示一个最小的、最简单的 C# 程序结构，以便作为接下来的章节的参考。 C# Hello World 实例 一个 C# 程序主要包括以下部分： 命名空间声明…
阅读更多...
08 实战：色彩空间展示（本程序以视频为主）

08 实战：色彩空间展示（本程序以视频为主）

程序效果如下： 我在这里讲解RGB和YCbCr的原理： 一、RGB颜色空间 1.1 基本概念 RGB颜色空间是一种最基础和常用的颜色表示方式，它基于人眼感知色彩的三原色原理。RGB分别代表： R（Red）：红色G（Green）：绿色B（Blue）：蓝色通过这三种基本颜色的不同组合，可以产生人眼…
阅读更多...
Promise、async、await 、异步生成器的错误处理方案

Promise、async、await 、异步生成器的错误处理方案

1、Promise.all 的错误处理 Promise.all 方法接受一个 Promise 数组，并返回所有解析 Promise 的结果数组： const promise1 Promise.resolve("one"); const promise2 Promise.resolve("two");Promise.all([promise1, promise2]).…
阅读更多...
基于人体姿势博文文章

基于人体姿势博文文章

MATLAB运动目标检测系统应用背景 运动目标的定位跟踪，检测识别，运动分析在图像压缩、运动分析、交通检测，智能监控等方面有主要的应用。 首先，在图像压缩中，运动目标检测技术可以在背景区域中将前景区域提取分割出来…
阅读更多...
91.【C语言】数据结构之单向链表的查找,中间插入和删除,销毁

91.【C语言】数据结构之单向链表的查找,中间插入和删除,销毁

目录 1.链表的查找函数 2.链表的修改函数 3.链表的中间插入函数 1.在pos之前插入:SLTInsertBefore函数 1.借助头指针pphead 示意图 代码示例(写入SList.c) 头文件添加SLTInsertbefore的声明 main.c的部分代码改为 1.测试中间插入 2.测试头部插入 3.测试pos为NULL的…
阅读更多...
机器视觉：9点标定的原理与实现

机器视觉：9点标定的原理与实现

一、什么是标定 标定就是将机器视觉处理得到的像素坐标转换成实际项目中使用到的毫米坐标。简单说即使看看实际单位距离内有几个像素，如下图所示，10mm的距离内有222个像素，那像素坐标和实际的毫米坐标就有个比例关系了。 二、九点标定 9点标…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023