Go语言的调度器

简介

Go语言的调度器是一个非常强大的工具,它可以帮助我们轻松地实现并发编程。调度器的工作原理是将多个协程映射到多个操作系统线程上,并根据协程的状态来决定哪个协程应该在哪个线程上运行。

调度器有两种主要策略:

  • 协作式调度: 协作式调度是指协程主动放弃 CPU 时间片,以便其他协程有机会运行。
  • 抢占式调度: 抢占式调度是指调度器强制剥夺一个协程的 CPU 时间片,以便另一个协程可以运行。

Go语言的调度器使用的是抢占式调度算法,这意味着调度器可以随时中断一个协程的执行,并将 CPU 时间片分配给另一个协程。

原理

Go语言的调度器是一个非常复杂的系统,但它的基本原理可以归结为以下几点:

  • 协程: 协程是 Go语言中的一种轻量级线程,它与线程的主要区别在于协程是由用户态代码管理的,而线程是由内核管理的。协程的创建和销毁都非常快速,这使得它非常适合于编写并发程序。
  • 操作系统线程: 操作系统线程是内核管理的执行单元,它可以独立地执行代码。每个协程都必须运行在一个操作系统线程上。
  • 调度器: 调度器负责将协程映射到操作系统线程上,并决定哪个协程应该在哪个线程上运行。调度器会根据协程的状态来做出决定,例如,如果一个协程正在等待 I/O 操作,那么调度器可能会将它从当前线程上移除,并将它放到另一个线程上运行。

工作原理

Go语言的调度器使用一种称为 M:N 调度的算法来管理协程和操作系统线程之间的关系。M:N 调度算法是指 M 个协程可以映射到 N 个操作系统线程上,其中 M 和 N 可以是任意正整数。

在 Go语言中,M 的值通常等于处理器的数量,而 N 的值可以根据需要进行调整。如果 N 的值大于 M 的值,那么就会出现协程并发的现象。

性能优化

为了提高 Go语言程序的性能,我们可以对调度器进行一些优化。以下是一些常见的优化技巧:

  • 减少协程的数量: 过多的协程会增加调度器的负担,从而降低程序的性能。因此,我们应该尽量减少协程的数量。
  • 避免协程阻塞: 协程阻塞是指协程在等待 I/O 操作或其他事件时无法继续执行。协程阻塞会导致调度器不得不将协程从当前线程上移除,并将它放到另一个线程上运行,这会增加调度器的负担。因此,我们应该尽量避免协程阻塞。
  • 使用合理的 N 值: N 的值应该根据程序的实际情况进行调整。如果 N 的值太小,那么就会出现协程并发的现象,这会降低程序的性能。如果 N 的值太大,那么就会浪费操作系统线程资源。

实战案例

在我们的一个工作项目中,我们使用 Go语言的调度器来实现了一个并发文件下载程序。该程序可以同时下载多个文件,并且可以自动重试下载失败的文件。

以下是该程序的部分代码:

package mainimport ("context""fmt""io""net/http""os""sync"
)// 定义一个协程安全的计数器
var wg sync.WaitGroup// 定义一个下载文件的函数
func downloadFile(ctx context.Context, url, filepath string) error {// 创建一个 HTTP 请求req, err := http.NewRequest("GET", url, nil)if err != nil {return err}// 发送 HTTP 请求resp, err := http.DefaultClient.Do(req)if err != nil {return err}defer resp.Body.Close()// 创建一个文件f, err := os.Create(filepath)if err != nil {return err}defer f.Close()// 将 HTTP 响应体复制到文件中_, err = io.Copy(f, resp.Body)if err != nil {return err}return nil
}// 定义一个主函数
func main() {// 创建一个 contextctx := context.Background()// 创建一个协程池pool := make(chan struct{}, 10)// 创建一个文件列表files := []string{"https://example.com/file1.txt","https://example.com/file2.txt","https://example.com/file3.txt",}// 遍历文件列表for _, file := range files {// 将协程池中的一个令牌消耗掉pool <- struct{}{}// 启动一个协程来下载文件go func(file string) {defer func() {// 将协程池中的一个令牌释放出来<-pool}()// 增加计数器的值wg.Add(1)// 下载文件err := downloadFile(ctx, file, "file/"+filepath.Base(file))if err != nil {fmt.Println(err)}// 减少计数器的值wg.Done()}(file)}// 等待所有协程执行完毕wg.Wait()
}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/619369.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

入门Linux简单操作

基本命令 scp ✓ scp -r 文件 127.0.0.1&#xff1a;/root/文件 (source->>>>destination) mv cp ✓ cp xxxx ./xxxx date ✓ 修改时间 date -s “yyyy-MM-dd 12:12:59” find ✓ find /home/user -name “*.txt” grep ✓ 管道 软连接 多用户 免密设置 脚…

iPhone“查找”最多可添加32个物品!

对于那些丢三落四的果粉来说&#xff0c;苹果的“查找”功能是一大福音。不管是丢失了iPhone、iPad、Mac、AirPods还是AirTag&#xff0c;都可以通过“查找”功能在地图上追踪设备的位置&#xff0c;甚至是远程锁定或抹掉设备的数据。 那么&#xff0c;iPhone的查找一次能支持添…

LeetCode 38 外观数列

题目描述 外观数列 给定一个正整数 n &#xff0c;输出外观数列的第 n 项。 「外观数列」是一个整数序列&#xff0c;从数字 1 开始&#xff0c;序列中的每一项都是对前一项的描述。 你可以将其视作是由递归公式定义的数字字符串序列&#xff1a; countAndSay(1) "1…

软件测试|解决Github port 443 : Timed out连接超时的问题

前言 GitHub是全球最大的开源代码托管平台之一&#xff0c;许多开发者和团队使用它来管理和协作开源项目。但在当下&#xff0c;我们在clone或者提交代码时会经常遇到"GitHub Port 443: Timed Out"错误&#xff0c;这意味着我们的电脑无法建立与GitHub服务器的安全连…

学习python仅此一篇就够了(函数进阶:lambda函数)

函数进阶 函数的多返回值 def ceshi1():return 1, 2x, y ceshi1() print(x) #1 print(y) #2 函数的多种传参方式 1.位置参数&#xff1a;调用函数时根据函数定义的参数位置来传递参数 def ceshi1(name,age):print(f"你的姓名是{name},你的年龄是{age}")ceshi1(…

xtu oj 1522 格子

题目描述 一个nm的网格&#xff0c;格子里最多能放一枚棋子&#xff0c;将k枚棋子随机放入不同的网格中&#xff0c;使得同行同列最多只有一枚棋子&#xff0c;请问概率是多少&#xff1f; 输入格式 第一行是一个整数T (1≤T≤512)&#xff0c;表示样例的个数。 以后每行一…

UniRepLKNet实战:使用UniRepLKNet实现图像分类任务(一)

文章目录 摘要安装包安装timm 数据增强Cutout和MixupEMA项目结构计算mean和std生成数据集一些问题 摘要 大核卷积神经网络&#xff08;ConvNets&#xff09;近年来受到广泛关注&#xff0c;但仍存在两个关键问题需要进一步研究。首先&#xff0c;目前的大型卷积神经网络架构大…

设计模式之避免共享的设计模式Copy-on-Write模式

系列文章目录 设计模式之避免共享的设计模式Immutability&#xff08;不变性&#xff09;模式 设计模式之并发特定场景下的设计模式 Two-phase Termination&#xff08;两阶段终止&#xff09;模式 文章目录 系列文章目录一、Copy-on-Write是什么&#xff1f;二、应用 一、Cop…

士兵队列 +队列queue+模拟

士兵队列 队列queue 某部队进行新兵队列训练&#xff0c;将新兵从一开始按顺序依次编号&#xff0c;并排成一行横队&#xff0c;训练的规则如下&#xff1a;从头开始一至二报数&#xff0c;凡报到二的出列&#xff0c;剩下的向小序号方向靠拢&#xff0c;再从头开始进行一至三…

javacv和opencv对图文视频编辑-按指定间隔从视频抽取缩略图

1、java代码抽取视频缩略图 直接上代码 首先pom 引入了javacv和Thumbnails <!-- 引入javacv --><dependency><groupId>org.bytedeco</groupId><artifactId>javacv</artifactId><version>1.5.6</version></dependency>…

Spring Boot - Application Events 同步 VS 异步 发布订阅事件实战

文章目录 PreCode基础工程启动类切入口事件 发布事件同步 Listener异步Listener增加EnableAsync增加 Async 测试 Pre Spring Boot - Application Events 的发布顺序_ApplicationStartingEvent Spring Boot - Application Events 的发布顺序_ApplicationEnvironmentPreparedEv…

Android Lint的使用

代码检查方式一&#xff1a; Android Studio使用Lint进行代码检查 找到Analyze目录下的Inspect Code检查代码选项点击然后弹出下面这个框框&#xff0c;在这个列表选项中我们可以选择Inspect Code的范围&#xff0c;点击OK 待分析完毕后&#xff0c;我们可以在Inspection栏目中…

安装、运行和控制AI apps在您的计算机上一键式

pinokio 你是否曾为安装、运行和自动化 AI 应用程序和大模型而感到困惑&#xff1f;是否希望有一个简单而强大的工具来满足你的需求&#xff1f;如果是这样&#xff0c;那么 Pinokio 将会是你的理想选择&#xff01;Pinokio 是一款革命性的人工智能浏览器&#xff0c;是一个开…

Nocalhost 为 KubeSphere 提供更强大的云原生开发环境

1 应用商店安装 Nocalhost Server 已集成在 KubeSphere 应用商店&#xff0c;直接访问&#xff1a; 设置应用「名称」&#xff0c;确认应用「版本」和部署「位置」&#xff0c;点击「下一步」&#xff1a; 在「应用设置」标签页&#xff0c;可手动编辑清单文件或直接点击「安装…

【Tricore】基于主流芯片, 浅谈ECU多核架构与“核间通信”

文章目录 概要 整体架构 简单聊聊什么是多核架构和“核间通信”

力扣labuladong——一刷day91

提示&#xff1a;文章写完后&#xff0c;目录可以自动生成&#xff0c;如何生成可参考右边的帮助文档 文章目录 前言一、力扣208. 实现 Trie (前缀树)二、力扣648. 单词替换 前言 Trie 树又叫字典树、前缀树、单词查找树&#xff0c;是一种二叉树衍生出来的高级数据结构&#x…

2024.1.13

今天想开个新坑&#xff0c;于是我就开始学习数据结构了&#xff0c;那玩意怎么说呢&#xff0c;挺抽象的东西&#xff0c;有点难懂&#xff0c;我就一边做笔记一边暂停&#xff0c;就这么硬学&#xff0c;数据结构确实是编程中一个十分重要的东西&#xff0c;必须给他拿下昂。…

#每日一题#力扣#2085.统计出现过一次的公共字符串

给你两个字符串数组 words1 和 words2 &#xff0c;请你返回在两个字符串数组中 都恰好出现一次 的字符串的数目。 示例 1&#xff1a; 输入&#xff1a;words1 [“leetcode”,“is”,“amazing”,“as”,“is”], words2 [“amazing”,“leetcode”,“is”] 输出&#xff1a;…

HCIP-1

一、网络类型&#xff1a; 点到点 BMA&#xff1a;广播型多路访问 – 在一个MA网络中同时存在广播&#xff08;洪泛&#xff09;机制 NBMA&#xff1a;非广播型多路访问—在一个MA网络中&#xff0c;没有洪泛机制 MA&#xff1a;多路访问 在一个网段内&#xff0c;存在的节…

大模型实战营Day4 XTuner 大模型单卡低成本微调实战

本次讲师是一位从事算法工作的优秀贡献者。 一起来看看吧&#xff01; 本次课程内容主要有&#xff1a; 我将在此整理前三节的内容&#xff0c;第四节放在作业章节进行讲解&#xff1a; 同第三节的建立数据库中所提及到的&#xff0c;如果通用大模型在专用领域表现能力不强&…