golang 并发--goroutine(四)

golang 语言最大的特点之一就是语法上支持并发,通过简单的语法很容易就能创建一个 go 程,这就使得 golang 天生适合写高并发的程序。这一章节我们就主要介绍 go 程,但是要想完全理解 go 程我们需要深入研究 GPM 模型,关于 GPM 模型网上已经有很多资料了,这里就不过多介绍了,有兴趣的同学可以请教度娘,这一章节还是主要关注应用层面,主要强调在我们写程序时一下需要注意的点并且给出一些代码示例方便我们理解。

通常来说有三种方式实现并发:进程(process),线程(thread),协程(coroutine),前两个:进程和线程是操作系统实现的,协程是由编程语言来实现的,不同语言实现协程的方式不一样,在叫法上也会有一些区别,例如协程在 java 中就叫协程,python 中叫绿色线程(green thread),golang 中叫 go 程(goroutine,因为本文主要是讲解 golang,后续统一用 “go” 程行文)。

进程,线程,go程,是在三个不同粒度实现的并发:

  • 进程

    操作系统实现,拥有独立的内存空间(变量不共享),有进程号数量的限制,由操作系统调度。

  • 线程

    注意这里有两种概念的线程:操作系统线程;CPU 线程。操作系统线程由操作系统实现,是 CPU 执行的最小单元(一核 CPU 同一时刻只能执行一个线程,40 核 CPU 同一时刻能执行 40 个线程),其位于进程之下,一个进程可以有多个线程,但是一个线程只能属于一个进程,多个线程共享进程的内存空间,在操作变量时要考虑安全问题(要加锁防止两个线程同时修改一个变量),线程数受最大线程号限制,由操作系统调度。

  • go 程(协程)

    golang 语言实现,没有数量限制,go程直接共享内存空间,需要考虑并发安全问题,go程的调度时 golang 来完成的,但是同一时刻 CPU 能执行的go程数受线程数限制。

go 程的支持是 golang 的核心优势之一,golang 在语法上支持 go 程(其他语言大都通过第三方现),正是因为有了 go 程,所以 golang 天生适合高并发场景,下面来看一个最简单的 go 程的例子:

package mainimport ("fmt""time"
)func main() {go func() {fmt.Println("Hello, I am a goroutine.")}()fmt.Println("Hello, I am the main goroutine.")time.Sleep(1 * time.Millisecond)
}

输出:

Hello, I am the main goroutine.
Hello, I am a goroutine.

上面代码最后有个 time.Sleep,这是为了防止主 go 程提前退出,大家可以自己测试把 time.Sleep(1 * time.Millisecond) 注释掉,看看输出结果有什么变化。

另外,从上面代码中我们也可以看出 go 程的另外一个与进程,线程不同的地方,go 程的创建没有返回(创建进程和线程在创建成功后会返回进程号或线程号),这也就意味着 golang 程序父 go 程没有方法去操作其子 go 程(完全没有方法也是不对的,通过 golang 的 channel 和 context 可以间接的实现,这个在后续章节再详细讲解)。

GOMAXPROCS

GOMAXPROCS 是 golang 并发种很重要的一个参数,正确的设置这个值对 go 程序的执行效率有很大的影响。要想理解 GOMAXPROCS 我们首先需要搞懂 GPM 模型,这里我只是简单介绍一下(详细的还是要请教度娘):G 表示的就是 goroutine(go 程);P 表示 processer,这是 golang 抽象处理的一个概念,用于调度 goroutine,每个 processer 都有一个 goroutine 队列,队列中的 goroutine 会顺序执行,如果正在执行的 go 程阻塞,processer 会调度后面的 go 程执行;M 表示操作系统线程,processer 最终会把goroutine 交给 M 来执行(但是注意:P 和 M 并不是一一对应的,当 M 因为 IO 发送阻塞时 P 会寻找其他的 M 处理 goroutine,如果没有空闲 M 则创建一个)。GOMAXPROCS 设置的就是 P 的最大数量,他表示同一时刻的 CPU 运行最大 goroutine 数,这个值默认等于 CPU 线程数(通过 lscpu 命令可查)。

设置 GOMAXPROCS 的方法

  • 通过环境变量
export GOMAXPROCS=8

然后通过下面代码验证:

package mainimport ("fmt""runtime"
)func main() {fmt.Printf("GOMAXPROCS=%d\n", runtime.GOMAXPROCS(0))
}

输出结果:

GOMAXPROCS=8
  • 通过代码设置
package mainimport ("fmt""runtime"
)func main() {runtime.GOMAXPROCS(10)fmt.Printf("GOMAXPROCS=%d\n", runtime.GOMAXPROCS(0))
}

输出结果:

GOMAXPROCS=10

注意:这里设置和获取 GOMAXPROCS 使用的都是 runtime.GOMAXPROCS 函数,这个函数参数大于 0 时用于设置 GOMAXPROCS,小于等于 0 时用于获取当前的 GOMAXPROCS。

该如何决定 GOMAXPROCS 的大小

我们知道了 GOMAXPROCS 的设置方法,那么到达设为多少合适呢?这要分为两种情况考虑:

  • 程序运行在物理机上;

    这种情况我们需要考虑两种情形:1、程序是 CPU 密集型(又叫计算密接型)的,GOMAXPROCS 采用默认值(等于物理 CPU 的线程数)就行,如果 GOMAXPROCS 设置过大那么势必会导致多个 P 共用一个 CPU 线程,这样就会因为频繁的调度切换浪费 CPU;2、IO 密集型,这种程序的特点:go 程经常会因为 IO 操作被阻塞,如果 GOMAXPROCS 采用默认值会导致大量 CPU 因为等待 IO 而处于空闲状态,这时候我们就可以设置 GOMAXPROCS 大于 CPU 线程数,根据 IO 操作的密集程度甚至可以远大于 CPU 线程数。

    注意:上面设置的方法都是为了 go 程序充分的使用整个物理机的能力,但是如何如果服务器还需要运行其他服务,并且也需要消耗大量 CPU,这时候我们就需要考虑把 GOMAXPROCS 设置的小一些,防止程序突发占用了整个物理机的 CPU.

  • 程序运行在容器里面,并且容器设置了 resouce limit;

    这种情况我们可以采用 uber 提供的 automaxprocs:https://github.com/uber-go/automaxprocs 由程序自动设置。但是对于第三方程序(没有使用 automaxprocs),我们只能通过环境变量的方式来设置 GOMAXPROCS,但是具体设置为多少,这就只能根据具体容器的 resouce limit 是如何设置的来决定了。

总结:这一章节主要介绍了 GOMAXPROCS,也介绍了该如何设置 GOMAXPROCS,但是上面的场景远远不能覆盖现实情况,生产环境种 GOMAXPROCS 的大小需要综合考虑多种情况。希望这篇文档给大家理解 goroutine 带来一些帮助,如果后续遇到 go 程序性能不理想时可以考 GOMAXPROCS 设置的是否合适。



喜欢的朋友记得点赞、收藏、关注哦!!!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/495379.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

选择FPGA开发,学历是硬性要求吗?

在踏入FPGA开发领域之前,心中难免会泛起的疑虑。 选择FPGA开发,就一定需要高学历作为支撑吗? 一、先说结论:学历非必需,但建议不断提升自我。 FPGA开发的门槛意味着你需要投入比其他行业更多的时间和精力去学习&…

面试场景题系列:设计一致性哈希系统

为了实现横向扩展,在服务器之间高效和均匀地分配请求/数据是很重要的。一致性哈希是为了达成这个目标而被广泛使用的技术。首先,我们看一下什么是重新哈希问题。 1 重新哈希的问题 如果你有n个缓存服务器,常见的平衡负载的方法是使用如下哈希…

778-批量删除指定文件夹下指定格式文件(包含子孙文件夹下的)

778-批量删除指定文件夹下指定格式文件(包含子孙文件夹下的) 批量删除指定文件夹下所有指定格式文件,包括子孙文件夹下 文件扩展名输入时一行一个,可以同时删除多个格式文件, 输入格式是可以带.也可以不带&#xff…

MarkItDown的使用(将Word、Excel、PDF等转换为Markdown格式)

MarkItDown的使用(将Word、Excel、PDF等转换为Markdown格式) 本文目录: 零、时光宝盒🌻 一、简介 二、安装 三、使用方法 3.1、使用命令行形式 3.2、用 Python 调用 四、总结 五、参考资料 零、时光宝盒🌻 &a…

数字工厂管理系统就是ERP系统吗

在制造业数字化转型的进程中,数字工厂管理系统与ERP系统常常被提及,不少人疑惑这两者是否为同一概念。事实上,它们虽有联系,却存在诸多显著差异。 ERP系统,即企业资源计划系统,其核心在于对企业全方位资源的…

【Linux】Linux开发利器:make与Makefile自动化构建详解

Linux相关知识点可以通过点击以下链接进行学习一起加油!初识指令指令进阶权限管理yum包管理与vim编辑器GCC/G编译器 在现代软件开发中,自动化构建工具显得尤为重要,make和Makefile是Linux环境下的常用选择。它们通过定义规则和依赖关系&#…

【MinIO系列】MinIO Client (mc) 完全指南

💝💝💝欢迎来到我的博客,很高兴能够在这里和您见面!希望您在这里可以感受到一份轻松愉快的氛围,不仅可以获得有趣的内容和知识,也可以畅所欲言、分享您的想法和见解。 推荐:kwan 的首页,持续学…

在跨平台开发环境中构建高效的C++项目:从基础到最佳实践20241225

在跨平台开发环境中构建高效的C项目:从基础到最佳实践 引言 在现代软件开发中,跨平台兼容性和高效开发流程是每个工程师追求的目标。尤其是对于 C 开发者,管理代码的跨平台构建以及调试流程可能成为一项棘手的挑战。在本文中,我…

2. SQL窗口函数使用

背景 窗口函数也叫分析函数,主要用于处理相对复杂的报表统计分析场景,这个功能在大多商业数据库和部分开源数据库中已经支持,mysql从8.0开始支持窗口函数。经典使用场景是数据错位相减的场景,比如求查询每年支付时间间隔最长的用…

Qt creator ,语言家功能缺失解决方法

1、找到工具->外部->配置 2、添加目录,双击命名语言家 3、在语言家目录下,添加工具 双击重命名lupdate,即更新翻译 %{CurrentDocument:Project:QT_INSTALL_BINS}\lupdate%{CurrentDocument:Project:FilePath}%{CurrentDocument:Projec…

软件测试之全链路压测详解

随着业务的快速发展我们日常遇到的系统性能压力问题也逐渐出现,甚至在部分场合会遇到一些突发的营销活动,会导致系统性能突然暴涨,可能导致我们系统的瘫痪。最近几年随着电商的各种促销活动,有一个词也渐渐进入我们眼帘&#xff0…

基于推理的目标检测 DetGPT

基于推理的目标检测 DetGPT flyfish detgpt.github.io 近年来,由于大型语言模型(LLMs)的发展,计算机视觉领域取得了重大进展。这些模型使人类与机器之间能够进行更有效、更复杂的交互,为模糊人类与机器智能界限的新技…

优化 invite_codes 表的 SQL 创建语句

-- auto-generated definition create table invite_codes (id int auto_incrementprimary key,invite_code varchar(6) not null comment 邀请码,6位整数,确保在有效期内…

如何在 Ubuntu 22.04 上安装以及使用 MongoDB

简介 MongoDB 因其灵活性、可扩展性、性能和生态系统而受到开发人员的青睐,这些都是构建和驱动现代应用程序的关键能力。通过几个配置步骤,你就可以在你的 Ubuntu 22.04 LTS 机器上安装 MongoDB,这是 Ubuntu Linux 发行版的最新长期支持版本…

小程序app封装公用顶部筛选区uv-drop-down

参考ui:DropDown 下拉筛选 | 我的资料管理-uv-ui 是全面兼容vue32、nvue、app、h5、小程序等多端的uni-app生态框架 样式示例&#xff1a; 封装公用文件代码 dropDownTemplete <template><!-- 顶部下拉筛选区封装公用组件 --><view><uv-drop-down ref&…

vulnhub靶场-matrix-breakout-2-morpheus攻略(截止至获取shell)

扫描出ip为192.168.121.161 访问该ip&#xff0c;发现只是一个静态页面什么也没有 使用dir dirsearch 御剑都只能扫描到/robots.txt /server-status 两个页面&#xff0c;前者提示我们什么也没有&#xff0c;后面两个没有权限访问 扫描端口&#xff0c;存在81端口 访问&#x…

探索多模态大语言模型(MLLMs)的推理能力

探索多模态大语言模型&#xff08;MLLMs&#xff09;的推理能力 Multimodal Large Language Models (MLLMs) flyfish 原文&#xff1a;Exploring the Reasoning Abilities of Multimodal Large Language Models (MLLMs): A Comprehensive Survey on Emerging Trends in Mult…

C++之红黑树模拟实现

目录 红黑树的概念 红黑树的性质 红黑树的查找效率 红黑树的实现 红黑树的定义 红黑树节点的插入 红黑树的平衡调整 判断红黑树是否平衡 红黑树整体代码 测试代码 上期我们学习了AVL树的模拟实现&#xff0c;在此基础上&#xff0c;我们本期将学习另一个数据结构-…

SDMTSP:粒子群优化算法PSO求解单仓库多旅行商问题,可以更改数据集和起点(MATLAB代码)

一、单仓库多旅行商问题 单仓库多旅行商问题&#xff08;Single-Depot Multiple Travelling Salesman Problem, SD-MTSP&#xff09;&#xff1a;&#x1d45a;个推销员从同一座中心城市出发&#xff0c;访问其中一定数量的城市并且每座城市只能被某一个推销员访问一次&#x…

【Yonghong 企业日常问题 06】上传的文件不在白名单,修改allow.jar.digest属性添加允许上传的文件SH256值?

文章目录 前言问题描述问题分析问题解决1.允许所有用户上传驱动文件2.如果是想只上传白名单的驱动 前言 该方法适合永洪BI系列产品&#xff0c;包括不限于vividime desktop&#xff0c;vividime z-suit&#xff0c;vividime x-suit产品。 问题描述 当我们连接数据源的时候&a…