← 返回文章列表

Go 调度器为什么需要 P:G-M-P 与系统调用交接

Go 调度器引入 P 之后,阻塞系统调用不再拖住整条执行队列。G、M、P 各自负责什么,本地队列、工作窃取与 syscall 交接如何配合,以及 GOMAXPROCS 调大为何不一定更快。

◆

Go 程序里一个 goroutine 卡在阻塞的 read 上,其他 goroutine 照常推进。这件事由 runtime 在系统调用前后安排,关键在 G、M、P 三个结构的分工。

G 是 goroutine,保存栈、指令位置和状态;M 是 machine,对应一个操作系统线程,由内核调度;P 是 processor,即逻辑处理器,数量默认等于 GOMAXPROCS,持有可运行 goroutine 的本地队列和分配器缓存 mcache。同一时刻只有拿到 P 的 M 才能执行 Go 代码。这条约束解释了 P 的存在:可并行执行的额度由 P 的数量决定,M 只是载体,数量可以随阻塞情况增减。

在只有 G 和 M 的早期调度器里,两个问题都出在这个“额度”上。所有 M 从同一个全局队列取 G,锁争用随核数上升;更麻烦的是阻塞系统调用——M 被内核挂起时,它手上的待执行 goroutine 一起停摆,runtime 只能不断创建新 M 来维持并行度,线程数随阻塞调用增长。Go 1.1 引入 P,把执行额度从线程上剥离出来。

M 进入系统调用时调用 entersyscall,把 P 交还调度器;另一个空闲 M 拿到这个 P,继续跑本地队列里的 G。系统调用返回时,M 走 exitsyscall,尝试再取一个空闲 P;取不到就把 G 放进全局队列,自己休眠。这条路径上的关键是交还动作的时机:P 在系统调用期间不属于任何线程,但队列里的 goroutine 仍然可被别的 M 消费。

取任务的顺序也围绕 P 设计。本地队列有固定长度上限,满了就把一半迁到全局队列;空闲的 P 在 findrunnable 中先查本地队列,再查全局队列,然后随机挑一个其他 P 偷走一半。多数取任务走本地路径,不需要抢全局锁。代价是窃取时的原子操作、P 交接过程中的窗口期,以及需要 sysmon 监控长时间运行的 G——Go 1.14 起用基于信号的异步抢占处理死循环占住 P 的情况。

GOMAXPROCS 调大不一定更快:P 多了,窃取和全局队列的竞争同步增加;容器里 CPU 配额与 GOMAXPROCS 不一致时,P 的数量与实际可用核数脱节,交还和窃取的开销仍然要付。要判断自己的负载是否受调度影响,可以用 runtime/trace 观察系统调用阻塞期间 P 的交还次数和 goroutine 在不同 P 上的迁移,通常比直接改 GOMAXPROCS 更能定位问题。

参考来源

文章标签
# Go# 调度器# 运行时
CONVERSATION

评论

0 组讨论

还没有公开评论,欢迎留下第一条讨论。

参与讨论

评论审核通过后公开显示
∽

感谢你读到这里

继续阅读其他文章