Go / 系统课时

用缓冲 channel 控制吞吐

用缓冲 channel 控制吞吐

缓冲 channel 在发送方与接收方之间增加一个有限队列,可以吸收短时突发,让双方不必每次发送都同步会合。本篇用 len、cap 观察队列状态,并区分“允许暂存多少任务”和“程序是否正确结束”这两件事。

学习目标

  • 区分无缓冲 channel 与有缓冲 channel 的发送阻塞条件
  • 使用 len(ch) 和 cap(ch) 观察缓冲区当前状态
  • 用有限容量形成背压,而不是靠扩大缓冲掩盖消费速度不足

缓冲改变的是发送何时阻塞

make(chan T) 创建无缓冲 channel。发送必须等到另一个 goroutine 已准备接收;make(chan T, n) 则允许最多 n 个尚未接收的值暂存在缓冲区中。当缓冲已满时,下一次发送仍会阻塞。

无缓冲与有缓冲 channel 的发送接收关系

下面的程序先完成一次无缓冲交接,再向容量为 2 的 channel 写入两个整数。由于两个写入都没有超过容量,因此主 goroutine 不需要等待接收者。

go
package main

import "fmt"

func main() {
	unbuffered := make(chan string)
	go func() {
		unbuffered <- "ready"
	}()
	fmt.Println(<-unbuffered)

	buffered := make(chan int, 2)
	buffered <- 10
	buffered <- 20
	fmt.Printf("queued=%d capacity=%d\n", len(buffered), cap(buffered))

	fmt.Printf("receive=%d\n", <-buffered)
	fmt.Printf("queued=%d capacity=%d\n", len(buffered), cap(buffered))
}

预期输出

text
ready
queued=2 capacity=2
receive=10
queued=1 capacity=2

cap(buffered) 在 channel 生命周期内保持为 2;len(buffered) 表示此刻缓冲区中尚未被接收的元素数量。这里的 len 适合诊断和观测,不适合作为“先检查再发送”的并发条件,因为检查结束后其他 goroutine 就可能改变状态。

用有限容量形成背压

真实任务队列通常应设置有限容量。例如消费者平均每秒处理 100 个任务,而生产端可能瞬时送入 120 个任务,可以给队列留出 20~50 个槽位吸收短时峰值;如果生产速度长期高于消费速度,队列最终仍会填满,此时发送方阻塞正是背压信号。

假设 jobs := make(chan Job, 32),32 表示最多暂存 32 个尚未领取的任务,并不表示同时执行 32 个任务。真正的并发度由读取该 channel 的 worker 数量决定:4 个 worker 通常意味着最多约 4 个任务同时执行,队列容量只是等待区大小。

不要用更大的缓冲修复并发错误

如果生产者忘记关闭 channel,消费者使用 for v := range ch 时仍会永久等待;把容量从 10 改成 10000 不会修复这个问题。关闭责任应由确定“不会再发送”的一方承担,并且只能关闭一次。

同样,容量也不能替代并发控制。若目标是限制最多同时访问数据库的 goroutine 数量,应使用固定数量的 worker,或使用容量为并发上限的信号量式 channel;若目标只是吸收生产与消费之间的短时速率差,再使用任务缓冲队列。

合理的缓冲容量应该能解释成具体的排队预算,例如“最多积压 32 个任务”或“允许约 100 毫秒突发”,而不是为了让偶发死锁或超时暂时消失而不断扩大数字。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

用缓冲 channel 控制吞吐

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通