使用channel、WaitGroup、扇入模式、errgroup和Mutex等方法可高效合并Go并发任务结果,选择取决于错误处理、性能和顺序需求。
在Golang中处理并发任务时,经常需要将多个协程的结果合并并统一处理。由于Go语言原生支持并发(goroutine 和 channel),实现结果合并的方式灵活多样。以下是几种常见的并发结果合并方法,适用于不同场景。
最基础也最常用的方法是通过一个带缓冲或无缓冲的channel来接收各个goroutine的执行结果。
每个任务完成后,把结果发送到channel,主协程从channel中读取所有结果。
关键点: 确保所有发送操作完成后关闭channel,避免死锁。示例代码结构:
results := make(chan Result, numTasks) var wg sync.WaitGroupfor i := 0; i < numTasks; i++ { wg.Add(1) go func(id int) { defer wg.Done() result := doTask(id) results <- result }(i) }
go func() { wg.Wait() close(results) }()
for result := range results { // 处理每个结果 }
当有多个生产者goroutine时,可以将它们的结果汇聚到一个公共channel中,这称为扇入模式。
特别适合将多个独立数据源的结果合并为一个流。
常见做法是定义一个函数:func merge(cs ...,它返回一个合并后的channel。
对于需要统一处理错误的并发任务,golang.org/x/sync/errgroup 提供了更高级的控制能力。
它不仅能并发执行任务,还能在任意任务出错时取消其他任务,并返回首个错误。
注意:errgroup不直接返回结果,需配合闭包或带锁的slice/map存储结果。
当多个goroutine需要往同一个slice或map中写入结果时,必须使用互斥锁防止竞态条件。
虽然性能不如纯channel方式,但在某些聚合逻辑中更直观。
示例:
var results []Result var mu sync.Mutex var wg sync.WaitGroupfor i := 0; i < n; i++ { wg.Add(1) go func(i int) { defer wg.Done() res := doTask(i) mu.Lock() results = append(results, res) mu.Unlock() }(i) } wg.Wait()
基本上就这些常见模式。选择哪种方式取决于是否需要错误控制、性能要求、结果顺序是否重要等因素。合理组合channel、WaitGroup、Mutex和errgroup,能高效安全地完成并发结果合并。