首页 > 文章列表 > 掌握Go语言的并发模式和并行计算

掌握Go语言的并发模式和并行计算

go语言 并行计算 并发模式
175 2023-11-30

随着互联网的快速发展,大规模分布式系统的需求越来越高,而并发编程和并行计算也成为了互联网开发者所必须掌握的技能。而Go语言正是一门为支持并发而生的语言,它在并发编程和并行计算方面的表现非常优秀。本文将介绍Go语言的并发模式和并行计算,并给出一些实际案例来帮助读者深入理解。

一、Go语言的并发模式

Go语言的并发模式主要基于goroutine和channel两个基本构件。goroutine是轻量级的线程,由Go语言的运行时系统(runtime)管理,可以通过go关键字启动,goroutine之间可以通过channel通信。

下面是一个简单的goroutine与channel的例子:

package main

import "fmt"

func printMsg(msg string, ch chan string) {
    ch <- msg
}

func main() {
    ch := make(chan string)
    msgs := []string{"Hello", "Golang", "Parallel"}

    for _, msg := range msgs {
        go printMsg(msg, ch)
    }

    for i := 0; i < len(msgs); i++ {
        fmt.Println(<-ch)
    }
}

代码通过for循环启动了三个goroutine,分别输出三个字符串。printMsg函数将字符串消息写入channel中,main函数再次从channel中读取。

1.1 管道模式

在Go语言中,可以通过管道(pipeline)模式来将多个goroutine串联起来,形成更加复杂的并发系统。管道模式的实现方式通常是通过多个goroutine之间的channel通信,将数据从一个goroutine传递给另一个goroutine,并在每个goroutine中对数据进行处理和转换。下面是一个简单的管道模式例子:

package main

import (
    "fmt"
)

func addOne(in <-chan int, out chan<- int) {
    for val := range in {
        out <- val + 1
    }
    close(out)
} 

func printNums(out <-chan int) {
    for val := range out {
        fmt.Println(val)
    }
}

func main() {    
    nums := []int{1, 2, 3}
    in := make(chan int)
    out := make(chan int)

    go addOne(in, out)

    go printNums(out)

    for _, num := range nums {
        in <- num
    }
    close(in)
}

代码通过define 3个goroutine,分别是输入goroutine、加1处理goroutine和输出goroutine,addOne函数将输入channel中的数据加1后写入输出channel中,printNums函数从输出channel中读取数据并输出。

1.2 选择模式

Go语言的select语句提供了一种便捷的方式来处理多个channel,即选择模式(select pattern)。选择模式允许我们在多个channel中进行非阻塞式的选择操作,当多个channel中有可读或可写的消息时,会自动选择一个进行操作。

下面是一个简单的选择模式例子:

package main

import "fmt"

func ping(ch chan<- string) {
    for {
        ch <- "ping"
    }
}

func pong(ch chan<- string) {
    for {
        ch <- "pong"
    }
}

func printer(ch <-chan string) {
    for {
        fmt.Println(<-ch)
    }
}

func main() {
    ch1 := make(chan string)
    ch2 := make(chan string)
    ch3 := make(chan string)

    go ping(ch1)
    go pong(ch2)
    go printer(ch3)

    for {
        select {
        case msg := <-ch1:
            ch3 <- msg
        case msg := <-ch2:
            ch3 <- msg
        }
    }
}

代码中,ping函数和pong函数向ch1和ch2中分别发送"ping"和"pong"消息,printer函数读取ch3中的消息并输出。main函数中,使用select语句监听ch1和ch2中的消息,将收到的消息通过ch3传递给printer函数进行输出。

二、Go语言的并行计算

Go语言内置的并行计算模块包括sync、atomic和context等。sync和atomic主要使用互斥锁(Mutex)和原子操作(atomic operation)来控制并发数据访问,context用于管理goroutine的上下文信息。下面简单介绍一下这些模块的使用方法:

2.1 互斥锁

互斥锁是保护共享资源的最常用的同步机制之一,也是Go语言最基本的同步机制之一。在Go语言中,可以通过sync包中的Mutex类型来创建一个互斥锁。Mutex类型提供了两个重要的方法:Lock和Unlock。在访问共享资源之前,需要先调用Lock方法获得锁,访问完成后再调用Unlock方法释放锁。下面是一个简单的互斥锁例子:

package main

import (
    "fmt"
    "sync"
)

func addOne(num *int, mutex *sync.Mutex, wg *sync.WaitGroup) {
    mutex.Lock()
    *num += 1
    mutex.Unlock()

    wg.Done()
}

func main() {
    var wg sync.WaitGroup
    var num int

    mutex := &sync.Mutex{}
    for i := 0; i < 1000; i++ {
        wg.Add(1)
        go addOne(&num, mutex, &wg)
    }

    wg.Wait()
    fmt.Println(num)
}

代码中,定义addOne函数来对num变量进行加1操作,加1操作前需要先获得mutex锁,加1操作后需要释放mutex锁。使用WaitGroup来等待所有的goroutine执行完毕并输出最终的结果。

2.2 原子操作

在高并发场景下,互斥锁可能会降低程序性能,因此Go语言提供了原子操作来代替互斥锁。atomic包提供了若干原子操作函数,例如AddInt64、CompareAndSwapInt64、SwapInt64等。使用原子操作可以确保对变量的操作不会被其他goroutine打断,并发执行也不会被影响。下面是一个简单的原子操作例子:

package main

import (
    "fmt"
    "sync/atomic"
)

func addOne(num *int64, count *int64, done chan bool) {
    for i := 0; i < 1000; i++ {
        atomic.AddInt64(num, 1)
    }
    atomic.AddInt64(count, 1)
    done <- true
}

func main() {
    var num int64
    var count int64
    done := make(chan bool)

    for i := 0; i < 100; i++ {
        go addOne(&num, &count, done)
    }

    for i := 0; i < 100; i++ {
        <-done
    }

    fmt.Printf("num=%d, count=%d
", num, count)
}

代码中,使用atomic包的AddInt64函数对num变量进行原子操作,操作完成后通过done通知主线程。count变量则通过普通的AddInt64函数进行累加操作,最终输出num和count的值。

2.3 上下文管理

在Go语言中,常常需要在多个goroutine之间传递上下文信息,例如请求ID、超时设置等。context包提供了一种简便的方式来管理goroutine的上下文信息。在使用context时,通常需要在主goroutine中创建一个父context,在派生goroutine时通过WithCancel、WithDeadline、WithValue等函数来创建子context并传递相应的上下文信息。下面是一个简单的上下文管理例子:

package main

import (
    "context"
    "fmt"
    "time"
)

func worker(ctx context.Context, id int) {
    for {
        select {
        case <-ctx.Done():
            fmt.Printf("worker %d canceled
", id)
            return
        default:
            fmt.Printf("worker %d is working
", id)
            time.Sleep(1 * time.Second)
        }
    }
}

func main() {
    ctx, cancel := context.WithCancel(context.Background())

    for i := 0; i < 3; i++ {
        go worker(ctx, i)
    }

    time.Sleep(5 * time.Second)

    cancel()
}

代码中,使用context包创建一个父context,并通过WithCancel函数创建子context。在worker函数中,使用select语句监听ctx.Done()的信号,当ctx.Done()被关闭时,表示context被取消,worker函数需要退出。在main函数中通过cancel函数关闭子context,并等待子context被取消。运行结果如下:

worker 0 is working
worker 1 is working
worker 2 is working
worker 2 canceled
worker 1 canceled
worker 0 canceled

当父context被取消时,所有的子context都会收到通知并退出执行。

三、结语

本文简单介绍了Go语言的并发模式和并行计算,并介绍了goroutine、channel、互斥锁、原子操作和context等基本构件和模块。通过学习这些基础知识,我们可以更好地掌握Go语言的并发和并行编程,为构建高性能、高并发的互联网应用打下基础。