Go并发编程sync.Cond的具体使用
简介
go 标准库提供 cond 原语的目的是,为等待 / 通知场景下的并发问题提供支持。cond 通常应用于等待某个条件的一组 goroutine,等条件变为 true 的时候,其中一个 goroutine 或者所有的 goroutine 都会被唤醒执行。
cond 是和某个条件相关,这个条件需要一组 goroutine 协作共同完成,在条件还没有满足的时候,所有等待这个条件的 goroutine 都会被阻塞住,只有这一组 goroutine 通过协作达到了这个条件,等待的 goroutine 才可能继续进行下去。
这个条件可以是我们自定义的 true/false 逻辑表达式。
但是 cond 使用的比较少,因为在大部分场景下是可以被 channel 和 waitgroup 来替换的。
详细介绍
下面就是 cond 的数据结构和对外提供的方法,cond 内部维护了一个等待队列和锁实例。
type cond struct {
nocopy nocopy
// 锁
l locker
// 等待队列
notify notifylist
checker copychecker
}
func newcond(l locker) *cond
func (c *cond) broadcast()
func (c *cond) signal()
func (c *cond) wait()newcond:
newcond方法需要调用者传入一个locker接口,这个接口就lock/unlock方法,所以我们可以传入一个sync.metex对象signal:允许调用者唤醒一个等待当前
cond的goroutine。如果cond等待队列中有一个或者多个等待的goroutine,则从等待队列中移除第一个goroutine并把它唤醒broadcast:允许调用者唤醒所有等待当前
cond的goroutine。如果 cond 等待队列中有一个或者多个等待的goroutine,则清空所有等待的goroutine,并全部唤醒wait:会把调用者放入
cond的等待队列中并阻塞,直到被signal或者broadcast的方法从等待队列中移除并唤醒
案例:redis连接池
可以看一下下面的代码,使用了 cond 实现一个 redis 的连接池,最关键的代码就是在链表为空的时候需要调用 cond 的 wait 方法,将 gorutine 进行阻塞。然后 goruntine 在使用完连接后,将连接返回池子后,需要通知其他阻塞的 goruntine 来获取连接。
package main
import (
"container/list"
"fmt"
"math/rand"
"sync"
"time"
)
// 连接池
type pool struct {
lock sync.mutex // 锁
clients list.list // 连接
cond *sync.cond // cond实例
close bool // 是否关闭
}
// redis client
type client struct {
id int32
}
// 创建redis client
func newclient() *client {
return &client{
id: rand.int31n(100000),
}
}
// 关闭redis client
func (this *client) close() {
fmt.printf("client:%d 正在关闭", this.id)
}
// 创建连接池
func newpool(maxconnnum int) *pool {
pool := new(pool)
pool.cond = sync.newcond(&pool.lock)
// 创建连接
for i := 0; i < maxconnnum; i++ {
client := newclient()
pool.clients.pushback(client)
}
return pool
}
// 从池子中获取连接
func (this *pool) pull() *client {
this.lock.lock()
defer this.lock.unlock()
// 已关闭
if this.close {
fmt.println("pool is closed")
return nil
}
// 如果连接池没有连接 需要阻塞
for this.clients.len() <= 0 {
this.cond.wait()
}
// 从链表中取出头节点,删除并返回
ele := this.clients.remove(this.clients.front())
return ele.(*client)
}
// 将连接放回池子
func (this *pool) push(client *client) {
this.lock.lock()
defer this.lock.unlock()
if this.close {
fmt.println("pool is closed")
return
}
// 向链表尾部插入一个连接
this.clients.pushback(client)
// 唤醒一个正在等待的goruntine
this.cond.signal()
}
// 关闭池子
func (this *pool) close() {
this.lock.lock()
defer this.lock.unlock()
// 关闭连接
for e := this.clients.front(); e != nil; e = e.next() {
client := e.value.(*client)
client.close()
}
// 重置数据
this.close = true
this.clients.init()
}
func main() {
var wg sync.waitgroup
pool := newpool(3)
for i := 1; i <= 10; i++ {
wg.add(1)
go func(index int) {
defer wg.done()
// 获取一个连接
client := pool.pull()
fmt.printf("time:%s | 【goruntine#%d】获取到client[%d]\n", time.now().format("15:04:05"), index, client.id)
time.sleep(time.second * 5)
fmt.printf("time:%s | 【goruntine#%d】使用完毕,将client[%d]放回池子\n", time.now().format("15:04:05"), index, client.id)
// 将连接放回池子
pool.push(client)
}(i)
}
wg.wait()
}运行结果:
time:15:10:25 | 【goruntine#7】获取到client[31847]
time:15:10:25 | 【goruntine#5】获取到client[27887]
time:15:10:25 | 【goruntine#10】获取到client[98081]
time:15:10:30 | 【goruntine#5】使用完毕,将client[27887]放回池子
time:15:10:30 | 【goruntine#6】获取到client[27887]
time:15:10:30 | 【goruntine#10】使用完毕,将client[98081]放回池子
time:15:10:30 | 【goruntine#7】使用完毕,将client[31847]放回池子
time:15:10:30 | 【goruntine#1】获取到client[31847]
time:15:10:30 | 【goruntine#9】获取到client[98081]
time:15:10:35 | 【goruntine#6】使用完毕,将client[27887]放回池子
time:15:10:35 | 【goruntine#3】获取到client[27887]
time:15:10:35 | 【goruntine#1】使用完毕,将client[31847]放回池子
time:15:10:35 | 【goruntine#4】获取到client[31847]
time:15:10:35 | 【goruntine#9】使用完毕,将client[98081]放回池子
time:15:10:35 | 【goruntine#2】获取到client[98081]
time:15:10:40 | 【goruntine#3】使用完毕,将client[27887]放回池子
time:15:10:40 | 【goruntine#8】获取到client[27887]
time:15:10:40 | 【goruntine#2】使用完毕,将client[98081]放回池子
time:15:10:40 | 【goruntine#4】使用完毕,将client[31847]放回池子
time:15:10:45 | 【goruntine#8】使用完毕,将client[27887]放回池子
注意点
- 在调用
wait方法前,需要先加锁,就像我上面例子中pull方法也是先加锁
看一下源码就知道了,因为 wait 方法的执行逻辑是先将 goruntine 添加到等待队列中,然后释放锁,然后阻塞,等唤醒后,会继续加锁。如果在调用 wait 前不加锁,但是里面会解锁,执行的时候就会报错。
//
// c.l.lock()
// for !condition() {
// c.wait()
// }
// ... make use of condition ...
// c.l.unlock()
//
func (c *cond) wait() {
c.checker.check()
// 添加到等待队列
t := runtime_notifylistadd(&c.notify)
c.l.unlock()
// 阻塞
runtime_notifylistwait(&c.notify, t)
c.l.lock()
}- 还是
wait方法,在唤醒后需要继续检查cond条件
就拿上面的 redis 连接案例来进行说明吧,我这里是使用了 for 循环来进行检测。如果将 for 循环改成使用 if,也就是只判断一次,会有什么问题?可以停下来先想想
上面说了调用者也可以使用 broadcast 方法来唤醒 goruntine ,如果使用的是 broadcast 方法,所有的 goruntine 都会被唤醒,然后大家都去链表中去获取 redis 连接了,就会出现部分 goruntine拿不到连接,实际上没有那么多连接可以获取,因为每次只会放回一个连接到池子中。
// 如果连接池没有连接 需要阻塞
for this.clients.len() <= 0 {
this.cond.wait()
}
// 获取连接
ele := this.clients.remove(this.clients.front())
return ele.(*client)到此这篇关于go并发编程sync.cond的具体使用的文章就介绍到这了,更多相关go sync.cond内容请搜索萬仟网以前的文章或继续浏览下面的相关文章希望大家以后多多支持萬仟网!
看完文章,还可以扫描下面的二维码下载快手极速版领4元红包
除了扫码领红包之外,大家还可以在快手极速版做签到,看视频,做任务,参与抽奖,邀请好友赚钱)。
邀请两个好友奖最高196元,如下图所示:







