first commit

This commit is contained in:
张乾
2024-10-16 00:01:16 +08:00
parent ac7d1ed7bc
commit 84ae12296c
322 changed files with 104488 additions and 0 deletions

View File

@ -0,0 +1,201 @@
因收到Google相关通知网站将会择期关闭。相关通知内容
32 context.Context类型
我们在上篇文章中讲到了sync.WaitGroup类型一个可以帮我们实现一对多goroutine协作流程的同步工具。
在使用WaitGroup值的时候我们最好用“先统一Add再并发Done最后Wait”的标准模式来构建协作流程。
如果在调用该值的Wait方法的同时为了增大其计数器的值而并发地调用该值的Add方法那么就很可能会引发panic。
这就带来了一个问题如果我们不能在一开始就确定执行子任务的goroutine的数量那么使用WaitGroup值来协调它们和分发子任务的goroutine就是有一定风险的。一个解决方案是分批地启用执行子任务的goroutine。
前导内容WaitGroup值补充知识
我们都知道WaitGroup值是可以被复用的但需要保证其计数周期的完整性。尤其是涉及对其Wait方法调用的时候它的下一个计数周期必须要等到与当前计数周期对应的那个Wait方法调用完成之后才能够开始。
我在前面提到的可能会引发panic的情况就是由于没有遵循这条规则而导致的。
只要我们在严格遵循上述规则的前提下分批地启用执行子任务的goroutine就肯定不会有问题。具体的实现方式有不少其中最简单的方式就是使用for循环来作为辅助。这里的代码如下
func coordinateWithWaitGroup() {
total := 12
stride := 3
var num int32
fmt.Printf("The number: %d [with sync.WaitGroup]\n", num)
var wg sync.WaitGroup
for i := 1; i <= total; i = i + stride {
wg.Add(stride)
for j := 0; j < stride; j++ {
go addNum(&num, i+j, wg.Done)
}
wg.Wait()
}
fmt.Println("End.")
}
这里展示的coordinateWithWaitGroup函数就是上一篇文章中同名函数的改造版本而其中调用的addNum函数则是上一篇文章中同名函数的简化版本这两个函数都已被放置在了demo67.go文件中
我们可以看到经过改造后的coordinateWithWaitGroup函数循环地使用了由变量wg代表的WaitGroup值它运用的依然是先统一Add再并发Done最后Wait的这种模式只不过它利用for语句对此进行了复用
好了至此你应该已经对WaitGroup值的运用有所了解了不过我现在想让你使用另一种工具来实现上面的协作流程
我们今天的问题就是怎样使用context包中的程序实体实现一对多的goroutine协作流程
更具体地说我需要你编写一个名为coordinateWithContext的函数这个函数应该具有上面coordinateWithWaitGroup函数相同的功能
显然你不能再使用sync.WaitGroup了而要用context包中的函数和Context类型作为实现工具这里注意一点是否分批启用执行子任务的goroutine其实并不重要
我在这里给你一个参考答案
func coordinateWithContext() {
total := 12
var num int32
fmt.Printf("The number: %d [with context.Context]\n", num)
cxt, cancelFunc := context.WithCancel(context.Background())
for i := 1; i <= total; i++ {
go addNum(&num, i, func() {
if atomic.LoadInt32(&num) == int32(total) {
cancelFunc()
}
})
}
<-cxt.Done()
fmt.Println("End.")
}
在这个函数体中我先后调用了context.Background函数和context.WithCancel函数并得到了一个可撤销的context.Context类型的值由变量cxt代表以及一个context.CancelFunc类型的撤销函数由变量cancelFunc代表)。
在后面那条唯一的for语句中我在每次迭代中都通过一条go语句异步地调用addNum函数调用的总次数只依据了total变量的值
请注意我给予addNum函数的最后一个参数值它是一个匿名函数其中只包含了一条if语句这条if语句会原子地加载num变量的值并判断它是否等于total变量的值
如果两个值相等那么就调用cancelFunc函数其含义是如果所有的addNum函数都执行完毕那么就立即通知分发子任务的goroutine
这里分发子任务的goroutine即为执行coordinateWithContext函数的goroutine它在执行完for语句后会立即调用cxt变量的Done函数并试图针对该函数返回的通道进行接收操作
由于一旦cancelFunc函数被调用针对该通道的接收操作就会马上结束所以这样做就可以实现等待所有的addNum函数都执行完毕的功能
问题解析
context.Context类型以下简称Context类型是在Go 1.7发布时才被加入到标准库的而后标准库中的很多其他代码包都为了支持它而进行了扩展包括os/exec包net包database/sql包以及runtime/pprof包和runtime/trace包等等
Context类型之所以受到了标准库中众多代码包的积极支持主要是因为它是一种非常通用的同步工具它的值不但可以被任意地扩散而且还可以被用来传递额外的信息和信号
更具体地说Context类型可以提供一类代表上下文的值此类值是并发安全的也就是说它可以被传播给多个goroutine
由于Context类型实际上是一个接口类型而context包中实现该接口的所有私有类型都是基于某个数据类型的指针类型所以如此传播并不会影响该类型值的功能和安全
Context类型的值以下简称Context值是可以繁衍的这意味着我们可以通过一个Context值产生出任意个子值这些子值可以携带其父值的属性和数据也可以响应我们通过其父值传达的信号
正因为如此所有的Context值共同构成了一颗代表了上下文全貌的树形结构这棵树的树根或者称上下文根节点是一个已经在context包中预定义好的Context值它是全局唯一的通过调用context.Background函数我们就可以获取到它我在coordinateWithContext函数中就是这么做的)。
这里注意一下这个上下文根节点仅仅是一个最基本的支点它不提供任何额外的功能也就是说它既不可以被撤销cancel也不能携带任何数据
除此之外context包中还包含了四个用于繁衍Context值的函数WithCancelWithDeadlineWithTimeout和WithValue
这些函数的第一个参数的类型都是context.Context而名称都为parent顾名思义这个位置上的参数对应的都是它们将会产生的Context值的父值
WithCancel函数用于产生一个可撤销的parent的子值在coordinateWithContext函数中我通过调用该函数获得了一个衍生自上下文根节点的Context值和一个用于触发撤销信号的函数
而WithDeadline函数和WithTimeout函数则都可以被用来产生一个会定时撤销的parent的子值至于WithValue函数我们可以通过调用它产生一个会携带额外数据的parent的子值
到这里我们已经对context包中的函数和Context类型有了一个基本的认识了不过这还不够我们再来扩展一下
知识扩展
问题1:“可撤销的在context包中代表着什么?“撤销一个Context值又意味着什么
我相信很多初识context包的Go程序开发者都会有这样的疑问确实,“可撤销的”(cancelable这个词在这里是比较抽象的很容易让人迷惑我这里再来解释一下
这需要从Context类型的声明讲起这个接口中有两个方法与撤销息息相关Done方法会返回一个元素类型为struct{}的接收通道不过这个接收通道的用途并不是传递元素值而是让调用方去感知撤销当前Context值的那个信号
一旦当前的Context值被撤销这里的接收通道就会被立即关闭我们都知道对于一个未包含任何元素值的通道来说它的关闭会使任何针对它的接收操作立即结束
正因为如此在coordinateWithContext函数中基于调用表达式cxt.Done()的接收操作才能够起到感知撤销信号的作用
除了让Context值的使用方感知到撤销信号让它们得到撤销的具体原因有时也是很有必要的后者即是Context类型的Err方法的作用该方法的结果是error类型的并且其值只可能等于context.Canceled变量的值或者context.DeadlineExceeded变量的值
前者用于表示手动撤销而后者则代表由于我们给定的过期时间已到而导致的撤销
你可能已经感觉到了对于Context值来说,“撤销这个词如果当名词讲指的其实就是被用来表达撤销状态的信号如果当动词讲指的就是对撤销信号的传达可撤销的指的则是具有传达这种撤销信号的能力
我在前面讲过当我们通过调用context.WithCancel函数产生一个可撤销的Context值时还会获得一个用于触发撤销信号的函数
通过调用这个函数我们就可以触发针对这个Context值的撤销信号一旦触发撤销信号就会立即被传达给这个Context值并由它的Done方法的结果值一个接收通道表达出来
撤销函数只负责触发信号而对应的可撤销的Context值也只负责传达信号它们都不会去管后边具体的撤销操作实际上我们的代码可以在感知到撤销信号之后进行任意的操作Context值对此并没有任何的约束
最后若再深究的话这里的撤销最原始的含义其实就是终止程序针对某种请求比如HTTP请求的响应或者取消对某种指令比如SQL指令的处理这也是Go语言团队在创建context代码包和Context类型时的初衷
如果我们去查看net包和database/sql包的API和源码的话就可以了解它们在这方面的典型应用
问题2撤销信号是如何在上下文树中传播的
我在前面讲了context包中包含了四个用于繁衍Context值的函数其中的WithCancelWithDeadline和WithTimeout都是被用来基于给定的Context值产生可撤销的子值的
context包的WithCancel函数在被调用后会产生两个结果值第一个结果值就是那个可撤销的Context值而第二个结果值则是用于触发撤销信号的函数
在撤销函数被调用之后对应的Context值会先关闭它内部的接收通道也就是它的Done方法会返回的那个通道
然后它会向它的所有子值或者说子节点传达撤销信号这些子值会如法炮制把撤销信号继续传播下去最后这个Context值会断开它与其父值之间的关联
在上下文树中传播撤销信号
我们通过调用context包的WithDeadline函数或者WithTimeout函数生成的Context值也是可撤销的它们不但可以被手动撤销还会依据在生成时被给定的过期时间自动地进行定时撤销这里定时撤销的功能是借助它们内部的计时器来实现的
当过期时间到达时这两种Context值的行为与Context值被手动撤销时的行为是几乎一致的只不过前者会在最后停止并释放掉其内部的计时器
最后要注意通过调用context.WithValue函数得到的Context值是不可撤销的撤销信号在被传播时若遇到它们则会直接跨过并试图将信号直接传给它们的子值
问题 3怎样通过Context值携带数据怎样从中获取数据
既然谈到了context包的WithValue函数我们就来说说Context值携带数据的方式
WithValue函数在产生新的Context值以下简称含数据的Context值的时候需要三个参数父值键和值字典对于键的约束类似这里键的类型必须是可判等的
原因很简单当我们从中获取数据的时候它需要根据给定的键来查找对应的值不过这种Context值并不是用字典来存储键和值的后两者只是被简单地存储在前者的相应字段中而已
Context类型的Value方法就是被用来获取数据的在我们调用含数据的Context值的Value方法时它会先判断给定的键是否与当前值中存储的键相等如果相等就把该值中存储的值直接返回否则就到其父值中继续查找
如果其父值中仍然未存储相等的键那么该方法就会沿着上下文根节点的方向一路查找下去
注意除了含数据的Context值以外其他几种Context值都是无法携带数据的因此Context值的Value方法在沿路查找的时候会直接跨过那几种值
如果我们调用的Value方法的所属值本身就是不含数据的那么实际调用的就将会是其父辈或祖辈的Value方法这是由于这几种Context值的实际类型都属于结构体类型并且它们都是通过将其父值嵌入到自身”,来表达父子关系的
最后提醒一下Context接口并没有提供改变数据的方法因此在通常情况下我们只能通过在上下文树中添加含数据的Context值来存储新的数据或者通过撤销此种值的父值丢弃掉相应的数据如果你存储在这里的数据可以从外部改变那么必须自行保证安全
总结
我们今天主要讨论的是context包中的函数和Context类型该包中的函数都是用于产生新的Context类型值的Context类型是一个可以帮助我们实现多goroutine协作流程的同步工具不但如此我们还可以通过此类型的值传达撤销信号或传递数据
Context类型的实际值大体上分为三种根Context值可撤销的Context值和含数据的Context值所有的Context值共同构成了一颗上下文树这棵树的作用域是全局的而根Context值就是这棵树的根它是全局唯一的并且不提供任何额外的功能
可撤销的Context值又分为只可手动撤销的Context值和可以定时撤销的Context值
我们可以通过生成它们时得到的撤销函数来对其进行手动的撤销对于后者定时撤销的时间必须在生成时就完全确定并且不能更改不过我们可以在过期时间达到之前对其进行手动的撤销
一旦撤销函数被调用撤销信号就会立即被传达给对应的Context值并由该值的Done方法返回的接收通道表达出来
撤销这个操作是Context值能够协调多个goroutine的关键所在撤销信号总是会沿着上下文树叶子节点的方向传播开来
含数据的Context值可以携带数据每个值都可以存储一对键和值在我们调用它的Value方法的时候它会沿着上下文树的根节点的方向逐个值的进行查找如果发现相等的键它就会立即返回对应的值否则将在最后返回nil
含数据的Context值不能被撤销而可撤销的Context值又无法携带数据但是由于它们共同组成了一个有机的整体即上下文树所以在功能上要比sync.WaitGroup强大得多
思考题
今天的思考题是Context值在传达撤销信号的时候是广度优先的还是深度优先的其优势和劣势都是什么
戳此查看Go语言专栏文章配套详细代码