为什么需要超时控制? 请求时间过长,用户侧可能已经离开本页面了服务端还在消耗资源处理,得到的结果没有意义 过长时间的服务端处理会占用过多资源,导致并发能力下降,甚至出现不可用事故。..
一、Go超时控制
1.1 为什么需要超时控制?
请求时间过长,用户侧可能已经离开本页面了,服务端还在消耗资源处理,得到的结果没有意义
过长时间的服务端处理会占用过多资源,导致并发能力下降,甚至出现不可用事故
1.2 Go 超时控制必要性
Go 正常都是用来写后端服务的,一般一个请求是由多个串行或并行的子任务来完成的,每个子任务可能是另外的内部请求,那么当这个请求超时的时候,我们就需要快速返回,释放占用的资源,比如goroutine,文件描述符等。
服务端常见的超时控制
进程内的逻辑处理
读写客户端请求,比如HTTP或者RPC请求
调用其它服务端请求,包括调用RPC或者访问DB等
1.3 没有超时控制会怎样
为了简化本文,我们以一个请求函数hardWork
为例,用来做啥的不重要,顾名思义,可能处理起来比较慢。
1 | func hardWork(job interface{}) error { |
这时客户端看到的就一直是大家熟悉的画面
1 | <img src="https://oscimg.oschina.net/oscnet/loading.jpg" width="25%"> |
绝大部分用户都不会看一分钟菊花,早早弃你而去,空留了整个调用链路上一堆资源的占用,本文不究其它细节,只聚焦超时实现。
下面我们看看该怎么来实现超时,其中会有哪些坑。
1.4 第一版实现
大家可以先不往下看,自己试着想想该怎么实现这个函数的超时,第一次尝试:
1 | ctx, cancel := context.WithTimeout(ctx, time.Second*2) |
1 | done := make(chan error) |
1 | select { |
return err
1 | case <-ctx.Done(): |
}
`我们写个 main 函数测试一下```text
1 | func main() { |
}
`跑一下试试效果```text
➜ go run timeout.go
1 | elapsed: 2.005725931s |
1 |
|
time.Sleep(time.Minute*2)
fmt.Println(“number of goroutines:”, runtime.NumGoroutine())
1 |
sleep 2分钟是为了等待所有任务结束,然后我们打印一下当前goroutine数量。让我们执行一下看看结果
number of goroutines: 1001
goroutine泄露了,让我们看看为啥会这样呢?首先,```text requestWork函数在2秒钟超时后就退出了,一旦text `函数退出,那么text
done channel就没有goroutine接收了,等到执行```javadone <- hardWork(job)1
2
3
4
5
6
7 这行代码的时候就会一直卡着写不进去,导致每个超时的请求都会一直占用掉一个goroutine,这是一个很大的bug,等到资源耗尽的时候整个服务就失去响应了。
那么怎么fix呢?其实也很简单,只要 `make chan` 的时候把
`buffer size`
设为1,如下:
`done := make(chan error, 1)`
不管在是否超时都能写入而不卡住goroutine。此时可能有人会问如果这时写入一个已经没goroutine接收的channel会不会有问题,在Go里面channel不像我们常见的文件描述符一样,不是必须关闭的,只是个对象而已,close(channel)` 只是用来告诉接收者没有东西要写了,没有其它用途。
1 | 改完这一行代码我们再测试一遍: |
elapsed: 2.005655146s
1 | number of goroutines: 1 |
goroutine泄露问题解决了!
1.6 panic 无法捕获
让我们把
函数实现改成 panic("oops") 修改main
函数加上捕获异常的代码如下:
defer func() {
if p := recover(); p != nil {
fmt.Println(“oops, panic”)
}
}()
}()
`此时执行一下就会发现panic是无法被捕获的,原因是因为在```text
1 | 内部起的goroutine里产生的panic其它goroutine无法捕获。 |
}
1 | }() |
1 | }() |
1 | case p := <-panicChan: |
}
改完就可以在```text的调用方处理```text
panic
1 | 了。 |
1.8 Data race
这里
只是返回了一个error
参数,如果需要返回多个参数,那么我们就需要注意data race
go-zero/zrpc/internal/serverinterceptors/timeoutinterceptor.go
1 | ,这里不做赘述。 |
1.10 更多细节
go-zero
源码:
go-zero/core/fx/timeout.go
go-zero/zrpc/internal/clientinterceptors/timeoutinterceptor.go
#### 1.11 项目地址
https://github.com/tal-tech/go-zero
https://gitee.com/kevwan/go-zero
欢迎使用
并 star 支持我们!
#### 1.12 微信交流
本文标题: 如何实现Go超时控
发布时间: 2021年02月17日 00:00
最后更新: 2025年12月30日 08:54
原始链接: https://haoxiang.eu.org/9a43d001/
版权声明: 本文著作权归作者所有,均采用CC BY-NC-SA 4.0许可协议,转载请注明出处!

