用Recover来实现更健壮的go程序

缘起:线上的go service 挂了,无法启动。

原因:采用的第三方库有个bug, 在go携程里面执行task的时候会产生out of range 的panic, 而我又把任务队列每次加载的时候重做一次,导致无法启动。

分析:go携程里面某个task执行失败,不应该影响service的正常运行。

解决:在go协程插入recover, 出现panic的时候,自己退出而不影响整个service

 func server(workChan <-chan *Work) {
      for work := range workChan {
          go safelyDo(work)
      }
  }
  
  func safelyDo(work *Work) {
      defer func() {
          if err := recover(); err != nil {
              log.Stderr("work failed:", err)
              debug.PrintStack()
          }
      }()
      do(work)
  }

参考:

http://www.yiibai.com/go/go_error_handle.html