otium/queue 是go 实现的后台处理任务队列
🕧 Wed, 09 Sep 2015 by GolangNote
otium/queue 是go 实现的后台处理任务队列,轻巧,值得推荐。
一个简单的应用场合,用户上传一个头像,要生成8种不同尺寸的缩略图,假设每处理一个缩略图要1秒,如果是单队列则处理完要8秒,如果同时有8个协程处理,则只需要1秒。
下面是简单的otium/queue 示例:
package main
import (
"fmt"
"time"
"github.com/otium/queue"
)
func main() {
n := 1 // 并发处理数
t1 := time.Now()
fmt.Println("Hello, 世界")
q := queue.NewQueue(func(val interface{}) {
fmt.Println(val)
time.Sleep(time.Second * 2)
}, n)
for i := 0; i < 20; i++ {
q.Push(i)
}
fmt.Println("Hello, 世界 2")
q.Wait()
fmt.Println("Hello, 世界3")
t2 := time.Now()
fmt.Println("消耗时间:", t2.Sub(t1), "秒")
}
输出:
Hello, 世界
0
Hello, 世界 2
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
Hello, 世界3
消耗时间: 40.00296549s 秒
把并发处理数 n
改为20 ,输出:
Hello, 世界
0
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
Hello, 世界 2
18
19
Hello, 世界3
消耗时间: 2.000654742s 秒
但这样的并发任务没有传递任务的计算结果,如果需要获得计算结果,就得借助chan 来完成,可以参考《http://www.golangnote.com/topic/70.html 148》的例子。
otium/queue 项目地址 https://github.com/otium/queue 214
另外一个简单的后台任务实现 https://gist.github.com/harlow/dbcd639cf8d396a2ab73 99 (用标准库) 《http://nesv.github.io/golang/2014/02/25/worker-queues-in-go.html 37》
另外推荐一个比较复杂的 https://github.com/RichardKnop/machinery 109 基于分布式消息传递的异步任务队列/作业队列。
本文网址: https://golangnote.com/topic/53.html (转载注明出处)
关于GolangNote:记录在工作中使用golang 遇到、面临的相关问题及解决方法。如果你在这里获得一些知识或信息,解决你的编程问题,请考虑捐赠给不幸的人或者你喜欢的慈善机构,除捐赠外,种植树木、志愿服务或减少排碳的行为也很有益处。如果你有任何问题可以在下面 留言
Be the first to comment!
Relative Articles
Recent Go Articles
- Golang 把cookie 字符串解析为cookie 结构
- Golang 计算字符串中包含某个或某些字符集的个数
- 使用Golang 对文件增删写读操作备忘
- Go Modules 使用备忘
- 使用Golang 简单删除图片exif 信息
- 谷歌翻译的 golang 库推荐
- Go 1.13.2 与1.13.3 紧急更新
- golang 人脸检测识别库
- Go build 错误 “stackcheck redeclared in this block previous declaration”的解决方法
- Golang phantomjs 动态代理实现
- Golang chrome debug protocol 库推荐
- Golang 随机打乱数组/Slice
- Golang sync.WaitGroup 的 Wait 超时处理
- Golang实现简单的Socks5代理
- Golang 用snappy + Base64 简单压缩加密进行网络传输
- Golang http IPv4/IPv6 服务
- golang 全角半角相互转换
- 在自己的网站部署TLS 1.3
- Golang 实现/打印菜单树
- Golang telegram 机器人小试
Top Go Articles
- golang 人脸检测识别库
- Golang 时区时差处理方式
- golang 把上传文件转为byte
- GoLang Map key 排序输出的例子
- go 获取硬盘的可用空间的方法
- golang 实现python 的dict.keys() dict.values() 函数
- golang 原生xml 转json
- Golang slice 和 map 的查询性能比较
- Caddy、 SSLDocker、Nginx 性能比较及使用体验
- Golang io.ReadCloser 和[]byte 相互转化的方法
- Golang 减小gc 压力、避免内存泄漏小tips
- Golang telegram 机器人小试
- GoLang 遍历目录的不同方法
- Golang 字符串毫秒转时间格式
- iris websocket 自定义信息结构
- golang 正确获取绝对路径的方法
- Golang 随机打乱数组/Slice
- 在go web 应用里避免全局变量
- 关于Golang msgpack 和 json 性能的简单比较
- Golang 合并byte 的性能比较