您当前的位置:首页 > 电脑百科 > 程序开发 > 语言 > Go语言

Go语言实现延迟队列

时间:2023-08-29 15:37:07  来源:  作者:程序员技术成长之路

简单Go语言延迟队列思路:

  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
package mAIn
import (  "fmt"  "time")
// Message is a structure that holds the contents of the message.type Message struct {  ID     int  Body   string  Delay  time.Duration}
// delayMessageQueue holds the queue of messagestype delayMessageQueue struct {  queue []Message}
func (d *delayMessageQueue) send(msg Message) {  go func() {    timer := time.NewTimer(msg.Delay)    <-timer.C    d.queue = Append(d.queue, msg)    fmt.Printf("Message %d sentn", msg.ID)  }()}
func (d *delayMessageQueue) receive() {  for {    if len(d.queue) > 0 {      msg := d.queue[0]      fmt.Printf("Message %d received n", msg.ID)      d.queue = d.queue[1:] // Dequeue    }  end}
func main() {  dmq := &delayMessageQueue{}  dmq.send(Message{ID: 1, Body: "Hello, World", Delay: 2 * time.Second})  dmq.send(Message{ID: 2, Body: "Hello, Go", Delay: 1 * time.Second})
  // Keep the main function alive to let goroutines finish  time.Sleep(5 * time.Second)
  dmq.receive()}

我们定义了一个消息结构,包含消息ID、消息内容和延迟。我们也定义了一个延迟消息队列,它有两个方法,一个发送消息,一个接收消息。

发送方法将消息放入一个goroutine中,然后用一个定时器等待指定的延迟时间。当定时器到达时,消息会添加到队列中。

接收方法将持续检查队列,一旦发现队列中有消息,就会打印消息内容并将其从队列中移除。通过time到达指定的时间然后进行发送。每个goroutine都有自己的定时器,这是非常低效的。实际上,我们应该使用一个最小堆维护所有的定时器,并且只有一个goroutine在阻塞等待最早的定时器。如果有更早的定时器插入,唤醒那个goroutine并阻塞等待新的最早的定时器。

 

进阶版本

其中所有延迟任务都由一个优先队列(最小堆)进行维护,取出最早到达的任务进行处理。我给出一个简版的示例,其他更多的细节如并发控制、错误处理等,您可以在实际开发中完善。

Go语言标准库container/heap提供了堆操作的实现,通过组合使用该包提供的heap.Pushheap.Pop,可以实现一个优先队列。

  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
package main
import (  "container/heap"  "fmt"  "sync"  "time")
// 优先队列内部维护的队列元素type Item struct {  value    string  priority int64 // 延迟任务到期时间(用时间戳表示)  index    int   // 队列元素在堆中的索引}
// 优先队列:底层用最小堆实现type PriorityQueue []*Item
func (pq PriorityQueue) Len() int { return len(pq) }
// 注意这里比较的是任务的优先级,为了让离当前时间最近的任务在堆顶,我们让比较结果颠倒func (pq PriorityQueue) Less(i, j int) bool {  return pq[i].priority < pq[j].priority}
func (pq PriorityQueue) Swap(i, j int) {  pq[i], pq[j] = pq[j], pq[i]  pq[i].index = i  pq[j].index = j}
// 插入元素func (pq *PriorityQueue) Push(x interface{}) {  n := len(*pq)  item := x.(*Item)  item.index = n  *pq = append(*pq, item)}
// 删除元素func (pq *PriorityQueue) Pop() interface{} {  old := *pq  n := len(old)  item := old[n-1]  old[n-1] = nil  // avoid memory leak  item.index = -1 // for safety  *pq = old[0 : n-1]  return item}
var mutex sync.Mutex // 并发控制互斥锁
// 设定好比cmpTime更晚的任务执行时间并加入堆func addTask(pq *PriorityQueue, cmpTime int64, diff int64) {  mutex.Lock() // 加锁  taskTime := cmpTime + diff*int64(time.Second)  item := &Item{    value:    fmt.Sprintf("任务%d", taskTime),    priority: taskTime,  }  heap.Push(pq, item)  mutex.Unlock() // 解锁}
// 从堆上取出时间最早的任务执行func doTask(pq *PriorityQueue) {  for {    mutex.Lock()    if len(*pq) == 0 {      mutex.Unlock()      continue // 堆空则不处理    }    // 堆非空,取出最早任务项    item := heap.Pop(pq).(*Item)    now := time.Now().Unix()    if item.priority-now > 0 {      // 未到执行时间,任务重新入堆      heap.Push(pq, item)    } else {      // 执行任务      fmt.Printf("%s 执行n", item.value)    }    mutex.Unlock()    // 防止doTask过于紧密,每次循环停顿1秒    time.Sleep(1 * time.Second)  }}
func main() {  pq := make(PriorityQueue, 0)  heap.Init(&pq)
  // 启动执行任务goroutine  go doTask(&pq)
  now := time.Now().Unix()  // 预设3个延迟任务,延迟时间分别为8s, 2s, 5s  addTask(&pq, now, 8)  addTask(&pq, now, 2)  addTask(&pq, now, 5)
  // 保持主进程  time.Sleep(15 * time.Second)}

在这个实现中,我们创建一个优先队列(Priority Queue),优先级最高的任务(即最早执行的任务)总是位于堆的顶部,这样我们可以确保总是首先处理最早执行的任务。当新的任务到来或者任务完成时,我们都用heap.Pushheap.Pop重新调整堆以保证最早执行的任务总是在堆顶。

关于更详细的并发控制以及错误处理,这需要根据实际的业务需求进行对应的修改和处理。

图片

 



Tags:Go语言   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,不构成投资建议。投资者据此操作,风险自担。如有任何标注错误或版权侵犯请与我们联系,我们将及时更正、删除。
▌相关推荐
宝藏级Go语言开源项目——教你自己动手开发互联网搜索引擎
DIYSearchEngine 是一个能够高速采集海量互联网数据的开源搜索引擎,采用 Go 语言开发。Github 地址:https://github.com/johnlui/DIYSearchEngine运行方法首先,给自己准备一杯...【详细内容】
2024-03-12  Search: Go语言  点击:(18)  评论:(0)  加入收藏
你是否想知道如何应对高并发?Go语言为你提供了答案!
并发编程是当前软件领域中不可忽视的一个关键概念。随着CPU等硬件的不断发展,我们都渴望让我们的程序运行速度更快、更快。而Go语言在语言层面天生支持并发,充分利用现代CPU的...【详细内容】
2023-12-29  Search: Go语言  点击:(107)  评论:(0)  加入收藏
Go语言实现GoF设计模式:适配器模式
简介适配器模式(Adapter)是最常用的结构型模式之一,在现实生活中,适配器模式也是处处可见,比如电源插头转换器,它可以让英式的插头工作在中式的插座上。GoF 对它的定义如下:Convert...【详细内容】
2023-12-12  Search: Go语言  点击:(207)  评论:(0)  加入收藏
Go语言字符串拼接方式与性能比较,分析过没?
在Go语言中,字符串拼接性能是相当高效的,主要原因有两点:一是字符串在Go中是不可变的(immutable),二是Go语言提供了strings.Builder类型来高效处理字符串拼接。1. 字符串是不可变...【详细内容】
2023-12-11  Search: Go语言  点击:(229)  评论:(0)  加入收藏
一篇学会AI与Go语言无缝对接
在当今应用开发领域,类似OpenAI API等生成式AI技术的蓬勃发展正在彻底改变着应用开发的格局。Python和JavaScript等语言已经拥有丰富的资源来支持这些技术,其中LangChain就是...【详细内容】
2023-12-04  Search: Go语言  点击:(141)  评论:(0)  加入收藏
20小时快速入门Go语言
Go语言是由Google开发的一种高效、简洁和并发性强的编程语言,其设计目标是使得程序员能够更加容易地创建可靠、高效的软件。尽管Go语言的语法相对其他编程语言来说可能更加陌...【详细内容】
2023-12-03  Search: Go语言  点击:(154)  评论:(0)  加入收藏
十个令人惊叹的Go语言技巧,让你的代码更加优雅
在开发生产项目的过程中,我注意到经常会发现自己在重复编写代码,使用某些技巧时没有意识到,直到后来回顾工作时才意识到。为了解决这个问题,我开发了一种解决方案,对我来说非常有...【详细内容】
2023-11-20  Search: Go语言  点击:(172)  评论:(0)  加入收藏
Go语言Context应用全攻略:异步编程利器
概述在 Go 语言中,Context(上下文)是一个非常重要的概念,特别是在处理请求时。允许在请求的整个生命周期内传递数据、控制请求的取消、处理超时等。本文将介绍 Go 语言中 Contex...【详细内容】
2023-11-06  Search: Go语言  点击:(304)  评论:(0)  加入收藏
Go语言高级特性:Context深入解读
概述在 Go 语言中,context(上下文)是一个非常重要的概念。它主要用于在多个 goroutine 之间传递请求特定任务的截止日期、取消信号以及其他请求范围的值。3. Context 的取消与...【详细内容】
2023-11-01  Search: Go语言  点击:(232)  评论:(0)  加入收藏
Go语言中如何实现JWT
什么JWTJWT(JSON Web Token)是一种开放标准(RFC 7519),定义了一种在各方之间安全传输信息的简洁方式。这些信息可以被验证和信任,因为它们是数字签名的。JWT由三部分组成,用.分隔。...【详细内容】
2023-09-11  Search: Go语言  点击:(250)  评论:(0)  加入收藏
▌简易百科推荐
宝藏级Go语言开源项目——教你自己动手开发互联网搜索引擎
DIYSearchEngine 是一个能够高速采集海量互联网数据的开源搜索引擎,采用 Go 语言开发。Github 地址:https://github.com/johnlui/DIYSearchEngine运行方法首先,给自己准备一杯...【详细内容】
2024-03-12  OSC开源社区    Tags:Go语言   点击:(18)  评论:(0)  加入收藏
Go Gin框架实现优雅地重启和停止
在Web应用程序中,有时候我们需要重启或停止服务器,无论是因为更新代码还是进行例行维护。在这种情景下,我们需要保证应用程序的可用性和数据的一致性。这就需要优雅地关闭和重...【详细内容】
2024-01-30  源自开发者  微信公众号  Tags:Go   点击:(67)  评论:(0)  加入收藏
如何让Go程序以后台进程或daemon方式运行
本文探讨了如何通过Go代码实现在后台运行的程序。最近我用Go语言开发了一个WebSocket服务,我希望它能在后台运行,并在异常退出时自动重新启动。我的整体思路是将程序转为后台...【详细内容】
2024-01-26  Go语言圈  微信公众号  Tags:Go程序   点击:(60)  评论:(0)  加入收藏
深入Go底层原理,重写Redis中间件实战
Go语言以其简洁、高效和并发性能而闻名,深入了解其底层原理可以帮助我们更好地利用其优势。在本文中,我们将探讨如何深入Go底层原理,以及如何利用这些知识重新实现一个简单的Re...【详细内容】
2024-01-25  547蓝色星球    Tags:Go   点击:(66)  评论:(0)  加入收藏
Go 内存优化与垃圾收集
Go提供了自动化的内存管理机制,但在某些情况下需要更精细的微调从而避免发生OOM错误。本文将讨论Go的垃圾收集器、应用程序内存优化以及如何防止OOM(Out-Of-Memory)错误。Go...【详细内容】
2024-01-15  DeepNoMind  微信公众号  Tags:Go   点击:(61)  评论:(0)  加入收藏
Go函数指针是如何让你的程序变慢的?
导读Go 语言的常规优化手段无需赘述,相信大家也能找到大量的经典教程。但基于 Go 的函数值问题,业界还没有太多深度讨论的内容分享。本文作者根据自己对 Go 代码的使用与调优...【详细内容】
2024-01-15  腾讯云开发者  微信公众号  Tags:Go函数   点击:(86)  评论:(0)  加入收藏
Go编程中调用外部命令的几种场景
在很多场合, 使用Go语言需要调用外部命令来完成一些特定的任务, 例如: 使用Go语言调用Linux命令来获取执行的结果,又或者调用第三方程序执行来完成额外的任务。在go的标准库...【详细内容】
2024-01-09  suntiger    Tags:Go编程   点击:(102)  评论:(0)  加入收藏
Go 语言不支持并发读写 Map,为什么?
Go语言的map类型不支持并发读写的主要原因是并发读写会导致数据竞态(data race),这意味着多个 goroutine 可能同时访问并修改同一个 map,从而引发不确定的结果。在Go语言的设计...【详细内容】
2024-01-05  Go语言圈  微信公众号  Tags:Go 语言   点击:(77)  评论:(0)  加入收藏
Go微服务入门到容器化实践
Go微服务入门到容器化实践Go 是一门高效、现代化、快速增长的编程语言,非常适合构建 Web 应用程序。而 Docker 是一种轻量级的容器化技术,能够使得您的应用程序在任何地方运行...【详细内容】
2024-01-01  大雷家吃饭    Tags:Go微服务   点击:(62)  评论:(0)  加入收藏
你是否想知道如何应对高并发?Go语言为你提供了答案!
并发编程是当前软件领域中不可忽视的一个关键概念。随着CPU等硬件的不断发展,我们都渴望让我们的程序运行速度更快、更快。而Go语言在语言层面天生支持并发,充分利用现代CPU的...【详细内容】
2023-12-29  灵墨AI探索室  微信公众号  Tags:Go语言   点击:(107)  评论:(0)  加入收藏
站内最新
站内热门
站内头条