149 lines
3.9 KiB
Go
149 lines
3.9 KiB
Go
|
|
package taskq
|
|||
|
|
|
|||
|
|
import (
|
|||
|
|
"context"
|
|||
|
|
"encoding/json"
|
|||
|
|
"errors"
|
|||
|
|
"fmt"
|
|||
|
|
"log"
|
|||
|
|
"reflect"
|
|||
|
|
"time"
|
|||
|
|
|
|||
|
|
"github.com/hibiken/asynq"
|
|||
|
|
"github.com/rs/xid"
|
|||
|
|
)
|
|||
|
|
|
|||
|
|
// Task 定义泛型任务结构
|
|||
|
|
// T 表示任务数据的类型,必须是结构体
|
|||
|
|
type Task[T any] struct {
|
|||
|
|
// 公开字段:用户配置
|
|||
|
|
Queue string // 任务队列名称
|
|||
|
|
Group string // 任务分组
|
|||
|
|
Name string // 任务名称,唯一标识
|
|||
|
|
MaxRetries int // 最大重试次数
|
|||
|
|
Priority int // 任务优先级(数值越大优先级越高)
|
|||
|
|
TTR time.Duration // 任务超时时间(Time-To-Run)
|
|||
|
|
Handler any // 处理器函数
|
|||
|
|
|
|||
|
|
// 私有字段:运行时反射信息
|
|||
|
|
funcValue reflect.Value // 处理器函数的反射值
|
|||
|
|
dataType reflect.Type // 数据类型的反射信息
|
|||
|
|
inputContext bool // 是否需要 context.Context 参数
|
|||
|
|
inputData bool // 是否需要数据参数
|
|||
|
|
returnError bool // 是否返回 error
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// PublishOption 任务发布选项函数类型
|
|||
|
|
// 用于配置任务发布时的各种选项
|
|||
|
|
type PublishOption func() asynq.Option
|
|||
|
|
|
|||
|
|
// Delay 设置任务延迟执行时间
|
|||
|
|
// 参数 d 表示延迟多长时间后执行
|
|||
|
|
func Delay(d time.Duration) PublishOption {
|
|||
|
|
return func() asynq.Option {
|
|||
|
|
return asynq.ProcessIn(d)
|
|||
|
|
}
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// DelayUntil 设置任务在指定时间执行
|
|||
|
|
// 参数 t 表示任务执行的具体时间点
|
|||
|
|
func DelayUntil(t time.Time) PublishOption {
|
|||
|
|
return func() asynq.Option {
|
|||
|
|
return asynq.ProcessAt(t)
|
|||
|
|
}
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// TTR 设置任务超时时间
|
|||
|
|
// 覆盖任务默认的超时时间配置
|
|||
|
|
func TTR(d time.Duration) PublishOption {
|
|||
|
|
return func() asynq.Option {
|
|||
|
|
return asynq.Timeout(d)
|
|||
|
|
}
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// Retention 设置任务结果保留时间
|
|||
|
|
// 任务执行完成后,结果在 Redis 中保留的时间
|
|||
|
|
func Retention(d time.Duration) PublishOption {
|
|||
|
|
return func() asynq.Option {
|
|||
|
|
return asynq.Retention(d)
|
|||
|
|
}
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// Publish 发布任务到队列
|
|||
|
|
// 将任务数据序列化后发送到 Redis 队列中等待处理
|
|||
|
|
func (t *Task[T]) Publish(ctx context.Context, data T, options ...PublishOption) error {
|
|||
|
|
// 获取 asynq 客户端
|
|||
|
|
c := client.Load()
|
|||
|
|
if c == nil {
|
|||
|
|
return errors.New("taskq: client not initialized, call SetRedis() first")
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// 序列化任务数据为 JSON
|
|||
|
|
payload, err := json.Marshal(data)
|
|||
|
|
if err != nil {
|
|||
|
|
return fmt.Errorf("taskq: failed to marshal task data: %w", err)
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// 构建任务选项
|
|||
|
|
opts := []asynq.Option{
|
|||
|
|
asynq.Queue(t.Queue), // 设置队列名称
|
|||
|
|
asynq.Group(t.Group), // 设置任务组
|
|||
|
|
asynq.MaxRetry(t.MaxRetries), // 设置最大重试次数
|
|||
|
|
asynq.TaskID(xid.New().String()), // 生成唯一任务ID
|
|||
|
|
asynq.Timeout(t.TTR), // 设置超时时间
|
|||
|
|
asynq.Retention(time.Hour * 24), // 设置结果保留24小时
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// 应用用户自定义选项
|
|||
|
|
for _, option := range options {
|
|||
|
|
if opt := option(); opt != nil {
|
|||
|
|
opts = append(opts, opt)
|
|||
|
|
}
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// 发布任务到队列
|
|||
|
|
info, err := c.EnqueueContext(
|
|||
|
|
ctx,
|
|||
|
|
asynq.NewTask(t.Name, payload),
|
|||
|
|
opts...,
|
|||
|
|
)
|
|||
|
|
|
|||
|
|
// 记录任务发布信息(用于调试)
|
|||
|
|
log.Println(info)
|
|||
|
|
|
|||
|
|
return err
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// ProcessTask 处理任务的核心方法
|
|||
|
|
// 由 asynq 服务器调用,根据任务配置动态调用处理器函数
|
|||
|
|
func (t *Task[T]) ProcessTask(ctx context.Context, tsk *asynq.Task) error {
|
|||
|
|
var in []reflect.Value
|
|||
|
|
|
|||
|
|
// 根据配置添加 context.Context 参数
|
|||
|
|
if t.inputContext {
|
|||
|
|
in = append(in, reflect.ValueOf(ctx))
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// 根据配置添加数据参数
|
|||
|
|
if t.inputData {
|
|||
|
|
// 创建数据类型的指针实例
|
|||
|
|
dataValue := reflect.New(t.dataType)
|
|||
|
|
// 反序列化任务载荷
|
|||
|
|
err := json.Unmarshal(tsk.Payload(), dataValue.Interface())
|
|||
|
|
if err != nil {
|
|||
|
|
return err
|
|||
|
|
}
|
|||
|
|
in = append(in, dataValue)
|
|||
|
|
}
|
|||
|
|
|
|||
|
|
// 通过反射调用处理器函数
|
|||
|
|
out := t.funcValue.Call(in)
|
|||
|
|
|
|||
|
|
// 处理返回值
|
|||
|
|
if t.returnError {
|
|||
|
|
// Register 已确保返回类型为 error,无需类型断言
|
|||
|
|
return out[0].Interface().(error)
|
|||
|
|
}
|
|||
|
|
return nil
|
|||
|
|
}
|