Files
junhong_cmp_fiber/pkg/constants/polling.go
break aab56a6998
All checks were successful
构建并部署到测试环境(无 SSH) / build-and-deploy (push) Successful in 14m13s
feat(轮询优先队列): AUG26-016 卡轮询优先队列、人工入队与读侧接口,归档并同步主 Spec 与证据矩阵
新增 000228 成对迁移 tb_polling_priority_item:卡、任务类型、状态、触发类型、来源订单/套餐使用记录、
触发次数与来源集合、尝试次数、失败原因、人工原因与操作者、店铺快照与各时间列;以活动项部分唯一索引
uq_polling_priority_item_active(仅 deleted_at IS NULL AND status IN ('pending','processing') 占键位)
表达「同卡同任务类型至多一条活动项」,另有状态/时间索引与全列注释;down 守卫在存在活动项或未终态行时
拒绝回滚并给出中文原因。

新增优先轮询请求可靠事件 polling.priority.requested(载荷版本 v1、事件键前缀 prio:)与消费者:只在原
业务事务内追加、幂等键稳定;消费者按卡 × 纳入任务类型(realname/carddata/card_status/package)逐条
建项并在提交后下发执行提示,重复投递只合并触发次数、来源集合与最近触发时间,不新建行也不重复调用。
触发点为四类自动场景 purchase_activated / renewal_activated(按同载体更早套餐使用记录判定)/
queue_activated / addon_activated 与「无有效套餐」no_valid_package(仅在普通套餐轮询来源且存在待生效
套餐使用记录时追加;事件通道显式拒绝 manual_trigger);入队对象恒为卡,绑定设备资产在触发事务内冻结
在用卡快照逐卡建项,不使用设备当前卡槽口径。

轮询共享基类新增认领接缝:四个 Handler(realname/carddata/card_status/package)在并发信号量之后、调用
上游之前探测活动项——待执行条件认领、执行中且 90 秒租约未到期则跳过并延后、无活动项时行为与既有完全
等价;超租约允许相邻执行接管,尝试次数只在真正发起执行后累加,未达上限(3)回到活动态按既有间隔重排,
达上限或业务校验类失败进入失败终态并保留可安全展示原因;执行前校验卡自身与绑定设备的轮询开关。未引入
通用卡级锁与 Redis 活动标记,分片队列的出队、入队与移除路径未改动。

提示通道按任务类型独立键(polling:priority:{taskType}),与既有手动触发队列分离;调度器在同一周期内先
排空优先提示、再排空手动触发队列,提示排空不受分片背压跳过影响;未新建调度设施或异步任务类型。

新增人工优先入队与只读查询三条路由 POST /api/admin/polling-priority-items、
GET /api/admin/polling-priority-items、GET /api/admin/polling-priority-items/:id:人工入队复用既有轮询
权限判定(抽取为同包共享函数),原因必填,不受每日 500 次上限与 24 小时去重约束,重复抑制由活动项合并
承担;读侧按店铺快照下推数据范围,越权与不存在不可区分,不提供优先级分级、有效期或人工重触发入口。
新增 7 个审计动作(enqueue/claim/fail/retry/complete/dequeue/manual_denied)与资源
polling_priority_item,并按(操作者类型,来源)注册,人工侧与 Worker 侧均通过来源校验。

同步 OpenAPI 文档装配三处与路由注册;归档 Change 至
openspec/changes/archive/2026-09-17-add-priority-polling-queue/ 并同步主 Spec(新增
priority-polling-queue、polling-operations 追加单次执行互斥 Requirement 与三条路由索引)与上下文健康
证据(requirement-evidence 150 行、入口矩阵 http 403 / async 56)。

本机验证:junhong_cmp_test 与隔离 Redis DB 15,未连生产、未启动 Worker/API、未调用运营商上游;迁移
up/down/up 与 down 守卫实测(含 dirty=true 记账口径与 force 恢复),A–F 批 94 PASS、接缝 63 PASS、
提示通道 12 PASS、清理零残留 20 PASS。成功路径 Complete、真并发互斥、尝试上限第 3 次判定、HTTP 层权限
矩阵、通道阈值持锁复机边界与三类生效触发点生产集成留待测试部署验证(见
docs/verification/add-priority-polling-queue-verification.md 第 4 节)。自动化测试按项目决策为 N/A,
未新增 *_test.go。
2026-09-17 14:29:56 +08:00

184 lines
7.6 KiB
Go
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
package constants
// PollingShardCount 轮询队列默认分片数
// 千万级规模下16 分片可将单队列深度控制在 ~60 万以内
const PollingShardCount = 16
// PollingBackpressureThreshold 单分片队列背压阈值
// 超过此深度时Scheduler 跳过该分片本轮出队,防止 Asynq 积压过载
// 默认 50 万,可根据 Asynq Worker 处理速度调整
const PollingBackpressureThreshold = 500_000
// PollingDequeueMaxBatchSize Lua 脚本单次出队上限
// 受 Lua unpack() 的 LUAI_MAXCSTACK 约 8000 限制,保守取 7000
const PollingDequeueMaxBatchSize = 7000
// PollingDefaultMaxConcurrency 并发信号量默认上限
// 读取 Redis 配置 key 失败时使用,作为安全兜底值
// 300支撑 10M 卡、2小时 carddata 间隔Gateway 200ms → 300并发 = 1500任务/秒/类型)
const PollingDefaultMaxConcurrency = 300
// PollingDefaultTotalMaxConcurrency 全部轮询任务共享的默认总并发上限。
const PollingDefaultTotalMaxConcurrency = 100
// PollingMaxConcurrencyLimit 轮询并发配置的代码安全上限。
const PollingMaxConcurrencyLimit = 1000
// PollingConcurrencyKeyTTL 并发计数 key 的过期时间(秒)
// 保证 Worker 意外崩溃defer Decr 未执行)时计数器在此时间内自动归零
const PollingConcurrencyKeyTTL = 600 // 10 分钟
// 轮询手动触发日志状态常量
const (
// PollingManualTriggerStatusPending 轮询手动触发日志状态-待处理
PollingManualTriggerStatusPending = "pending"
// PollingManualTriggerStatusProcessing 轮询手动触发日志状态-处理中
PollingManualTriggerStatusProcessing = "processing"
// PollingManualTriggerStatusCompleted 轮询手动触发日志状态-已完成
PollingManualTriggerStatusCompleted = "completed"
// PollingManualTriggerStatusCancelled 轮询手动触发日志状态-已取消
PollingManualTriggerStatusCancelled = "cancelled"
)
// PollingPriorityMaxAttempts 优先轮询项固定的最大尝试次数。
// 尝试次数只在真正发起执行后累加;达到上限记录失败终态并出队。
// 本值不是可维护配置项,也不改变普通轮询的无限重试策略。
const PollingPriorityMaxAttempts = 3
// PollingPriorityClaimLease 优先轮询项的认领租约(秒)。
// 必须长于既有轮询任务超时 60 秒,为执行收尾与重新入队留出余量;
// 执行中且超过租约仍未被更新的优先项允许相邻执行接管领取。
const PollingPriorityClaimLease = 90
// 轮询优先队列状态常量
const (
// PollingPriorityStatusPending 优先轮询项状态-待执行(活动项)
PollingPriorityStatusPending = "pending"
// PollingPriorityStatusProcessing 优先轮询项状态-执行中(活动项,受认领租约保护)
PollingPriorityStatusProcessing = "processing"
// PollingPriorityStatusCompleted 优先轮询项状态-已完成(终态,已出队)
PollingPriorityStatusCompleted = "completed"
// PollingPriorityStatusFailed 优先轮询项状态-失败出队(终态)
PollingPriorityStatusFailed = "failed"
)
// 轮询优先项触发类型常量
const (
// PollingPriorityTriggerPurchaseActivated 主套餐购买后立即生效
PollingPriorityTriggerPurchaseActivated = "purchase_activated"
// PollingPriorityTriggerRenewalActivated 同载体在本次生效前已存在更早套餐使用记录
PollingPriorityTriggerRenewalActivated = "renewal_activated"
// PollingPriorityTriggerQueueActivated 排队主套餐顺延生效
PollingPriorityTriggerQueueActivated = "queue_activated"
// PollingPriorityTriggerAddonActivated 加油包生效
PollingPriorityTriggerAddonActivated = "addon_activated"
// PollingPriorityTriggerNoValidPackage 资产无有效套餐且存在待生效套餐使用记录
PollingPriorityTriggerNoValidPackage = "no_valid_package"
// PollingPriorityTriggerManual 具备既有人工触发权限的账号人工入队
PollingPriorityTriggerManual = "manual_trigger"
)
// PollingPriorityManualReasonMaxLength 是人工优先入队原因的长度上限,与事实表 manual_reason 列一致。
const PollingPriorityManualReasonMaxLength = 500
// 轮询优先项执行结果常量
const (
// PollingPriorityResultSuccess 优先轮询项执行成功
PollingPriorityResultSuccess = "success"
// PollingPriorityResultFailed 优先轮询项执行失败
PollingPriorityResultFailed = "failed"
)
// 轮询优先项请求可靠事件常量
const (
// OutboxEventTypePollingPriorityRequested 表示业务成功事实请求为该资源的卡建立优先轮询项。
// 载荷中的卡快照在业务事务内冻结,消费者据此逐卡建项并下发执行提示。
OutboxEventTypePollingPriorityRequested = "polling.priority.requested"
// PollingPriorityRequestedPayloadVersionV1 是优先轮询请求事件载荷版本。
PollingPriorityRequestedPayloadVersionV1 = 1
// PollingPriorityEventKeyPrefix 是优先轮询请求事件的 event_id 命名空间前缀。
// 必须与既有 card-observation: 前缀分离:公共 Outbox 的 event_id 是全局幂等键,
// 复用既有前缀会被 OnConflict DoNothing 静默去重,导致加急永不生效且无任何报错。
//
// 长度预算Outbox 的 event_id 列为 varchar(64),前缀与后缀共同保证生成的 ID 明显低于上限
// (当前最长形式为 prio:nvp:{载体检字}:{载体ID}:{秒级时间戳},不超过 43 字符)。
// 前缀与后缀都不得再加长;新增场景必须按同一预算核算。
PollingPriorityEventKeyPrefix = "prio:"
)
// PollingPriorityTaskTypes 返回纳入优先轮询的既有轮询任务类型。
// 一次优先需求对应这些任务类型各执行一次;保护期一致性检查不在集合内。
// 返回新切片,调用方修改不会影响其它调用方。
func PollingPriorityTaskTypes() []string {
return []string{
TaskTypePollingRealname,
TaskTypePollingCarddata,
TaskTypePollingPackage,
TaskTypePollingCardStatus,
}
}
// PollingPriorityStatusName 返回优先轮询项状态的中文名称。
func PollingPriorityStatusName(status string) string {
switch status {
case PollingPriorityStatusPending:
return "待执行"
case PollingPriorityStatusProcessing:
return "执行中"
case PollingPriorityStatusCompleted:
return "已完成"
case PollingPriorityStatusFailed:
return "失败出队"
default:
return "未知"
}
}
// PollingPriorityTriggerName 返回优先轮询项触发类型的中文名称。
func PollingPriorityTriggerName(triggerType string) string {
switch triggerType {
case PollingPriorityTriggerPurchaseActivated:
return "主套餐购买后立即生效"
case PollingPriorityTriggerRenewalActivated:
return "续购套餐生效"
case PollingPriorityTriggerQueueActivated:
return "排队主套餐顺延生效"
case PollingPriorityTriggerAddonActivated:
return "加油包生效"
case PollingPriorityTriggerNoValidPackage:
return "资产无有效套餐"
case PollingPriorityTriggerManual:
return "人工入队"
default:
return "未知"
}
}
// PollingPriorityResultName 返回优先轮询项执行结果的中文名称。
func PollingPriorityResultName(result string) string {
switch result {
case PollingPriorityResultSuccess:
return "成功"
case PollingPriorityResultFailed:
return "失败"
default:
return "未出结果"
}
}
// PollingPriorityTaskTypeName 返回优先轮询任务类型的中文名称。
func PollingPriorityTaskTypeName(taskType string) string {
switch taskType {
case TaskTypePollingRealname:
return "实名检查"
case TaskTypePollingCarddata:
return "流量检查"
case TaskTypePollingPackage:
return "套餐检查"
case TaskTypePollingCardStatus:
return "卡状态检查"
default:
return "未知"
}
}