邹进
|
c36c9fcd84
|
perf: 运营商账户轮询初始化按批写入 Redis
构建并部署到测试环境（无 SSH） / build-and-deploy (push) Successful in 11m6s
初始化每批 2000 张卡，原先逐张写入账户队列，每张卡约 4 次 Redis 往返；
测试环境 Redis 走外网，约 750 张/分钟，9.7 万张卡要 2 小时以上，期间未加载的卡不轮询。
新增 Store.UpsertBatch：一次往返读出各卡原账户与优先队列状态，一次往返写入整批；
单卡 Upsert 复用同一逻辑，写入规则不变。批量写入失败时本轮初始化失败、下一轮重试。
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
|
2026-10-29 23:28:28 +09:00 |
|
邹进
|
2fe7c1f8ac
|
feat: 按运营商账户调度的分发器、卡任务执行器与模式切换
- 四个轮询处理器拆为步骤函数 Step（返回结果分类），旧 Asynq Handle 只做并发控制与原有重入队映射，行为不变；carrier 模式下旧 handler 直接结束
- 网关限流增加等待模式（ctx 标记），NSQ 消费者等名额到单步超时，超时按限流处理不计失败；记录限流等待次数
- 卡任务执行器：核对 token 并抢执行权，按配置步骤顺序串行执行到期检查（单步超时、总超时、panic 恢复、流量已触发评估时跳过套餐），执行中续期并 Touch，续期失败立即停止；收尾写回到期、连续失败、退避、延迟确认与告警
- 分发器：每秒按账户抢分发锁领取（执行上限按消费能力收紧、优先占比、按限流组剩余 QPS 估算），发布到 polling.card.{账户}，发布失败释放；消费旧优先提示与手动触发；心跳与处理中标记到期计数
- NSQ 生产者与按账户动态订阅的消费者管理器，优雅退出宽限期
- 失败告警异步写 tb_polling_failure_alert（同卡同类型一条未处理，成功转已恢复），账户窗口内告警数超阈值产生账户级告警
- 模式监听：切 carrier 时旧分片调度停止出队，加锁初始化新结构后开始领取并订阅；回 legacy 时停止消费、重建旧分片队列；生命周期（API 与 Worker）在 carrier 模式写账户队列
|
2026-10-25 18:44:23 +09:00 |
|
邹进
|
dae44bed30
|
feat: 按运营商账户调度的迁移、配置与账户队列 Lua
- 迁移 000251~000254：运营商账户调度参数、请求检查场景（预置 8 个）、卡轮询失败告警表，以及调度模式、步骤、退避、告警等受控系统配置（默认 legacy，行为不变）；并发配置表注释标记废弃
- 受控系统配置注册与 JSON 结构校验：步骤只能是 4 种检查类型且不重复、退避序列递增
- yaml 增加 NSQ 地址、msg_timeout、租约、续期间隔、分发间隔、默认执行上限与 max_in_flight；引入 go-nsq
- 测试环境 docker-compose 增加 nsqlookupd 与 nsqd，Worker 注入 NSQ 地址
- 账户队列 Redis 结构与 Lua：领取（执行上限、优先占比、按限流组剩余 QPS 估算）、抢执行权、续期、收尾、请求检查（合并、冷却、执行中打优先标记）、移出、发布失败释放
|
2026-10-25 18:28:42 +09:00 |
|