邹进
|
4f404a11b0
|
perf: 运营商账户分发按账户并行，互不等待
构建并部署到测试环境（无 SSH） / build-and-deploy (push) Successful in 12m48s
分发器每轮原先逐个处理全部运营商账户，每个账户多次 Redis 往返；
测试环境 Redis 走外网，41 个账户一轮约 19 秒，每个账户每 19 秒只领一次，
慢账户拖住其他账户。改为每轮各账户在独立 goroutine 中抢锁并领取，
一轮耗时取决于最慢账户；账户分发锁不变，多实例下同一账户仍只有一个实例领取。
测试环境 worker 的 Redis 连接池由默认 10 调为 100，避免并行分发与轮询执行争抢连接。
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
|
2026-10-29 23:57:54 +09:00 |
|
邹进
|
c36c9fcd84
|
perf: 运营商账户轮询初始化按批写入 Redis
构建并部署到测试环境（无 SSH） / build-and-deploy (push) Successful in 11m6s
初始化每批 2000 张卡，原先逐张写入账户队列，每张卡约 4 次 Redis 往返；
测试环境 Redis 走外网，约 750 张/分钟，9.7 万张卡要 2 小时以上，期间未加载的卡不轮询。
新增 Store.UpsertBatch：一次往返读出各卡原账户与优先队列状态，一次往返写入整批；
单卡 Upsert 复用同一逻辑，写入规则不变。批量写入失败时本轮初始化失败、下一轮重试。
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
|
2026-10-29 23:28:28 +09:00 |
|
邹进
|
d4fde99cc3
|
fix: 停复机成功后上游状态滞后导致暂停轮询的卡到期或退款漏停
构建并部署到测试环境（无 SSH） / build-and-deploy (push) Successful in 9m29s
- 停复机成功后保护窗口内（polling.stop_resume.status_grace_seconds，默认 300 秒）查卡状态返回操作前的状态视为上游滞后，不回写网络状态
- 套餐到期、退款场景不看库里的开停状态，资产无可用主套餐即停机，上游已停时按已是目标状态结束
- 迁移 000257 插入保护窗口配置
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
|
2026-10-26 10:41:45 +09:00 |
|
邹进
|
a4e3fe4d8f
|
fix: 停复机指令队列审查问题
构建并部署到测试环境（无 SSH） / build-and-deploy (push) Successful in 9m24s
- 开关开启但分发器心跳缺失时回退为当场执行，避免指令无人消费
- 待确认指令先查上游状态再判断；执行期间被覆盖时把待确认带到新指令
- 同方向失败退避中重复写入不提前执行时间
- 领取容量把执行上限与本秒剩余 QPS 分开计算
- 队列复机共用单卡复机锁；执行上下文取消后按结果未知确认
- 消费者并行停止；读取最近调用时间失败时不覆盖；成功但终结日志失败按成功处理
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
|
2026-10-26 00:43:58 +09:00 |
|
邹进
|
934a3a27a1
|
feat: 停复机指令队列与设备维度判断
构建并部署到测试环境（无 SSH） / build-and-deploy (push) Has been cancelled
自动停复机统一经停复机指令队列执行（全局开关 polling.stop_resume.queue_enabled，默认关闭）：
- 统一判断函数 decideCard，新旧路径共用；暂停轮询的卡在套餐到期、退款场景照常停机
- 同卡一条指令、版本号覆盖；领取校验单卡最小重试间隔；先于卡任务领取，不受 scheduler_mode 限制
- 执行器只调用一次网关，按错误分类退避与告警，结果未知在队列内确认
- 设备维度判断合并请求与场景，版本变化再判断，旧路径持设备锁时推后
- 套餐激活、重置、订单、流量扣减、套餐到期、退款、实名管控修改改为请求评估
- 监控增加停复机队列与近 1 小时执行计数，单卡轮询状态返回当前指令
- 迁移 000255 插入开关与告警、退避参数
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
|
2026-10-26 00:36:26 +09:00 |
|
邹进
|
1369fed642
|
fix: 账户限流预算小于单卡调用数时卡永远领不到
构建并部署到测试环境（无 SSH） / build-and-deploy (push) Successful in 9m36s
领取脚本在一张卡同组到期调用数大于剩余预算时停止领取，账户 QPS 很小或长期接近上限时，同时到期多项的卡会一直排不上，整个账户停止轮询。改为本轮该组尚未占用且预算大于 0 时至少放行一张，超出部分由网关限流等待模式排队；预算为 0 时仍不领取。
|
2026-10-25 23:39:25 +09:00 |
|
邹进
|
2fe7c1f8ac
|
feat: 按运营商账户调度的分发器、卡任务执行器与模式切换
- 四个轮询处理器拆为步骤函数 Step（返回结果分类），旧 Asynq Handle 只做并发控制与原有重入队映射，行为不变；carrier 模式下旧 handler 直接结束
- 网关限流增加等待模式（ctx 标记），NSQ 消费者等名额到单步超时，超时按限流处理不计失败；记录限流等待次数
- 卡任务执行器：核对 token 并抢执行权，按配置步骤顺序串行执行到期检查（单步超时、总超时、panic 恢复、流量已触发评估时跳过套餐），执行中续期并 Touch，续期失败立即停止；收尾写回到期、连续失败、退避、延迟确认与告警
- 分发器：每秒按账户抢分发锁领取（执行上限按消费能力收紧、优先占比、按限流组剩余 QPS 估算），发布到 polling.card.{账户}，发布失败释放；消费旧优先提示与手动触发；心跳与处理中标记到期计数
- NSQ 生产者与按账户动态订阅的消费者管理器，优雅退出宽限期
- 失败告警异步写 tb_polling_failure_alert（同卡同类型一条未处理，成功转已恢复），账户窗口内告警数超阈值产生账户级告警
- 模式监听：切 carrier 时旧分片调度停止出队，加锁初始化新结构后开始领取并订阅；回 legacy 时停止消费、重建旧分片队列；生命周期（API 与 Worker）在 carrier 模式写账户队列
|
2026-10-25 18:44:23 +09:00 |
|
邹进
|
dae44bed30
|
feat: 按运营商账户调度的迁移、配置与账户队列 Lua
- 迁移 000251~000254：运营商账户调度参数、请求检查场景（预置 8 个）、卡轮询失败告警表，以及调度模式、步骤、退避、告警等受控系统配置（默认 legacy，行为不变）；并发配置表注释标记废弃
- 受控系统配置注册与 JSON 结构校验：步骤只能是 4 种检查类型且不重复、退避序列递增
- yaml 增加 NSQ 地址、msg_timeout、租约、续期间隔、分发间隔、默认执行上限与 max_in_flight；引入 go-nsq
- 测试环境 docker-compose 增加 nsqlookupd 与 nsqd，Worker 注入 NSQ 地址
- 账户队列 Redis 结构与 Lua：领取（执行上限、优先占比、按限流组剩余 QPS 估算）、抢执行权、续期、收尾、请求检查（合并、冷却、执行中打优先标记）、移出、发布失败释放
|
2026-10-25 18:28:42 +09:00 |
|