feat: 实现 IoT 卡轮询系统(支持千万级卡规模)
All checks were successful
构建并部署到测试环境(无 SSH) / build-and-deploy (push) Successful in 6m35s

实现功能:
- 实名状态检查轮询(可配置间隔)
- 卡流量检查轮询(支持跨月流量追踪)
- 套餐检查与超额自动停机
- 分布式并发控制(Redis 信号量)
- 手动触发轮询(单卡/批量/条件筛选)
- 数据清理配置与执行
- 告警规则与历史记录
- 实时监控统计(队列/性能/并发)

性能优化:
- Redis 缓存卡信息,减少 DB 查询
- Pipeline 批量写入 Redis
- 异步流量记录写入
- 渐进式初始化(10万卡/批)

压测工具(scripts/benchmark/):
- Mock Gateway 模拟上游服务
- 测试卡生成器
- 配置初始化脚本
- 实时监控脚本

Co-Authored-By: Claude Opus 4.5 <noreply@anthropic.com>
This commit is contained in:
2026-02-05 17:32:44 +08:00
parent b11edde720
commit 931e140e8e
104 changed files with 16883 additions and 87 deletions

View File

@@ -0,0 +1,55 @@
package dto
import "time"
// PollingOverviewResp 轮询总览响应
type PollingOverviewResp struct {
TotalCards int64 `json:"total_cards" description:"总卡数"`
InitializedCards int64 `json:"initialized_cards" description:"已初始化卡数"`
InitProgress float64 `json:"init_progress" description:"初始化进度0-100"`
IsInitializing bool `json:"is_initializing" description:"是否正在初始化"`
RealnameQueueSize int64 `json:"realname_queue_size" description:"实名检查队列大小"`
CarddataQueueSize int64 `json:"carddata_queue_size" description:"流量检查队列大小"`
PackageQueueSize int64 `json:"package_queue_size" description:"套餐检查队列大小"`
}
// PollingQueueStatusResp 队列状态响应
type PollingQueueStatusResp struct {
TaskType string `json:"task_type" description:"任务类型"`
TaskTypeName string `json:"task_type_name" description:"任务类型名称"`
QueueSize int64 `json:"queue_size" description:"队列大小"`
ManualPending int64 `json:"manual_pending" description:"手动触发待处理数"`
DueCount int64 `json:"due_count" description:"到期待处理数"`
AvgWaitTime float64 `json:"avg_wait_time_s" description:"平均等待时间(秒)"`
}
// PollingQueueStatusListResp 队列状态列表响应
type PollingQueueStatusListResp struct {
Items []*PollingQueueStatusResp `json:"items" description:"队列状态列表"`
}
// PollingTaskStatsResp 任务统计响应
type PollingTaskStatsResp struct {
TaskType string `json:"task_type" description:"任务类型"`
TaskTypeName string `json:"task_type_name" description:"任务类型名称"`
SuccessCount1h int64 `json:"success_count_1h" description:"1小时成功数"`
FailureCount1h int64 `json:"failure_count_1h" description:"1小时失败数"`
TotalCount1h int64 `json:"total_count_1h" description:"1小时总数"`
SuccessRate float64 `json:"success_rate" description:"成功率0-100"`
AvgDurationMs float64 `json:"avg_duration_ms" description:"平均耗时(毫秒)"`
}
// PollingTaskStatsListResp 任务统计列表响应
type PollingTaskStatsListResp struct {
Items []*PollingTaskStatsResp `json:"items" description:"任务统计列表"`
}
// PollingInitProgressResp 初始化进度响应
type PollingInitProgressResp struct {
TotalCards int64 `json:"total_cards" description:"总卡数"`
InitializedCards int64 `json:"initialized_cards" description:"已初始化卡数"`
Progress float64 `json:"progress" description:"进度百分比0-100"`
IsComplete bool `json:"is_complete" description:"是否完成"`
StartedAt time.Time `json:"started_at" description:"开始时间"`
EstimatedETA string `json:"estimated_eta" description:"预计完成时间"`
}