mirror of
https://github.com/Wei-Shaw/sub2api.git
synced 2026-10-14 12:02:27 +08:00
审计修复,逐条如下。 H1 利润策略泄露给所有普通用户 profit_control_enabled / profit_min_margin / profit_safety_buffer 从 dto.Group 移到 dto.AdminGroup(后者内嵌前者),赋值相应从 groupFromServiceBase 移到 GroupFromServiceAdmin;前端 TS 同步从 Group 移到 AdminGroup。dto.Group 是 GET /api/v1/groups/available 的响应体,该响应本就带 rate_multiplier,相乘即可反推运营方上游采购成本上限。 api_contract_test.go 的 /groups/available golden JSON 回滚这三个字段,并把 fixture 改成非零值(require.JSONEq 是精确比对,缺字段即失败)。 新增 dto 层边界测试:普通用户 DTO 不含三字段、管理员 DTO 仍含。 M1 利润终检 continue 与 failover 503 退避互动产生活锁 FailoverState 新增 profitVetoedAccountIDs / profitVetoCount 与 RecordProfitVeto():加入排除集 + 计数,达 maxProfitVetoAttempts(10) 返回 FailoverExhausted。HandleSelectionExhausted 的 503 清空分支改为清空后把利润 否决的账号放回排除集;若排除集已全部由利润否决贡献,清空不会带来任何新候选, 直接判定耗尽(否则 SwitchCount 永不前进、退避条件永远成立,每 2s 空转一轮)。 五个 handler 否决点(gateway_handler ×2 / responses / chat_completions / gemini_v1beta)改为经 RecordProfitVeto 决策,耗尽时按无可用账号终止。 回归测试钉死:503 之后持续利润否决必须有限步终止且不 spin;未启用利润控制的 请求退避语义完全不变。 M2 排队等槽后才终检,延迟可放大到 N × WaitPlan.Timeout OpenAI 侧选号循环(自有 failedAccountIDs map,非 FailoverState)新增 recordOpenAIProfitVeto + handleOpenAIProfitVetoExhausted,共用同一上限语义。 覆盖 responses / messages-dispatch / chat_completions / alpha_search / embeddings / images / grok_media 七处,以及 WS 两处否决分支。 M4 ws_v2 透传 ingress 绕过 per-turn 重定价(选方案 B:最小止血) 透传 relay 只回调 AfterTurn、没有任何 turn 起始回调,hooks.BeforeTurn 永远 不触发,而 handler 把 turnPricingAt 初始化成建连时刻 ⇒ 透传连接全部 turn 按 建连时刻的高峰因子结算,客户端峰前建连保活即可全程谷价——正是本 PR 想堵的 漏洞。改为 openAIWSTurnPricing 零值起步、只由 BeforeTurn 冻结;透传路径保持 零值,RecordUsage 回退记录时刻,与引入利润控制前的基线一致。 未选方案 A(给透传补 turn 起始回调):passthrough_relay.go 是 #5167 刚修过的 取消传播/close frame 时序敏感区;且 BeforeTurn 还承担 turn>1 的并发槽位抢占, 接进去等于给透传连接引入 per-turn 抢槽,风险远超本次修复范围。透传仍有建连时 的准入门,只是没有 turn 级复核,已在两处注释写明。 测试:service 层钉死透传 ingress 不触发 BeforeTurn(含失败时的复核指引), handler 层钉死零值语义与逐 turn 覆盖。 M5 装门读分组走了带账号计数聚合的 GetByID SchedulerSnapshotService 新增 GetGroupByIDLite,openai/gateway 两处装门改用 之。门只需要平台/倍率/利润/高峰字段,且该查询发生在「是否启用利润控制」判定 之前,未启用的分组同样付代价。两个测试 stub 的 GetByID 改成 panic 守卫。 M6 认证快照注释与真实读取路径相反 门解析优先取 ctxkey.Group,而它就是本快照物化出来的对象,直连流量走的正是这 条路。改正注释,与 api_key_repo.go 投影处的说明对齐,避免后人照旧注释删列。 M3 rate_multiplier 为 nil 时利润门 fail-closed(不改行为,加护栏) 保留 fail-closed。补 repository 层测试钉死账号调度快照的 full/metadata 两份 payload 都必须保留 RateMultiplier(含 0 值),漏列在 CI 就红。 L1 迁移号注释 191 / 191-192 改为实际的 192/193。 L2 admin group Create 的利润配置预校验改用与 CreateGroup 一致的归一化平台 (新增 service.NormalizeGroupPlatform,两边共用)。保留预校验而非删除: service 层返回的是无类型 error,经 ErrorFrom 会变成 500,删掉会把合法的 400 降级成 500。 L3 前端利润校验的上界改为判定换算后的小数(后端按小数校验 [0,1)), 99.999% 会四舍五入进位成 1.0 而被后端 400;i18n en/zh 同步改为 0-99.99。 L4 clampProfitControlThreshold / profitControlOverThreshold 抽为共用函数, 线上装门/否决点与 profit-preview 不再各自实现,附边界语义测试。 L5 profit-preview 补「默认 D 有账号但最低有效 D 归零」的告警(两档都为 0 由 既有告警覆盖,不重复)。
238 lines
8.2 KiB
Go
238 lines
8.2 KiB
Go
// profit-preview 读取生产只读导出的 JSON(分组利润配置、账号倍率与探测状态、
|
|
// 用户覆盖倍率、主力模型清单),复用线上 U/D/阈值判定做五平台离线预演。
|
|
//
|
|
// 用法:
|
|
//
|
|
// go run ./cmd/profit-preview -input dump.json [-assume-enabled] [-json]
|
|
package main
|
|
|
|
import (
|
|
"encoding/json"
|
|
"flag"
|
|
"fmt"
|
|
"os"
|
|
"sort"
|
|
"strings"
|
|
"time"
|
|
|
|
"github.com/Wei-Shaw/sub2api/internal/service"
|
|
)
|
|
|
|
type inputGroup struct {
|
|
ID int64 `json:"id"`
|
|
Name string `json:"name"`
|
|
Platform string `json:"platform"`
|
|
RateMultiplier float64 `json:"rate_multiplier"`
|
|
SubscriptionType string `json:"subscription_type"`
|
|
ProfitControlEnabled bool `json:"profit_control_enabled"`
|
|
ProfitMinMargin float64 `json:"profit_min_margin"`
|
|
ProfitSafetyBuffer float64 `json:"profit_safety_buffer"`
|
|
PeakRateEnabled bool `json:"peak_rate_enabled"`
|
|
PeakStart string `json:"peak_start"`
|
|
PeakEnd string `json:"peak_end"`
|
|
PeakRateMultiplier float64 `json:"peak_rate_multiplier"`
|
|
}
|
|
|
|
type inputAccount struct {
|
|
ID int64 `json:"id"`
|
|
Name string `json:"name"`
|
|
Platform string `json:"platform"`
|
|
Type string `json:"type"`
|
|
RateMultiplier *float64 `json:"rate_multiplier"`
|
|
Extra map[string]any `json:"extra"`
|
|
ModelMapping map[string]string `json:"model_mapping"`
|
|
}
|
|
|
|
type inputEntry struct {
|
|
Group inputGroup `json:"group"`
|
|
Accounts []inputAccount `json:"accounts"`
|
|
UserOverrides map[string]*float64 `json:"user_overrides"`
|
|
Models []string `json:"models"`
|
|
}
|
|
|
|
type inputDoc struct {
|
|
Groups []inputEntry `json:"groups"`
|
|
}
|
|
|
|
func main() {
|
|
inputPath := flag.String("input", "", "生产只读导出 JSON 路径")
|
|
assumeEnabled := flag.Bool("assume-enabled", false, "把当前关闭的支持平台分组按保存配置视为已启用")
|
|
jsonOut := flag.Bool("json", false, "以 JSON 输出完整报告(默认输出可读表格)")
|
|
flag.Parse()
|
|
if *inputPath == "" {
|
|
fmt.Fprintln(os.Stderr, "usage: profit-preview -input dump.json [-assume-enabled] [-json]")
|
|
os.Exit(2)
|
|
}
|
|
raw, err := os.ReadFile(*inputPath)
|
|
if err != nil {
|
|
fmt.Fprintf(os.Stderr, "read input: %v\n", err)
|
|
os.Exit(1)
|
|
}
|
|
inputs, err := parsePreviewInputs(raw, *assumeEnabled)
|
|
if err != nil {
|
|
fmt.Fprintf(os.Stderr, "parse input: %v\n", err)
|
|
os.Exit(1)
|
|
}
|
|
|
|
evalAt := time.Now()
|
|
reports := service.PreviewProfitAdmission(inputs, evalAt)
|
|
if len(reports) == 0 {
|
|
fmt.Fprintln(os.Stderr, "input produced no preview reports")
|
|
os.Exit(1)
|
|
}
|
|
|
|
if *jsonOut {
|
|
enc := json.NewEncoder(os.Stdout)
|
|
enc.SetIndent("", " ")
|
|
if err := enc.Encode(map[string]any{"evaluated_at": evalAt, "reports": reports}); err != nil {
|
|
fmt.Fprintf(os.Stderr, "write output: %v\n", err)
|
|
os.Exit(1)
|
|
}
|
|
return
|
|
}
|
|
|
|
fmt.Printf("利润门预演 @ %s(U=账号倍率;探测状态仅告警)\n", evalAt.Format(time.RFC3339))
|
|
for _, report := range reports {
|
|
fmt.Printf("\n== 分组 %d %s [%s] ==\n", report.GroupID, report.GroupName, report.Platform)
|
|
fmt.Printf(" 利润门生效=%v 假定启用=%v | 默认 D=%.4f 阈值=%.4f | 最低有效 D=%.4f 阈值=%.4f\n",
|
|
report.EffectiveGate, report.AssumedEnabled,
|
|
report.DefaultD, report.ThresholdDefault, report.MinEffectiveD, report.ThresholdMinD)
|
|
counts := map[string]int{}
|
|
for _, v := range report.Verdicts {
|
|
counts[v.Class]++
|
|
rate := "-"
|
|
if v.AccountRate != nil {
|
|
rate = fmt.Sprintf("%.4f", *v.AccountRate)
|
|
}
|
|
flags := make([]string, 0, 2)
|
|
if v.RejectedUnderMinD {
|
|
flags = append(flags, "最低有效D下拒绝")
|
|
}
|
|
if len(v.Warnings) > 0 {
|
|
flags = append(flags, strings.Join(v.Warnings, ","))
|
|
}
|
|
suffix := ""
|
|
if len(flags) > 0 {
|
|
suffix = " [" + strings.Join(flags, "; ") + "]"
|
|
}
|
|
fmt.Printf(" 账号 %-4d %-24s 平台=%-12s U=%-8s 来源=%-19s %s%s\n",
|
|
v.AccountID, v.Name, v.Platform, rate, v.RateSource, v.Class, suffix)
|
|
}
|
|
fmt.Printf(" 分类合计: 准入=%d 利润不足=%d 倍率非法=%d\n",
|
|
counts[service.ProfitPreviewClassAdmitted],
|
|
counts[service.ProfitPreviewClassRejectedThreshold],
|
|
counts[service.ProfitPreviewClassRejectedInvalidRate])
|
|
models := make([]string, 0, len(report.RemainingByModel))
|
|
for model := range report.RemainingByModel {
|
|
models = append(models, model)
|
|
}
|
|
sort.Strings(models)
|
|
for _, model := range models {
|
|
fmt.Printf(" 模型 %-20s 利润门准入账号: 默认D=%d 最低有效D=%d\n",
|
|
model, report.RemainingByModel[model], report.RemainingByModelMinD[model])
|
|
}
|
|
for _, model := range modelsWithZeroRemaining(report) {
|
|
fmt.Printf(" 警告: 模型 %s 启用后利润门准入账号为 0\n", model)
|
|
}
|
|
for _, model := range modelsWithZeroRemainingUnderMinD(report) {
|
|
fmt.Printf(" 警告: 模型 %s 在最低有效D(存在低倍率用户覆盖)下利润门准入账号为 0\n", model)
|
|
}
|
|
}
|
|
}
|
|
|
|
func parsePreviewInputs(raw []byte, assumeEnabled bool) ([]service.ProfitPreviewGroupInput, error) {
|
|
var doc inputDoc
|
|
if err := json.Unmarshal(raw, &doc); err != nil {
|
|
return nil, err
|
|
}
|
|
if len(doc.Groups) == 0 {
|
|
return nil, fmt.Errorf("input contains no groups; check the export query and target configuration")
|
|
}
|
|
|
|
inputs := make([]service.ProfitPreviewGroupInput, 0, len(doc.Groups))
|
|
for i, entry := range doc.Groups {
|
|
if entry.Group.ID <= 0 || strings.TrimSpace(entry.Group.Platform) == "" {
|
|
return nil, fmt.Errorf("invalid group at index %d: id and platform are required", i)
|
|
}
|
|
group := &service.Group{
|
|
ID: entry.Group.ID,
|
|
Name: entry.Group.Name,
|
|
Platform: entry.Group.Platform,
|
|
Status: service.StatusActive,
|
|
Hydrated: true,
|
|
RateMultiplier: entry.Group.RateMultiplier,
|
|
SubscriptionType: entry.Group.SubscriptionType,
|
|
ProfitControlEnabled: entry.Group.ProfitControlEnabled,
|
|
ProfitMinMargin: entry.Group.ProfitMinMargin,
|
|
ProfitSafetyBuffer: entry.Group.ProfitSafetyBuffer,
|
|
PeakRateEnabled: entry.Group.PeakRateEnabled,
|
|
PeakStart: entry.Group.PeakStart,
|
|
PeakEnd: entry.Group.PeakEnd,
|
|
PeakRateMultiplier: entry.Group.PeakRateMultiplier,
|
|
}
|
|
accounts := make([]*service.Account, 0, len(entry.Accounts))
|
|
for _, a := range entry.Accounts {
|
|
account := &service.Account{
|
|
ID: a.ID,
|
|
Name: a.Name,
|
|
Platform: a.Platform,
|
|
Type: a.Type,
|
|
RateMultiplier: a.RateMultiplier,
|
|
Extra: a.Extra,
|
|
}
|
|
if len(a.ModelMapping) > 0 {
|
|
mapping := make(map[string]any, len(a.ModelMapping))
|
|
for k, v := range a.ModelMapping {
|
|
mapping[k] = v
|
|
}
|
|
account.Credentials = map[string]any{"model_mapping": mapping}
|
|
}
|
|
accounts = append(accounts, account)
|
|
}
|
|
overrides := make(map[int64]float64, len(entry.UserOverrides))
|
|
for userID, rate := range entry.UserOverrides {
|
|
if rate == nil {
|
|
continue
|
|
}
|
|
var id int64
|
|
if _, err := fmt.Sscan(userID, &id); err == nil && id > 0 {
|
|
overrides[id] = *rate
|
|
}
|
|
}
|
|
inputs = append(inputs, service.ProfitPreviewGroupInput{
|
|
Group: group,
|
|
Accounts: accounts,
|
|
UserOverrides: overrides,
|
|
Models: entry.Models,
|
|
AssumeEnabled: assumeEnabled,
|
|
})
|
|
}
|
|
return inputs, nil
|
|
}
|
|
|
|
func modelsWithZeroRemaining(report service.ProfitPreviewGroupReport) []string {
|
|
var out []string
|
|
for model, count := range report.RemainingByModel {
|
|
if count == 0 {
|
|
out = append(out, model)
|
|
}
|
|
}
|
|
sort.Strings(out)
|
|
return out
|
|
}
|
|
|
|
// modelsWithZeroRemainingUnderMinD 返回默认 D 下仍有准入账号、但在最低有效 D
|
|
// 下会归零的模型。最低有效 D 来自分组内最低的用户级倍率覆盖:这些模型对那部分
|
|
// 用户是全黑的,而只看默认 D 的告警完全看不出来。
|
|
// 两档都为 0 的模型由 modelsWithZeroRemaining 报告,这里不重复。
|
|
func modelsWithZeroRemainingUnderMinD(report service.ProfitPreviewGroupReport) []string {
|
|
var out []string
|
|
for model, count := range report.RemainingByModelMinD {
|
|
if count == 0 && report.RemainingByModel[model] > 0 {
|
|
out = append(out, model)
|
|
}
|
|
}
|
|
sort.Strings(out)
|
|
return out
|
|
}
|