告警中心
本页面向运营管理员,说明告警中心四类事故规则的触发、恢复与通知行为。额度将尽、费用异常等其他告警仍按各自规则运行。
告警中心提供「事件时间线」「规则配置」「渠道配置」三个页签。通道连续失败、模型容量承压、Key 调用容量达限和空回复补救失败采用事故机制:不仅记录一次异常,还持续跟踪同一对象直到恢复。
四类事故均按专区分别统计;不同专区的同名模型或通道不会合并为同一条事故。
事故规则与默认阈值
| 规则 | 默认触发条件 | 恢复条件 |
|---|---|---|
| 通道连续失败 | 同一专区内,同一模型下的同一物理通道在最近 5 分钟窗口末尾连续失败 3 次 | 该通道在最后一次失败后取得成功,或整个检测窗口内不再有该通道的失败 |
| 模型容量承压 | 同一专区的同一模型在最近 5 分钟内出现 3 次无可用通道拒绝,且最后一次拒绝后尚未成功 | 该模型后续调用成功,或整个检测窗口内不再出现此类拒绝 |
| Key 调用容量达限 | 同一 Key 的同一限制类型在最近 5 分钟内达限 3 次;请求频率、Token 用量和并发数分别统计 | 整个检测窗口内,该 Key 不再出现同一限制类型的达限拒绝 |
| 空回复补救失败 | 同一专区的同一原始模型在最近 10 分钟内发生 2 次主动补救失败 | 该模型后续主动补救成功,或整个检测窗口内不再出现主动补救失败 |
表中是出厂默认值。实际触发以「规则配置」页当前保存的次数和检测窗口为准。
模型容量与 Key 容量的区别
「模型容量承压」表示调用时模型没有可用通道,可能由通道冷却或容量饱和造成。它不表示已经确认某条物理通道的请求频率或 Token 计数耗尽;需要结合通道配置和决策日志继续判断。
「Key 调用容量达限」只统计调用方 Key 的请求频率、Token 用量或并发数达限,并按 Key 与限制类型分别开通事故。Key 事故只通过完整安静窗口恢复,普通成功调用不会提前结束事故。预算、账户状态等其他拒绝不归入这两类容量事故。
哪些补救结果会计为失败
空回复补救失败只统计实际执行的主动补救中出现的两类结果:
- 补救请求调用上游失败;
- 补救已取得上游响应,但响应转换失败。
未执行补救、影子观察和补救成功均不计为失败。该规则只用于观测与通知,不改变现有计费或免单结果。
事故开通、更新与恢复
同一规则、同一对象同时只有一条进行中事故:
- 首次达到阈值时开通事故,并尝试发送开通通知。
- 持续命中只更新原事故的摘要、指标和最近命中时间,不重复开通,也不重复发送开通通知。
- 满足恢复条件后,原事故转为已恢复,并尝试发送一次恢复通知。
- 已恢复的对象再次达到阈值时,会开通一条新事故。
在「规则配置」中禁用某条事故规则,会结束该规则当前所有进行中事故,但不会发送恢复通知。重新启用后,后续命中按新事故处理。
配置规则与通知渠道
规则阈值
在「规则配置」页可调整每条规则的次数阈值和检测窗口。阈值对该规则下的全部专区和对象统一生效,不能为某个模型、通道或 Key 单独设置不同阈值。
飞书通知
在「渠道配置」页添加飞书群机器人并选择归属专区。保存新渠道或轮换凭证前,系统会先发送测试消息,确认渠道可用后再保存。
- 事故按事故发生时的专区归属路由,只推送到该专区已启用的渠道;默认专区事故使用默认专区渠道。
- Key 相关通知只展示 Key 别名;没有别名时展示短哈希,不展示完整 Key 或密钥。
- 飞书投递是尽力而为:没有持久化补投队列或送达回执。未配置匹配渠道或发送失败时,事故仍会保留在事件时间线中,状态评估与恢复不受影响。
- 每次事故开通和恢复各尝试通知一次,不因持续命中反复推送;禁用规则导致的结束不发送恢复通知。
- 告警只负责记录和通知,不会自动扩容、重启服务、切换通道或执行其他修复操作。