Claude / GPT 多模型 API 网关

接入运行手册

生产环境的超时、重试、日志、报警和回滚建议。

发布前

确认模型名、base URL、超时、重试、日志脱敏和额度报警。

运行中

观察错误率、p95 耗时、token 消耗和流式中断比例。

回滚时

保留上一版模型配置和 prompt 配置,支持快速切回。

生产接入检查表

项目口径用途
超时已配置连接、首包、整体超时避免请求长期挂起
重试只重试幂等任务避免重复执行业务动作
日志记录 request id 和 token 消耗便于追踪成本和错误

常见问题

ProTier Models 为什么价格更高?

它定位在生产级和高优先级调用,适合更看重稳定性而不是最低单价的场景。

ProTier Models 是否适合个人测试?

可以使用,但个人低预算测试通常更适合 FastLane API。