附录 B 度量指标速查表#
本附录按场景分类列出常用的度量指标,包含指标名称、类型、PromQL 查询和参考阈值。 可作为日常开发和运维的快速参考。
B.1 Web API 度量#
指标 |
类型 |
PromQL 查询 |
参考阈值 |
|---|---|---|---|
请求速率 (QPS) |
Counter |
|
根据容量规划 |
错误率 |
Counter |
|
< 1% |
P50 延迟 |
Histogram |
|
< 100ms |
P99 延迟 |
Histogram |
|
< 1s |
请求大小 |
Histogram |
|
监控趋势 |
并发连接数 |
Gauge |
|
< 连接池上限 80% |
B.2 数据库度量#
指标 |
类型 |
PromQL 查询 |
参考阈值 |
|---|---|---|---|
连接池使用率 |
Gauge |
|
< 80% |
查询延迟 |
Histogram |
|
< 100ms |
慢查询数 |
Counter |
|
趋近于 0 |
事务失败率 |
Counter |
|
< 0.1% |
复制延迟 |
Gauge |
|
< 1s |
B.3 缓存度量#
指标 |
类型 |
PromQL 查询 |
参考阈值 |
|---|---|---|---|
命中率 |
Counter |
|
> 90% |
延迟 |
Histogram |
|
< 5ms |
内存使用 |
Gauge |
|
< 80% |
驱逐率 |
Counter |
|
监控趋势 |
B.4 消息队列度量#
指标 |
类型 |
PromQL 查询 |
参考阈值 |
|---|---|---|---|
消息积压 |
Gauge |
|
< 1000(视业务而定) |
消费延迟 |
Gauge |
|
< 30s |
生产速率 |
Counter |
|
监控趋势 |
消费速率 |
Counter |
|
≥ 生产速率 |
消费失败率 |
Counter |
|
< 0.1% |
B.5 LLM 度量#
指标 |
类型 |
PromQL 查询 |
参考阈值 |
|---|---|---|---|
TTFT |
Histogram |
|
< 500ms |
TPS |
Histogram |
|
> 30 TPS |
Token 使用速率 |
Counter |
|
监控趋势 |
每小时成本 |
Counter |
|
< 预算上限 |
错误率 |
Counter |
|
< 1% |
质量评分 |
Gauge |
|
> 3.5 (1-5 分) |
B.6 RAG 度量#
指标 |
类型 |
PromQL 查询 |
参考阈值 |
|---|---|---|---|
检索延迟 |
Histogram |
|
< 200ms |
E2E 延迟 |
Histogram |
|
< 10s |
检索命中率 |
Gauge |
|
> 85% |
Faithfulness |
Gauge |
|
> 0.80 |
Answer Relevancy |
Gauge |
|
> 0.85 |
查询成功率 |
Counter |
|
> 98% |
B.7 AI Agent 度量#
指标 |
类型 |
PromQL 查询 |
参考阈值 |
|---|---|---|---|
任务完成率 |
Counter |
|
> 80% |
平均步骤数 |
Histogram |
|
越少越好 |
工具调用准确率 |
Counter |
|
> 90% |
每任务成本 |
Histogram |
|
< 业务价值 |
循环检测率 |
Counter |
|
趋近于 0 |