AgentEvalTool/backend/agenteval/evaluation/rules
sinohqb 737c9ab80e
All checks were successful
CI / test (pull_request) Successful in 4m6s
feat(response_time): 支持平均延迟和吞吐量指标
扩展 response_time 规则,支持多维度延迟和吞吐量测量。

- 新增 avg_latency_max_ms:多轮对话平均延迟阈值
- 新增 throughput_min:最低吞吐量(turns/min)
- 保持 max_ms 向后兼容(单轮延迟阈值)
- RuleResult.details 包含延迟统计(avg/min/max/latencies)
- 新增 10 项单元测试(656 tests passed)

注:首字延迟(first token latency)需要流式数据支持,当前 Turn 模型未提供,留待后续增强。

Closes #21
2026-08-25 15:03:54 +08:00
..
__init__.py v0.3-s2: 3 个新规则 + 组合逻辑 + 33 个测试 2026-07-17 11:23:22 +08:00
base.py feat(llm_score): 支持多维度独立评分 2026-08-25 14:17:49 +08:00
json_schema.py v0.3-s2: 3 个新规则 + 组合逻辑 + 33 个测试 2026-07-17 11:23:22 +08:00
keyword.py v0.3-s1: 规则层异步化 + 工具函数去重 + HTTP 通道 2026-07-17 10:52:32 +08:00
llm_score.py feat(llm_score): 支持多维度独立评分 2026-08-25 14:17:49 +08:00
response_time.py feat(response_time): 支持平均延迟和吞吐量指标 2026-08-25 15:03:54 +08:00
safety.py feat(models): add centralized model configuration 2026-07-17 20:02:43 +08:00
semantic.py feat(models): add centralized model configuration 2026-07-17 20:02:43 +08:00