模块 11综合实战与故障案例

企业知识 Agent

限定知识任务与权威范围

  • 面向谁、回答哪些数据域
  • 检索问答、任务辅助还是能执行动作
  • 不可回答范围和升级人工渠道
  • 内容 Owner 和答案责任

数据源准入与血缘

  • 连接、权限、许可、敏感度和更新频率
  • 解析质量、结构、元数据和 Chunk 策略
  • 源版本到索引/Embedding 的可追溯
  • 失败文档隔离和 Owner 修复流程

从简单基线逐步增加复杂度

  • BM25 + Dense + Metadata Filter
  • RRF/重排与 Parent-Child
  • 按域路由、Query Rewrite 和多跳
  • 每一层通过消融证明收益

权限在召回前生效

  • 用户/租户身份下推
  • 文档和字段级 ACL
  • 向量、倒排、缓存和 Artifact 一致过滤
  • 引用链接再次校验访问权限

答案绑定证据与不确定性

  • 主张—证据映射
  • 来源、时间和适用范围
  • 冲突来源并列呈现
  • 证据不足拒答或澄清
  • 引用不可伪造且可定位

离线和在线质量闭环

  • 问题—Gold Evidence—答案评测集
  • 检索/上下文/答案分层指标
  • 无答案、多跳、时效和越权切片
  • 用户纠正、引用点击和无结果进入反馈队列

知识系统的核心 SLO 包含新鲜度

  • 采集/索引延迟、失败和积压
  • 源更新、删除、权限变化和模型升级
  • 热门查询、低覆盖域和成本
  • 错误引用、越权召回和过时答案事件响应

从单域到企业级扩展

  • 按域分区、Owner 和质量 Scorecard
  • 共享数据管道与领域检索策略分离
  • 知识图谱/Agentic Retrieval 只在多跳证据成立时引入
  • 平台化不抹平领域权限和语义