LC李成← 返回首页联系我 ↗

KNOWLEDGE ENGINEERING · ANT GROUP

反馈驱动的知识库质量闭环

针对知识只消费、缺少反馈带来的缺失、冲突和过期问题,主导设计反馈驱动的更新策略,捕获来源会话,并构建会话审核、知识提炼、人工审核、写入评测与知识生效的五阶段准入闭环。

HooksSub-AgentHuman-in-the-loopHybrid RetrievalKnowledge GraphEvaluation
角色
智能体与大模型应用工程实习生
时间
2026.05 – 至今
2 个业务域复用验证团队内知识库场景
5 阶段知识准入流程人工审核 + 写入评测双重门禁
3 路检索召回体系图谱 + 全文 + 语义

30-SECOND READOUT

面试速览

我负责
知识更新生命周期、来源会话捕获、人工审核、写入前后对照评测与混合检索策略。
关键取舍
不让模型生成的候选知识直接生效,以人工审核和写入前后对照评测共同控制知识质量。
如何验证
五阶段准入流程在团队内两个业务域完成复用验证,并以图谱、全文、语义三路检索互补召回。

SYSTEM ARCHITECTURE

知识反馈与更新闭环机制

真实反馈经异步复盘形成候选,并通过人工审核与写入前后同集评测决定是否正式生效。

知识反馈与更新闭环架构:单聊纠偏、问答群反馈和质量评测通过 Hook 触发异步复盘,形成知识候选;候选经过结构化提炼、人工审核、写入前后同集评测后决定生效或回滚,并保留来源、版本与评测记录。

从反馈捕获、候选提炼到人工审核、前后评测与知识生效的完整闭环。

查看原图 ↗

TEAM ONBOARDING

团队接入配置清单

团队通过配置知识范围、写入路由、审核人与测评规则,复用同一套知识更新流程。

收起配置图展开配置图
知识更新团队接入配置图:团队配置知识范围与术语、Board 目录路由、审核群与可信审核人、检索和测评规则;平台完成只读校验与能力预检后接入知识更新流程。

配置通过只读校验和能力预检后,即可接入统一的知识更新机制。

查看原图 ↗

KNOWLEDGE LIFECYCLE

知识不是一次写入,而是受控演进。

每条候选知识都保留来源,经人工判断与隔离评测后才进入生效态;线上反馈继续驱动下一轮修正。

  1. 01来源会话
  2. 02会话审核
  3. 03知识提炼
  4. 04人工审核
  5. 05写入评测
  6. 06知识生效
  7. 07反馈回流

01

业务问题

传统知识问答往往只消费既有内容,真实问答中的纠错信号没有回流,久而久之会出现知识缺失、互相冲突和内容过期。这个项目的目标不是简单把文档向量化,而是让知识变更有来源、更新有门禁、效果可验证。

02

我的职责

  • 负责设计由真实问答反馈驱动的知识更新策略,定义候选知识从产生到生效的生命周期。
  • 设计 Hook 自动捕获来源会话,保留反馈事实与知识变更之间的追溯关系。
  • 设计人工审核与写入评测门禁,避免模型生成内容未经验证直接正式生效。
  • 设计图谱、全文和语义融合的分层检索与动态排序策略。

03

人工审核与前后评测

  • 由评测 Agent 基于冻结测试集执行知识写入前后的同配置对照评测。
  • 人工审核与写入评测共同构成双重门禁,避免未验证知识直接生效。
  • 只让验证通过的知识进入生效态,执行逻辑保持稳定,知识层随反馈增量演进。

04

检索设计

  • 融合知识图谱、全文检索与语义匹配,设计分层召回和动态排序。
  • 通过三路检索互补提升召回完整性与答案可信度。

05

复用结果与 AI Coding 迁移

知识更新流程已在团队内两个业务域知识库完成复用验证。同一套反馈捕获、审核与评测方法,正在进一步用于 AI Coding 的后端需求交付场景,为系统分析和编码提供持续更新、可追溯的项目上下文。

NEXT CASE

继续查看:AI Coding × 知识库:后端需求端到端交付