跳转到内容

Human-in-the-Loop Architecture(人在环架构)

知识库位置:FDE Knowledge Base/04 Architecture/Patterns/10-Human-in-the-Loop-Architecture.md

Architecture Metadata(架构元数据)

Section titled “Architecture Metadata(架构元数据)”
Architecture ID: ARCH-010
Category(类别):
Control(管控)
Primary Business Problem(主要业务问题):
Controlled Human Approval for AI / Automation Outcomes
(AI/自动化结果的可控人工审批)
Complexity(复杂度):
Medium(中)
AI Dependency(AI 依赖度):
Optional(可选:可包裹规则引擎输出)
Data Dependency(数据依赖度):
Low(低)
Integration Complexity(集成复杂度):
Medium(中)
Human Review(人工复核):
Core(核心机制本身)
Status: Core
Version: v0.2

AI 或自动化能够完成大部分任务,但部分场景:

  • 风险高
  • 不确定性高
  • 数据不足
  • 需要授权
  • 法规要求人工审核

因此需要:

Human-in-the-Loop(HITL,人在环)


HITL 不是:

加一个「Approve(批准)」按钮。

它是一套完整的责任和决策架构。


Input(输入)
↓
Automation / AI(自动化 / AI)
↓
Risk / Confidence Evaluation(风险 / 置信度评估)
↓
Decision Gate(决策门控)
┌───────────────┬────────────────┐
↓ ↓ ↓
Auto Approve Human Review Specialist Escalation
(自动批准) (人工复核) (专家升级处理)
↓ ↓ ↓
Execution Decision Decision
(执行) (决策) (决策)
└───────────────┴────────────────┘
↓
Audit(审计)
↓
Feedback(反馈)

可以基于:

  • Confidence(置信度)
  • Amount(金额)
  • Risk Score(风险评分)
  • User Role(用户角色)
  • Policy(策略)
  • Exception Type(异常类型)

例如:

Low Risk(低风险)
→ Auto(自动处理)
Medium Risk(中风险)
→ Human Reviewer(人工复核员)
High Risk(高风险)
→ Specialist / Manager(专家 / 经理)

Human Review(人工复核)页面必须提供:

  • AI Result(AI 结果)
  • Source Data(源数据)
  • Evidence(证据)
  • Confidence(置信度)
  • Reason(理由)
  • Available Actions(可执行操作)

不要让审核人员只看到:

AI says: Approve(AI 说:批准)

Human Review 也需要定义:

  • Review SLA(复核时限)
  • Escalation(升级机制)
  • Timeout(超时处理)
  • Reassignment(改派机制)

否则自动化流程会卡在人工步骤。


Human Correction(人工修正)应回流:

AI Output(AI 输出)
↓
Human Correction(人工修正)
↓
Feedback Dataset(反馈数据集)
↓
Evaluation / Model Improvement(评估 / 模型改进)

必须记录:

  • Who Reviewed(谁审核的)
  • What They Saw(他们看到了什么)
  • What They Changed(他们改了什么)
  • When(何时)
  • Why(为什么)

  • Reviewer Blindly Approves(复核员盲目批准)
  • Review Queue Backlog(复核队列积压)
  • No Escalation(没有升级机制)
  • No Accountability(没有责任归属)
  • Wrong Risk Threshold(风险阈值错误)
  • Feedback Not Captured(反馈未被记录)

Stage 1
All AI outputs reviewed(全部 AI 输出均人工复核)
Stage 2
Low-risk auto + high-risk review
(低风险自动 + 高风险复核)
Stage 3
Dynamic risk routing(动态风险路由)
Stage 4
Specialist escalation(专家升级)
Stage 5
Feedback-driven optimization(反馈驱动优化)