mirror of
https://github.com/bytedance/deer-flow.git
synced 2026-08-11 23:38:44 +00:00
224 lines
13 KiB
Markdown
224 lines
13 KiB
Markdown
# 可插拔授权系统实施记录
|
||
|
||
<!-- Language: Chinese. This document is the cumulative handoff record for the
|
||
pluggable authorization system (RFC #4063). An English summary is provided
|
||
below for navigation; the detailed content is in Chinese. -->
|
||
|
||
> **English summary:** This is the cumulative implementation log for the
|
||
> pluggable authorization RFC ([#4063](https://github.com/bytedance/deer-flow/issues/4063)).
|
||
> It records merged contracts, reviewer-confirmed decisions, and required
|
||
> regression coverage for each phase. Sections:
|
||
> - **每个 RFC PR 的必读要求** — Pre-PR checklist for every authorization change
|
||
> - **信息优先级** — Information precedence when sources conflict
|
||
> - **Phase 0:已合并基线** — Phase 0 merged baseline (PR #4127)
|
||
> - **PR #4127 多轮修改的原因** — Root causes of multi-round review iterations
|
||
> - **所有后续阶段必须保持的不变量** — Invariants all phases must preserve
|
||
> - **Phase 1 实施前确认** — Phase 1 pre-implementation confirmations
|
||
> - **每次更新 PR 前的固定清单** — Fixed checklist before each PR update
|
||
> - **决策日志** — Append-only decision log
|
||
> - **当前连续性风险** — Current continuity risks
|
||
|
||
本文档是可插拔授权 RFC([#4063](https://github.com/bytedance/deer-flow/issues/4063))
|
||
的持续实施记忆。它用于补充设计 RFC,记录已经实际合并的内容、review 中确认的契约,
|
||
以及每个后续 PR 必须验证的事项。
|
||
|
||
## 每个 RFC PR 的必读要求
|
||
|
||
修改任何后续阶段前,必须阅读:
|
||
|
||
1. [设计 RFC](2026-07-10-pluggable-authorization-rfc.md)。
|
||
2. 本实施记录。
|
||
3. 前一阶段已经合并的代码和测试。如果它们与旧 RFC 示例不一致,以已合并契约为准。
|
||
|
||
每个 PR 描述中必须复制并确认以下内容:
|
||
|
||
```markdown
|
||
## Authorization RFC 连续性确认
|
||
|
||
- [ ] 已阅读 `docs/plans/2026-07-10-pluggable-authorization-rfc.md`。
|
||
- [ ] 已阅读 `docs/plans/2026-07-10-pluggable-authorization-implementation-notes.md`。
|
||
- [ ] 已核对所有前置阶段的决策和延期事项。
|
||
- [ ] 已用本 PR 的新决策和后续事项更新实施记录。
|
||
```
|
||
|
||
## 信息优先级
|
||
|
||
不同来源发生冲突时,按以下顺序判断:
|
||
|
||
1. 已合并代码和回归测试。
|
||
2. 已接受的 review 决策和最终合并的 PR 描述。
|
||
3. 本实施记录。
|
||
4. 设计 RFC 中较早的示例或阶段划分。
|
||
|
||
不能静默修改或重新解释冲突。必须写入决策日志;涉及架构或安全行为时,还要在
|
||
issue #4063 中确认。
|
||
|
||
## Phase 0:已合并基线
|
||
|
||
PR [#4127](https://github.com/bytedance/deer-flow/pull/4127) 于 2026-07-15
|
||
以提交 `1300c6d3` 合并,确立了以下契约:
|
||
|
||
- `AuthorizationProvider` 是可在运行时检查的 Protocol,包含同步授权、异步授权和
|
||
`filter_resources`。
|
||
- `filter_resources` 是必需方法。Protocol 中方法体为 `...` 不代表存在默认实现。
|
||
没有静态映射的 provider 必须自行实现逐项授权。
|
||
- `GuardrailAuthorizationAdapter` 有意让 provider 异常向上传播。
|
||
`GuardrailMiddleware` 统一负责异常处理、审计以及 fail-open/fail-closed 执行。
|
||
- 不能通过 `user_role == "internal"` 推导 `Principal.is_internal`。权威信号是内部
|
||
认证状态 `auth_source`,必须从 Gateway 上下文传递。
|
||
- Adapter 上下文保留 `thread_id`、`run_id`、`tool_call_id`、`tool_input`、
|
||
`is_subagent`、`agent_id` 和 `timestamp`。
|
||
- `AuthorizationConfig` 已加入 AppConfig,默认 `enabled: false`,并参与 singleton
|
||
加载;Phase 0 尚无运行时代码读取它。
|
||
- Adapter 在结构上符合 `GuardrailProvider`;同步和异步异常传播均由测试固定。
|
||
|
||
以下原 RFC Phase 0 项目没有在 PR #4127 中落地,仍属于后续工作:Principal 构建器、
|
||
内置 RBAC provider、Layer 1 过滤、Layer 2 自动装配和内部 Principal 填充。
|
||
|
||
## PR #4127 多轮修改的原因
|
||
|
||
实现方向获得认可,但首版没有完整验证后续阶段将继承的关键契约:
|
||
|
||
- 直接沿用了 RFC 关于 `filter_resources` 默认行为的假设,没有先验证 Python
|
||
Protocol 的真实语义。willem-bd 和 zhfeng **独立**指出了同一个问题——多个 reviewer
|
||
从不同角度指向同一处,说明该缺陷在 review 中非常显眼。后续阶段中如果再次出现
|
||
多人独立指出同一处,应当视为最高优先级,不再需要多方确认。
|
||
- 身份字段按照表面数据结构映射,没有追踪到运行时权威来源。
|
||
- 配置测试验证了 Pydantic 对象构建,但最初绕过了真实 singleton 加载生命周期。
|
||
- schema 变化最初遗漏 `config_version`;同时主线发生版本竞争,需要 rebase 后重新
|
||
选择版本号。
|
||
- Helm 中的配置版本镜像和仓库内 RFC 文档较晚才在 review 中被发现。
|
||
- 代码、测试、注释和 PR 描述没有在同一次 push 中同步,导致旧描述让已修问题再次
|
||
被提出。
|
||
- 对 `GuardrailMiddleware` 已有的 fail-closed 机制理解不足,在 adapter 中写了
|
||
"Phase 1 加 try/except" 的 TODO,暗示 adapter 应当自行处理异常。实际上 fail-closed
|
||
是 middleware 的职责,adapter 刻意不 catch 异常。描述与架构意图不一致导致了额外的
|
||
review 轮次。
|
||
|
||
这些问题主要是实施前检查和可追踪性不足,并非两层授权设计被否定。
|
||
|
||
## 所有后续阶段必须保持的不变量
|
||
|
||
- `authorization.enabled: false` 必须保持现有行为不变。
|
||
- Layer 1 和 Layer 2 必须使用同一个 provider 和同一个 Principal。
|
||
- Layer 1 必须在 `assemble_deferred_tools` 之前过滤;被移除的工具不能进入
|
||
`DeferredToolCatalog`,也不能被 `tool_search` 再次提升。
|
||
- Layer 1 必须覆盖 lead agent、native subagent 和 `DeerFlowClient` 三条装配路径。
|
||
- Layer 2 复用 `GuardrailMiddleware`;不能在 adapter 中重复实现异常处理、审计、
|
||
deny 消息或 fail-closed 逻辑。
|
||
- ownership 检查和现有 `require_admin_user()` 管理端点保护必须保留。细粒度授权只能
|
||
增加策略,不能削弱现有保护。
|
||
- deny 优先于 allow。身份缺失、未知角色、provider 故障和 provider 返回值格式错误
|
||
都必须具有明确且经过测试的行为。
|
||
- 同步和异步路径必须具有一致的授权决策和失败语义。
|
||
- internal、Web、关闭认证、已绑定频道、未绑定频道、scheduler 和 subagent 的身份
|
||
都必须从真实来源追踪。
|
||
- 新增 resource 或 action 时,必须检查所有消费者、allowlist、配置示例、文档和测试。
|
||
- 新组件嵌入现有中间件前,必须先完整理解宿主中间件已有的机制(异常处理、审计、
|
||
fail-closed 等)。新组件不重复实现宿主已有的逻辑;如果看似缺少某功能,先确认是
|
||
否由宿主在上游或下游统一处理。
|
||
|
||
## Phase 1 实施前确认
|
||
|
||
Phase 1 是工具授权。编码前必须先确定:
|
||
|
||
- Principal 在哪里构建,以及如何进入三条工具装配路径。
|
||
- `auth_source`、owner role、`default_role` 和 subagent 继承如何组合。
|
||
- provider 如何实例化,以及配置热更新后如何刷新。
|
||
- authorization 与显式配置的 guardrail 如何共存,二者都不能静默替换或绕过对方。
|
||
- provider 构造异常和授权决策异常是否使用同一 fail-closed 策略,以及各自由哪层处理。
|
||
- 内置 RBAC provider 对 allow、deny 和通配符的精确定义。
|
||
|
||
Phase 1 最低验证要求:
|
||
|
||
- 每角色 allow、deny、通配符、deny 优先、未知角色和默认角色测试。
|
||
- lead agent、subagent 和 embedded client 的工具可见性测试。
|
||
- 证明被拒绝工具不会进入 deferred catalog。
|
||
- Layer 2 的 allow、deny、provider 异常、审计、同步和异步测试。
|
||
- prompt injection 回归测试,证明装配阶段被过滤的工具无法执行。
|
||
- internal、未绑定频道、关闭认证和 subagent 的 Principal 测试。
|
||
- 通过真实生命周期执行 AppConfig 加载与热更新测试。
|
||
- 证明关闭 authorization 时现有工具集合完全不变。
|
||
|
||
## 每次更新 PR 前的固定清单
|
||
|
||
- [ ] 选择配置版本号前,已 fetch 并 rebase 最新 `upstream/main`。不能使用本地缓存的
|
||
旧版本号——主线可能在此期间已被其他 PR bump 过。先 fetch、读最新值、+1,再在
|
||
`config.example.yaml` + `deploy/helm/deer-flow/values.yaml` + `deploy/helm/deer-flow/README.md`
|
||
三处同步。
|
||
- [ ] 已搜索 issue #4063 和当前阶段是否存在并行工作。
|
||
- [ ] 每个新字段都已追踪到权威生产者,而不只是确认类型。
|
||
- [ ] 测试经过公开运行时生命周期,而不只是直接构造配置模型。
|
||
- [ ] 已按需覆盖 lead、subagent、embedded、同步和异步路径。
|
||
- [ ] 已执行负向变异检查:删除新增 wiring 后,至少一个回归测试必须失败。
|
||
- [ ] 已搜索配置的所有镜像,包括 Helm values 和相关文档。
|
||
- [ ] 代码注释、测试、RFC 记录和 PR 描述已在同一次 push 中更新。
|
||
- [ ] 已明确列出延期阶段,且没有把延期功能带入当前范围。
|
||
- [ ] 已在下方记录新决策和未解决问题。
|
||
- [ ] 如果多个 reviewer 独立指出同一处问题,视为高置信信号,立即修复,不再等待
|
||
进一步确认。
|
||
|
||
## 决策日志
|
||
|
||
只追加新记录。需要推翻旧决策时,必须新增一条“替代决策”,不能直接重写历史。
|
||
|
||
### 2026-07-15 — Phase 0 / PR #4127
|
||
|
||
- **决策:** `filter_resources` 为必需方法,不提供 Protocol fallback。
|
||
- **决策:** provider 异常穿过 adapter,由 `GuardrailMiddleware` 处理。
|
||
- **决策:** internal 身份来自认证上下文,不使用角色名称约定推导。
|
||
- **决策:** Phase 0 默认保持运行时行为不变。
|
||
- **延期:** Principal 构建、RBAC provider、两层执行接入和 internal Principal 传递
|
||
移至 Phase 1。
|
||
|
||
### 2026-07-15 — Phase 1A-1 / 可信 Principal 链路
|
||
|
||
- **背景:** Phase 0 建立了 `AuthorizationProvider` Protocol 和 adapter,但
|
||
`Principal.is_internal` 无可信来源,adapter 手工构造 Principal(与未来 Layer 1 的
|
||
builder 不一致),客户端可伪造身份字段。
|
||
- **决策:** `build_principal_from_context()` 是唯一 Principal builder,Layer 1 和
|
||
Layer 2(adapter)必须共用。
|
||
- **决策:** `is_internal` 来自 `request.state.auth_source == AUTH_SOURCE_INTERNAL`,
|
||
在 `inject_authenticated_user_context` 最顶部(所有 early return 之前)用直接赋值
|
||
写入 runtime context,不用 `setdefault`。
|
||
- **决策:** `is_internal`、`authz_attributes` 和 `channel_user_id` 列为
|
||
`_SERVER_OWNED_AUTHZ_CONTEXT_KEYS`,
|
||
从 `config["context"]` 和 `config["configurable"]` 清除客户端值。
|
||
- **决策:** `channel_user_id` 只接受内部认证 IM 调用方的顶层 `body.context` 值;普通
|
||
session 调用和 `body.config` 两个 section 均不能提供该授权身份字段。
|
||
- **决策:** Phase 1A-1 没有 Gateway 侧 `authz_attributes` 权威生产者;Gateway 请求中
|
||
的 `authz_attributes` 一律删除(默认 `{}`)。
|
||
- **决策:** adapter 的 `evaluate`/`aevaluate` 通过 `build_principal_from_context()`
|
||
构造 Principal,接收 `default_role` 参数。
|
||
- **决策:** `authz_attributes` 在所有进程内消费边界统一使用 `isinstance(x, Mapping)`
|
||
+ `dict()` 复制;非 Mapping 抛 `TypeError`。
|
||
- **决策:** subagent 的 `is_internal` 无条件写回 context(包括 `False`)。
|
||
- **证据:** 323 个目标与边界测试通过,覆盖 Gateway 防伪、channel sender 信任边界、subagent 继承、
|
||
`GuardrailMiddleware` runtime 字段映射、adapter builder 复用和 harness/app 边界。
|
||
- **兼容性:** `authorization.enabled: false` 时工具集合和执行决策不变;runtime context
|
||
新增 `is_internal` 字段是有意的可观察变化。
|
||
- **延期:** RBAC provider、provider factory、Layer 1 过滤、Layer 2 自动接线移至
|
||
Phase 1A-2 / Phase 1B。
|
||
|
||
### 新记录模板
|
||
|
||
```markdown
|
||
### YYYY-MM-DD — Phase N / PR #NNNN
|
||
|
||
- **背景:** 本次变化或 review 发现了什么?
|
||
- **决策:** 新的正式契约是什么?
|
||
- **证据:** 相关代码路径、测试、issue 评论或 benchmark。
|
||
- **否决方案:** 考虑过哪些方案,为什么不采用?
|
||
- **兼容性:** 如何保持现有部署和关闭功能时的行为?
|
||
- **延期:** 哪些工作留给下一阶段?
|
||
```
|
||
|
||
## 当前连续性风险
|
||
|
||
- 原始 RFC 仍包含“`filter_resources` 存在默认实现”的草案示例;本文件记录的已合并
|
||
Phase 0 契约优先于该示例。
|
||
- RFC 原始 Phase 0 范围大于 PR #4127 的实际落地范围。后续实现必须依据已合并基线
|
||
和明确延期清单,不能假设这些功能已经存在。
|
||
- 主线配置版本可能并发变化。不能提前占用版本号;必须先 rebase,再在所有镜像文件中
|
||
使用下一个有效版本。
|