mirror of
https://github.com/bytedance/deer-flow.git
synced 2026-08-10 14:58:46 +00:00
13 KiB
13 KiB
可插拔授权系统实施记录
English summary: This is the cumulative implementation log for the pluggable authorization RFC (#4063). It records merged contracts, reviewer-confirmed decisions, and required regression coverage for each phase. Sections:
- 每个 RFC PR 的必读要求 — Pre-PR checklist for every authorization change
- 信息优先级 — Information precedence when sources conflict
- Phase 0:已合并基线 — Phase 0 merged baseline (PR #4127)
- PR #4127 多轮修改的原因 — Root causes of multi-round review iterations
- 所有后续阶段必须保持的不变量 — Invariants all phases must preserve
- Phase 1 实施前确认 — Phase 1 pre-implementation confirmations
- 每次更新 PR 前的固定清单 — Fixed checklist before each PR update
- 决策日志 — Append-only decision log
- 当前连续性风险 — Current continuity risks
本文档是可插拔授权 RFC(#4063) 的持续实施记忆。它用于补充设计 RFC,记录已经实际合并的内容、review 中确认的契约, 以及每个后续 PR 必须验证的事项。
每个 RFC PR 的必读要求
修改任何后续阶段前,必须阅读:
- 设计 RFC。
- 本实施记录。
- 前一阶段已经合并的代码和测试。如果它们与旧 RFC 示例不一致,以已合并契约为准。
每个 PR 描述中必须复制并确认以下内容:
## Authorization RFC 连续性确认
- [ ] 已阅读 `docs/plans/2026-07-10-pluggable-authorization-rfc.md`。
- [ ] 已阅读 `docs/plans/2026-07-10-pluggable-authorization-implementation-notes.md`。
- [ ] 已核对所有前置阶段的决策和延期事项。
- [ ] 已用本 PR 的新决策和后续事项更新实施记录。
信息优先级
不同来源发生冲突时,按以下顺序判断:
- 已合并代码和回归测试。
- 已接受的 review 决策和最终合并的 PR 描述。
- 本实施记录。
- 设计 RFC 中较早的示例或阶段划分。
不能静默修改或重新解释冲突。必须写入决策日志;涉及架构或安全行为时,还要在 issue #4063 中确认。
Phase 0:已合并基线
PR #4127 于 2026-07-15
以提交 1300c6d3 合并,确立了以下契约:
AuthorizationProvider是可在运行时检查的 Protocol,包含同步授权、异步授权和filter_resources。filter_resources是必需方法。Protocol 中方法体为...不代表存在默认实现。 没有静态映射的 provider 必须自行实现逐项授权。GuardrailAuthorizationAdapter有意让 provider 异常向上传播。GuardrailMiddleware统一负责异常处理、审计以及 fail-open/fail-closed 执行。- 不能通过
user_role == "internal"推导Principal.is_internal。权威信号是内部 认证状态auth_source,必须从 Gateway 上下文传递。 - Adapter 上下文保留
thread_id、run_id、tool_call_id、tool_input、is_subagent、agent_id和timestamp。 AuthorizationConfig已加入 AppConfig,默认enabled: false,并参与 singleton 加载;Phase 0 尚无运行时代码读取它。- Adapter 在结构上符合
GuardrailProvider;同步和异步异常传播均由测试固定。
以下原 RFC Phase 0 项目没有在 PR #4127 中落地,仍属于后续工作:Principal 构建器、 内置 RBAC provider、Layer 1 过滤、Layer 2 自动装配和内部 Principal 填充。
PR #4127 多轮修改的原因
实现方向获得认可,但首版没有完整验证后续阶段将继承的关键契约:
- 直接沿用了 RFC 关于
filter_resources默认行为的假设,没有先验证 Python Protocol 的真实语义。willem-bd 和 zhfeng 独立指出了同一个问题——多个 reviewer 从不同角度指向同一处,说明该缺陷在 review 中非常显眼。后续阶段中如果再次出现 多人独立指出同一处,应当视为最高优先级,不再需要多方确认。 - 身份字段按照表面数据结构映射,没有追踪到运行时权威来源。
- 配置测试验证了 Pydantic 对象构建,但最初绕过了真实 singleton 加载生命周期。
- schema 变化最初遗漏
config_version;同时主线发生版本竞争,需要 rebase 后重新 选择版本号。 - Helm 中的配置版本镜像和仓库内 RFC 文档较晚才在 review 中被发现。
- 代码、测试、注释和 PR 描述没有在同一次 push 中同步,导致旧描述让已修问题再次 被提出。
- 对
GuardrailMiddleware已有的 fail-closed 机制理解不足,在 adapter 中写了 "Phase 1 加 try/except" 的 TODO,暗示 adapter 应当自行处理异常。实际上 fail-closed 是 middleware 的职责,adapter 刻意不 catch 异常。描述与架构意图不一致导致了额外的 review 轮次。
这些问题主要是实施前检查和可追踪性不足,并非两层授权设计被否定。
所有后续阶段必须保持的不变量
authorization.enabled: false必须保持现有行为不变。- Layer 1 和 Layer 2 必须使用同一个 provider 和同一个 Principal。
- Layer 1 必须在
assemble_deferred_tools之前过滤;被移除的工具不能进入DeferredToolCatalog,也不能被tool_search再次提升。 - Layer 1 必须覆盖 lead agent、native subagent 和
DeerFlowClient三条装配路径。 - Layer 2 复用
GuardrailMiddleware;不能在 adapter 中重复实现异常处理、审计、 deny 消息或 fail-closed 逻辑。 - ownership 检查和现有
require_admin_user()管理端点保护必须保留。细粒度授权只能 增加策略,不能削弱现有保护。 - deny 优先于 allow。身份缺失、未知角色、provider 故障和 provider 返回值格式错误 都必须具有明确且经过测试的行为。
- 同步和异步路径必须具有一致的授权决策和失败语义。
- internal、Web、关闭认证、已绑定频道、未绑定频道、scheduler 和 subagent 的身份 都必须从真实来源追踪。
- 新增 resource 或 action 时,必须检查所有消费者、allowlist、配置示例、文档和测试。
- 新组件嵌入现有中间件前,必须先完整理解宿主中间件已有的机制(异常处理、审计、 fail-closed 等)。新组件不重复实现宿主已有的逻辑;如果看似缺少某功能,先确认是 否由宿主在上游或下游统一处理。
Phase 1 实施前确认
Phase 1 是工具授权。编码前必须先确定:
- Principal 在哪里构建,以及如何进入三条工具装配路径。
auth_source、owner role、default_role和 subagent 继承如何组合。- provider 如何实例化,以及配置热更新后如何刷新。
- authorization 与显式配置的 guardrail 如何共存,二者都不能静默替换或绕过对方。
- provider 构造异常和授权决策异常是否使用同一 fail-closed 策略,以及各自由哪层处理。
- 内置 RBAC provider 对 allow、deny 和通配符的精确定义。
Phase 1 最低验证要求:
- 每角色 allow、deny、通配符、deny 优先、未知角色和默认角色测试。
- lead agent、subagent 和 embedded client 的工具可见性测试。
- 证明被拒绝工具不会进入 deferred catalog。
- Layer 2 的 allow、deny、provider 异常、审计、同步和异步测试。
- prompt injection 回归测试,证明装配阶段被过滤的工具无法执行。
- internal、未绑定频道、关闭认证和 subagent 的 Principal 测试。
- 通过真实生命周期执行 AppConfig 加载与热更新测试。
- 证明关闭 authorization 时现有工具集合完全不变。
每次更新 PR 前的固定清单
- 选择配置版本号前,已 fetch 并 rebase 最新
upstream/main。不能使用本地缓存的 旧版本号——主线可能在此期间已被其他 PR bump 过。先 fetch、读最新值、+1,再在config.example.yaml+deploy/helm/deer-flow/values.yaml+deploy/helm/deer-flow/README.md三处同步。 - 已搜索 issue #4063 和当前阶段是否存在并行工作。
- 每个新字段都已追踪到权威生产者,而不只是确认类型。
- 测试经过公开运行时生命周期,而不只是直接构造配置模型。
- 已按需覆盖 lead、subagent、embedded、同步和异步路径。
- 已执行负向变异检查:删除新增 wiring 后,至少一个回归测试必须失败。
- 已搜索配置的所有镜像,包括 Helm values 和相关文档。
- 代码注释、测试、RFC 记录和 PR 描述已在同一次 push 中更新。
- 已明确列出延期阶段,且没有把延期功能带入当前范围。
- 已在下方记录新决策和未解决问题。
- 如果多个 reviewer 独立指出同一处问题,视为高置信信号,立即修复,不再等待 进一步确认。
决策日志
只追加新记录。需要推翻旧决策时,必须新增一条“替代决策”,不能直接重写历史。
2026-07-15 — Phase 0 / PR #4127
- 决策:
filter_resources为必需方法,不提供 Protocol fallback。 - 决策: provider 异常穿过 adapter,由
GuardrailMiddleware处理。 - 决策: internal 身份来自认证上下文,不使用角色名称约定推导。
- 决策: Phase 0 默认保持运行时行为不变。
- 延期: Principal 构建、RBAC provider、两层执行接入和 internal Principal 传递 移至 Phase 1。
2026-07-15 — Phase 1A-1 / 可信 Principal 链路
- 背景: Phase 0 建立了
AuthorizationProviderProtocol 和 adapter,但Principal.is_internal无可信来源,adapter 手工构造 Principal(与未来 Layer 1 的 builder 不一致),客户端可伪造身份字段。 - 决策:
build_principal_from_context()是唯一 Principal builder,Layer 1 和 Layer 2(adapter)必须共用。 - 决策:
is_internal来自request.state.auth_source == AUTH_SOURCE_INTERNAL, 在inject_authenticated_user_context最顶部(所有 early return 之前)用直接赋值 写入 runtime context,不用setdefault。 - 决策:
is_internal、authz_attributes和channel_user_id列为_SERVER_OWNED_AUTHZ_CONTEXT_KEYS, 从config["context"]和config["configurable"]清除客户端值。 - 决策:
channel_user_id只接受内部认证 IM 调用方的顶层body.context值;普通 session 调用和body.config两个 section 均不能提供该授权身份字段。 - 决策: Phase 1A-1 没有 Gateway 侧
authz_attributes权威生产者;Gateway 请求中 的authz_attributes一律删除(默认{})。 - 决策: adapter 的
evaluate/aevaluate通过build_principal_from_context()构造 Principal,接收default_role参数。 - 决策:
authz_attributes在所有进程内消费边界统一使用isinstance(x, Mapping)dict()复制;非 Mapping 抛TypeError。
- 决策: subagent 的
is_internal无条件写回 context(包括False)。 - 证据: 323 个目标与边界测试通过,覆盖 Gateway 防伪、channel sender 信任边界、subagent 继承、
GuardrailMiddlewareruntime 字段映射、adapter builder 复用和 harness/app 边界。 - 兼容性:
authorization.enabled: false时工具集合和执行决策不变;runtime context 新增is_internal字段是有意的可观察变化。 - 延期: RBAC provider、provider factory、Layer 1 过滤、Layer 2 自动接线移至 Phase 1A-2 / Phase 1B。
新记录模板
### YYYY-MM-DD — Phase N / PR #NNNN
- **背景:** 本次变化或 review 发现了什么?
- **决策:** 新的正式契约是什么?
- **证据:** 相关代码路径、测试、issue 评论或 benchmark。
- **否决方案:** 考虑过哪些方案,为什么不采用?
- **兼容性:** 如何保持现有部署和关闭功能时的行为?
- **延期:** 哪些工作留给下一阶段?
当前连续性风险
- 原始 RFC 仍包含“
filter_resources存在默认实现”的草案示例;本文件记录的已合并 Phase 0 契约优先于该示例。 - RFC 原始 Phase 0 范围大于 PR #4127 的实际落地范围。后续实现必须依据已合并基线 和明确延期清单,不能假设这些功能已经存在。
- 主线配置版本可能并发变化。不能提前占用版本号;必须先 rebase,再在所有镜像文件中 使用下一个有效版本。