Skip to content
This repository was archived by the owner on Oct 21, 2026. It is now read-only.
This repository was archived by the owner on Oct 21, 2026. It is now read-only.

[Enhancement] risk:high Epic 复查预算系统性偏紧,解除成本过重 #8

Open

Description

@Moshuiwang

背景 / 已发生的成本

在两个真实业务仓库的最近执行里,复现了同一模式:risk: high 的 Epic 在聚合独立复查阶段用尽默认预算(floor 1 / budget 2)仍有未修复的确认 P1,被迫设 Waiting external 等人类批准新 revision 才能继续。核实到的具体事件:

  • startimes-bi/bi-agent-audit #5 / PR #7:revision 1(pre_ready_budget=2)approve 于 11:05,第一轮(1cf7cec)修复 dry-run 输出不完整、--enable-systemd 互斥校验缺失、日志权限位错误;第二轮(05bcadc)预算用尽仍有 P1——资产无法原子恢复、normalize_argv 脱敏有具体绕过路径、receiver 字段明文落盘(直接违反 Epic 验收契约"不保存完整接收人标识")。人类于 14:04 approve revision 2(仅把 pre_ready_budget 从 2 提到 4),第三轮(8a1fb55)又发现新维度——非 root 用户可伪造审计事件来源、报错信息可能泄漏业务数据——修复后才转 Ready。
  • startimes-bi/bi-ai-agent Plan #127:同一 revision 下,三个 Epic 同时预算耗尽:
    • #123(PR #146):round1 修复 4 P1/1 P2,round2 预算用尽仍剩 2 P1——tool_use id 去重逻辑误判、文件参数白名单未堵住 ;/|/$$ 等 shell 元字符(可执行额外命令)。
    • #141(PR #147):round1 修复 3 P1,round2 预算用尽仍剩 1 P1——通知失败仍标记成功且异常日志带接收人标识,直接违反验收契约。
    • #128(PR #148):round1 修复 8 P1,round2 预算用尽仍剩 4 P1——sudo 有效读取粒度、firewalld 多行 rich-rule 解析、pre-activate 通配符掩盖缺失资产、sshd 有效配置覆盖不全,均为独立安全面。

逐 commit diff 核实:每一轮发现的都是同一功能域内不同维度的新缺陷,不是同一处代码反复被挑,且全部可直接映射到对应 Epic 验收契约里的具体条款(不保存接收人标识、可回滚、可信审计来源等)。没有发现风格洁癖或无关重构诉求。结论:这不是"无边界吹毛求疵",复查机制本身按设计运作正常,弱化它会真的漏掉可利用缺陷(如 shell 元字符注入、通知失败误报成功)。

真正的问题:解除成本,不是复查本身

4 次事件里 4 次都命中预算耗尽——对 risk: high 且验收契约包含多条独立安全/正确性维度的 Epic,固定 floor 1 / budget 2 系统性偏紧,不是偶发误差。而且解除方式很重:现有流程要求把整个 Plan 的 revision 加一、人类重新批准全部 YAML(哪怕只改一个 pre_ready_budget 数字),哪怕 authorization/epics/forbidden 等其他字段完全没变。bi-agent-audit 那次为此等了约 3 小时;bi-ai-agent 目前三个 Epic 同时挂在这一件事上。

建议方向(供 loop-starter/loop-planner 判断,非定论)

  1. 对 risk: high 且验收契约列出多条独立安全/正确性维度的 Epic,loop-planner 阶段可以直接给更高的默认 pre_ready_budget(例如 3-4),而不是等复查中途再申请——planner 起草阶段就能看到验收契约条目数,有依据预判。
  2. 增加一条比"整份 revision 重新批准"更轻量的"仅扩展复查预算"授权路径:人类只需确认"给这个 Epic 再加 N 轮",不必重新审阅 authorization/epics 全量字段;但仍必须是显式人类确认,不能自动放宽。
  3. loop-retrospective 增加"risk: high Epic 的预算耗尽命中率"指标,用多个 Plan 的真实数据校准默认预算,而不是一次性改个数字了事。

非目标

  • 不降低 risk: high 的复查严格度或 floor 轮数;
  • 不允许 executor 自行扩大预算而不经人类确认;
  • 不把这次的具体数字(3-4)当成最终答案——需要更多样本验证,样本目前只有 4 个事件、2 个仓库。

验收标准(草案)

  • loop-planner 起草阶段能根据 Epic 验收契约的维度数量,给出建议的 pre_ready_budget,而非无条件套用 profile 预设。
  • 新增"仅扩展复查预算"的轻量人类确认路径,明确其边界(不改变 authorization/epics/forbidden),并在合同规范里定义。
  • loop-retrospective 输出 risk: high Epic 的预算耗尽命中率统计。
  • 向后兼容:无此扩展路径的旧 Plan 仍按现行"revision 加一 + 全量重新批准"执行。

证据来源

本 Issue 内容基于对 startimes-bi/bi-agent-audit(Issue #5/#6,PR #7)与 startimes-bi/bi-ai-agent(Plan #127,Epic #123/#128/#141,PR #146/#147/#148)的 GitHub Issue/PR 评论与实际 commit diff 的逐轮核实,非推测。

Activity

  1. Moshuiwang commented on Jul 19, 2026

    @Moshuiwang
    OwnerAuthor

    补充一组已完成执行后的证据,支持本 Issue,并建议把预算调节从“固定翻倍”改为“按剩余复查面校准”。

    来源:startimes-bi/bi-agent-audit Plan #6 完整复盘

    • risk:high、单 Epic,最终 46 个文件、12 个分支提交,涉及 SSH runtime、安装/回滚、并发状态、真实发送门禁等多个 privileged state surfaces。
    • pre_ready_budget 经 revision 1/2/3 从 2 → 4 → 8,最终 8/8 全部耗尽。
    • PR CI 共 12 次运行,9 success / 3 failure;实现阶段完成到 L4。
    • 最终复查的 7 个原始 P1 经人工核对触发前提和运行控制后全部重分类为 P2,并进入业务仓库 [Enhancement] risk:high Epic 复查预算系统性偏紧,解除成本过重 #8 跟踪。
    • 仅已结束的 Waiting external 约 2:29:50,另有 L5 外部门禁仍在等待。

    对本 Issue 的两点增量建议:

    1. 初始预算除 risk_level 外,加入“独立 privileged state surfaces 数量”作为 sizing signal;同一 Epic 同时覆盖 SSH、所有权、并发、发送、回滚等多个面时,应优先拆分,或在批准时显式给出更高预算。
    2. 预算耗尽后的 revision 不应机械地 2 → 4 → 8 翻倍;先根据剩余未关闭 finding、受影响 surface 和是否仍有新发现,估算一次校准后的剩余预算,并记录依据。

    finding 严重性校准和逐轮证据保真另开 #9,避免把预算问题和 reviewer 输出合同混在一起。

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Metadata

Assignees

No one assigned

    Labels

    enhancementNew feature or request

    Projects

    No projects

      Milestone

      No milestone

      Relationships

      None yet

      Development

      No branches or pull requests

      Issue actions