AI 生成的 PR 怎么审:把测试、权限和变更证据摆在一起
GitHub 在 2026 年将部分自动安全验证扩展到第三方编码 Agent 创建的代码,包括依赖、秘密和代码安全检查。自动扫描能减少明显问题,却不证明业务逻辑正确,也不能替代人工审查。
看结果,而不是看自信程度
先确认 PR 是否只解决目标问题;看实际 diff 而不是 Agent 的总结。审查新增依赖、网络请求、权限变化、数据库迁移和配置默认值。安全扫描没报警时仍要问:是否存在越权访问、竞态、错误重试、数据丢失或没有覆盖的业务路径?
测试证据至少应包含执行命令、退出码、关键回归案例与未覆盖场景。对于迁移类改动,检查备份、向前兼容、回滚和运行时间。对于权限变更,分别以匿名、普通用户、其他租户和管理员身份测试。
减小 Agent 的工作范围
给 Agent 最小权限和独立分支;让它先提出计划,再实现小而可审查的提交。明确哪些文件不能修改、哪些命令需要批准;避免把真实生产密钥放进可执行不可信代码的环境。不要为了消除测试失败而允许 Agent 删除断言或跳过测试。
最后追踪被接受的 PR 在生产环境中的缺陷和回滚,定期回顾漏掉的风险。度量“合并数量”容易鼓励大而快的变更;更有价值的是问题解决率、审查时间和上线后质量。