约克大学和康考迪亚大学把三个 AI 编程工具仓库里 3864 个公开上报的 bug 逐条手工标注了一遍,发现只有约 12% 能追到模型身上,其余都是集成、配置、环境这些常规软件工程问题。本文拆解这份研究,讲清 Codex 的故障为什么集中在沙箱和 apply_patch 这条链路上,以及手上的配置该怎么改。
3864 个 Bug 拆开看:Codex 出错,八成坏在模型之外


约克大学和康考迪亚大学把三个 AI 编程工具仓库里 3864 个公开上报的 bug 逐条手工标注了一遍,发现只有约 12% 能追到模型身上,其余都是集成、配置、环境这些常规软件工程问题。本文拆解这份研究,讲清 Codex 的故障为什么集中在沙箱和 apply_patch 这条链路上,以及手上的配置该怎么改。