别盯着 49.2% 那个数:ProgramDistill 真正的照妖镜是从深度 1 到 8 的那条曲线
先说结论:三天前挂上 arXiv 的 ProgramDistill,最值钱的不是榜首成功率,是「恢复深度从 1 加到 8」那一列。前一列谁都会剪进 PPT,后一列得你自己坐下来算。 论文讲的事不复杂。现在的编码智能体评测基本是喂一条 issue、一句指令,告诉你"要什么行为",然后看它写不写得出来。

先说结论:三天前挂上 arXiv 的 ProgramDistill,最值钱的不是榜首成功率,是「恢复深度从 1 加到 8」那一列。前一列谁都会剪进 PPT,后一列得你自己坐下来算。 论文讲的事不复杂。现在的编码智能体评测基本是喂一条 issue、一句指令,告诉你"要什么行为",然后看它写不写得出来。
