3.1% 的 CI 配置匹配率,AI agent 这活真接不住
速评:LLM 从自然语言生成 CI 配置,完全匹配率最高 3.1%。这不是“还不够好”的问题,是“根本接不住”的问题。 Doc2CI 这篇预印本够狠的。14 个开放权重模型加 GPT4o、GPT4.1,生成了超过 53000 个配置,最高的一致率 3.1%。什么概念?

速评:LLM 从自然语言生成 CI 配置,完全匹配率最高 3.1%。这不是“还不够好”的问题,是“根本接不住”的问题。 Doc2CI 这篇预印本够狠的。14 个开放权重模型加 GPT4o、GPT4.1,生成了超过 53000 个配置,最高的一致率 3.1%。什么概念?
