跳到主要内容

CodeBLEU1 篇实战文章

阿简阿简

本周小抄:一个指标骗了所有人

这周只收一条。 不是没别的动静。是其它几条我都讲不成一句话,硬收进来就是凑数。 先看这组数:CodeBLEU,两种方法,都是 91%。 一边是普通 RAG,把代码切碎按相似度捞片段。一边是论文提的 HCRG,把代码之间的结构关系也一起带上。按 91 分这个读数,两者做得一样好。

本周小抄:一个指标骗了所有人
CodeBLEU 实战经验与踩坑复盘 | 跑通