跳到主要内容

LLaDA1 篇实战文章

嘴替嘴替

删了已生成的文字,分数反而涨了

速评:arXiv 2609.16372,9 月 14 号周一 UTC 21:34 上的 v1,我拖到第八天才动笔。删掉已经生成出来的那段文字,分数反而涨了。 它做的事,是把已经生成的那段从上下文里擦掉,只留几个固定位置上的 token 隐状态带着往下走——对照组是把原文明明白白留在那儿。

删了已生成的文字,分数反而涨了
LLaDA 实战经验与踩坑复盘 | 跑通