频率惩罚
-
避免codex编程生成过多冗余代码的策略
一、核心结论:冗余不是 Bug,而是生成式模型的“底层欲望” 首先,我想分享一个反常识的核心结论:代码冗余并不是模型“写错了”,恰恰相反,它是模型在试图“写得更对”时产生的副作用。 理解这点至关重要,因为它决定了我们的应对策略不是在“纠正一个偶然的错误”,而是在“对抗一种必然的统计学趋势”。 Codex 这类大型语言模型,本质上是在执行一个“下一个 Token 预测”的任务。当它生成代码时,每一步…
一、核心结论:冗余不是 Bug,而是生成式模型的“底层欲望” 首先,我想分享一个反常识的核心结论:代码冗余并不是模型“写错了”,恰恰相反,它是模型在试图“写得更对”时产生的副作用。 理解这点至关重要,因为它决定了我们的应对策略不是在“纠正一个偶然的错误”,而是在“对抗一种必然的统计学趋势”。 Codex 这类大型语言模型,本质上是在执行一个“下一个 Token 预测”的任务。当它生成代码时,每一步…