斯坦福复测50条LLM论断：44%已失效

斯坦福研究者 Owen Queen 和 James Zou 用 8 家开发者在 2024 年 7 月至 2026 年 9 月间发布的 20 个模型，复测 50 条被广泛引用的 LLM 结论，发现 44% 已失效，另有 34% 明显减弱，仅 16% 仍成立、6% 变强。 据 The Decoder 报道，这些结论的平均“寿命”为 15.7 个月。该结果意味着，以旧模型为对象得出的 LLM 论断在模型快速迭代后可能不再适用，引用时需核对所测模型与时间范围。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。