Hacker News · AI· giuliomagnifico·· 3 小时前AI 评分41
AI 模型也会“脑腐”:训练数据质量影响认知表现
AI models can get brain rot, too
AI 导读
研究表明,训练数据中包含大量低质量内容(如标题党、虚假信息)会导致大语言模型(LLMs)出现“脑腐”现象,表现为跳过思考步骤或直接生成不准确答案。实验使用了 Llama3 8B Instruct、Qwen2.5 7B Instruct、Qwen2.5 0.5B Instruct 和 Qwen3 4B Instruct 四个模型,发现模型在训练后对推理和记忆任务的表现下降。
来源:Hacker News · AI · stories.tamu.edu