国安部发提示,指人工智能“数据投毒”污染数据源,少量虚假文本就能使模型有害输出大幅上升
【国安部发布提示警惕人工智能“数据投毒”】 国家安全部今日发布安全提示文章,指出人工智能训练数据存在质量不一的状况,其中包含不少虚假信息、虚构内容以及带有偏见的观点,这造成了数据源污染,给人工智能安全带来新挑战。 通过篡改、虚构和重复等“数据投毒”行为产生的污染数据,会干扰模型在训练阶段的参数调整,削弱模型性能、降低其准确性,甚至诱发有害输出。研究显示,当训练数据集中仅有0.01%的虚假文本时,模型输出的有害内容会增加11.2%;即便只有0.001%的虚假文本,其有害输出也会相应上升7.2%。
本文由 AI 算法生成,仅作参考,不涉投资建议,使用风险自担
【免责声明】本文仅代表作者本人观点,与和讯网无关。和讯网站对文中陈述、观点判断保持中立,不对所包含内容的准确性、可靠性或完整性提供任何明示或暗示的保证。请读者仅作参考,并请自行承担全部责任。邮箱:news_center@staff.hexun.com
最新评论