-
国安部:警惕人工智能“数据投毒”
据微信公众号“国家安全部”8月5日消息,当前,人工智能已深度融入经济社会发展的方方面面,在深刻改变人类生产生活方式的同时,也成为关乎高质量发展和高水平安全的关键领域。然而,人工智能的训练数据存在良莠不齐的问题,其中不乏虚假信息、虚构内容和偏见性观点,造成数据源污染,给人工智能安全带来新的挑战。
数据是人工智能的基础
人工智能的三大核心要素是算法、算力和数据,其中数据是训练AI模型的基础要素,也是AI应用的核心资源。
——提供AI模型的原料。海量数据为AI模型提供了充足的训练素材,使其得以学习数据的内在规律和模式,实现语义理解、智能决策和内容生成。同时,数据也驱动人工智能不断优化性能和精度,实现模型的迭代升级,以适应新需求。
——影响AI模型的性能。AI模型对数据的数量、质量及多样性要求极高。充足的数据量是充分训练大规模模型的前提;高准确性、完整性和一致性的数据能有效避免误导模型;覆盖多个领域的多样化数据,则能提升模型应对实际复杂场景的能力。
——促进AI模型的应用。数据资源的日益丰富,加速了“人工智能+”行动的落地,有力促进了人工智能与经济社会各领域的深度融合。这不仅培育和发展了新质生产力,更推动我国科技跨越式发展、产业优化升级、生产力整体跃升。
数据污染冲击安全防线
高质量的数据能够显著提升模型的准确性和可靠性,但数据一旦受到污染,则可能导致模型决策失误甚至AI系统失效,存在一定的安全隐患。
——投放有害内容。通过篡改、虚构和重复等“数据投毒”行为产生的污染数据,将干扰模型在训练阶段的参数调整,削弱模型性能、降低其准确性,甚至诱发有害输出。研究显示,当训练数据集中仅有0.01%的虚假文本时,模型输出的有害内容会增加11.2%;即使是0.001%的虚假文本,其有害输出也会相应上升7.2%。
——造成递归污染。受到数据污染的人工智能生成的虚假内容,可能成为后续模型训练的数据源,形成具有延续性的“污染遗留效应”。当前,互联网AI生成内容在数量上已远超人类生产的真实内容,大量低质量及非客观数据充斥其中,导致AI训练数据集中的错误信息逐代累积,最终扭曲模型本身的认知能力。
——引发现实风险。数据污染还可能引发一系列现实风险,尤其在金融市场、公共安全和医疗健康等领域。在金融领域,不法分子利用AI炮制虚假信息,造成数据污染,可能引发股价异常波动,构成新型市场操纵风险;在公共安全领域,数据污染容易扰动公众认知、误导社会舆论,诱发社会恐慌情绪;在医疗健康领域,数据污染则可能致使模型生成错误诊疗建议,不仅危及患者生命安全,也加剧伪科学的传播。
筑牢人工智能数据底座
——加强源头监管,防范污染生成。以《网络安全法》《数据安全法》《个人信息保护法》等法律法规为依据,建立AI数据分类分级保护制度,从根本上防范污染数据的产生,助力有效防范AI数据安全威胁。
——强化风险评估,保障数据流通。加强对人工智能数据安全风险的整体评估,确保数据在采集、存储、传输、使用、交换和备份等全生命周期环节安全。同步加快构建人工智能安全风险分类管理体系,不断提高数据安全综合保障能力。
——末端清洗修复,构建治理框架。定期依据法规标准清洗修复受污数据。依据相关法律法规及行业标准,制定数据清洗的具体规则。逐步构建模块化、可监测、可扩展的数据治理框架,实现持续管理与质量把控。
国家安全机关将在以习近平同志为核心的党中央坚强领导下,全面贯彻总体国家安全观,与有关部门一道防范针对我人工智能领域的数据污染风险,依法维护人工智能安全和数据安全,不断筑牢国家安全屏障。
- 责任编辑: 房佶宜 
-
国安部长陈一新最新署名文章
2025-08-05 08:55 国家安全 -
三预警齐发,这些地方出门需注意安全
2025-08-05 07:52 极端天气 -
我国成功发射卫星互联网低轨卫星
2025-08-04 21:28 航空航天 -
骗取公务员身份升至厅级,蔡光辉被逮捕
2025-08-04 18:26 廉政风暴 -
退休13年后,北京检察一分院原检察长项明被判死缓、终身监禁
2025-08-04 15:49 廉政风暴 -
我国在艾滋病疫苗研发领域取得重要进展
2025-08-04 15:01 -
对16名潜逃者,港府出手
2025-08-04 14:10 香港 -
王汉青被双开:侵吞巨额科研经费
2025-08-04 13:56 廉政风暴 -
习近平就研究吸收网民对“十五五”规划编制工作意见建议作出重要指示
2025-08-04 09:50 -
中央气象台预警:京津冀部分地区有大暴雨
2025-08-04 08:05 极端天气 -
“甜瓜女王”吴明珠:我的一生就是结几个好瓜献给人民
2025-08-04 06:45 -
理想汽车回应理想i8与乘龙卡车安全性碰撞测试
2025-08-03 22:41 -
湖南耒阳发生故意伤害案件致2死3伤,警方通报
2025-08-03 21:45 依法治国 -
蔡奇看望慰问北戴河暑期休假专家
2025-08-03 20:47 -
西湖大学,拟获推免资格
2025-08-03 20:03 中西教育 -
奔驰女司机冒用丈夫执法证如何处理?二级消防士是什么等级?
2025-08-03 20:00 依法治国 -
过去7天,广东新增2892例基孔肯雅热本地病例
2025-08-03 18:06 -
航行警告!南海部分海域进行军事训练,禁止驶入
2025-08-03 13:56 -
弹射试验成功后,官兵和科研人员欢呼“17年了,孩子都长大了”
2025-08-03 08:09 中国海军 -
赵露思发长文:不用你们封杀我,我不干了
2025-08-02 22:22
相关推荐 -
“又想跟中国争,美国撺掇各国签协议,但争议很大” 评论 38
断供、断线、断念!多军种开展联合立体火力打击 评论 72
中国有望登顶,终结日企20余年霸主地位 评论 178
特朗普表态:不担心 评论 255
强拆巴拿马华人纪念碑,原来她蓄谋已久? 评论 181最新闻 Hot-
“高估了印度对美国的重要性”,印度富豪游说一年一无所获
-
推迟释放18名士兵,泰方称侦测到柬无人机,柬方否认指控
-
断供、断线、断念!多军种开展联合立体火力打击
-
“又想跟中国争,美国撺掇各国签协议,但争议很大”
-
“假好心真自利”,欧盟援助非洲铁路被批“殖民历史在回响”
-
“我们曾用日本和欧洲大巴,现在中国货更香”
-
“泽连斯基这是给了特朗普一巴掌”
-
“首次袭击委境内目标,CIA干的”
-
中国有望登顶,终结日企20余年霸主地位
-
特朗普又要对伊朗动手?
-
委内瑞拉:谴责美国,声援中国兄弟
-
扛不住了?“委内瑞拉开始关停”
-
打破华尔街预期,“中国央行稳住货币政策”
-
白银暴涨后又遇4年多来最大盘中跌幅,黄金铂钯均价格大跌
-
“中国蓝箭航天,挑战马斯克”
-
白银急涨,这也扯中国?
-

观察员
上海市互联网违法与不良信息举报中心