首页 > AI头条  > 正文

警惕AI数据投毒!仅 0.01% 的虚假文本就能增加 AI 有害输出 11.2%

2025-08-05 09:03 · 来源: AIbase基地

 近期,国家安全部发布警告,提醒公众注意人工智能领域的数据污染问题。随着人工智能技术在社会经济中扮演越来越重要的角色,训练数据的质量显得尤为关键。国家安全部指出,虚假信息、偏见观点以及其他不良数据正严重影响 AI 的性能,给社会带来了新的安全隐患。

黑客,代码,程序员

图源备注:图片由AI生成,图片授权服务商Midjourney

人工智能的核心要素包括算法、算力和数据,其中数据是训练 AI 模型的重要基础。大量高质量的数据能够帮助 AI 更好地学习内在规律,实现智能决策与内容生成。然而,当数据中掺杂了虚假信息时,就会对 AI 模型产生严重的负面影响。研究表明,仅有0.01% 的虚假文本就能导致 AI 系统输出有害内容的概率增加11.2%。即便是0.001% 的虚假文本,也会导致有害输出上升7.2%。

数据污染不仅会影响 AI 模型的准确性和性能,还可能导致一系列现实风险。例如,在金融领域,不法分子可能利用 AI 生成的虚假信息来操纵市场,导致股价异常波动。在公共安全方面,数据污染可能误导舆论,甚至引发社会恐慌。而在医疗健康领域,虚假的数据可能导致错误的诊疗建议,危害患者的生命安全。

为了应对数据污染带来的威胁,国家安全部建议加强源头监管,防止污染数据的产生。依据《网络安全法》《数据安全法》和《个人信息保护法》等法律,建立 AI 数据的分类分级保护制度,确保数据的安全性。同时,还需强化风险评估,保障数据在全生命周期内的安全流通。此外,定期对受污染的数据进行清洗和修复,以构建有效的数据治理框架,从根本上提高 AI 的数据安全能力。

国家安全部的发文提醒我们,面对人工智能快速发展的时代,确保数据的真实与安全是维护社会各领域安全的重要一环。

划重点:

 🔍 仅0.01% 的虚假文本就会导致 AI 有害输出增加11.2%,提醒公众注意数据质量。

⚠️ 数据污染可能在金融、公共安全和医疗等领域引发重大风险,影响社会稳定。

🛡️ 国家安全部呼吁加强数据监管与清洗,确保 AI 技术的健康发展与应用安全。

  • 相关推荐
  • AI语音从“输出”到“输入”,资本在用千万美元押注什么?

    7月16日,语音输入创企 Willow Voice 宣布完成420万美元天使融资,由 YC 领投;而就在几天前,6月25日另一家语音输入创企 Wispr Flow 也宣布完成了3000万美元 A 轮融资。 此前,我们一直在观察 AI 语音赛道,但能拿到融资的基本都是做语音合成,也就是“输出”。比如赛道头部的 ElevenLabs,在今年1月份,完成了 C 轮2.5亿美元融资,估值达到30亿美元以上。 但最近的2笔融资,貌似在释�

  • AI CRM如何跨越落地鸿沟?场景驱动与数据闭环成关键

    销售易发布中国首款AI CRM产品NeoAgent,标志着CRM行业进入智能化变革。该产品基于腾讯混元大模型+DeepSeek开源模型,提供多场景智能解决方案。AI CRM的核心价值在于数据驱动,通过构建统一客户数据平台,实现销售全流程智能化。目前已在客户服务、销售助理等场景落地,其中销售助理Agent可提升70%事务性工作效率。企业应用AI需关注数据基础与场景适配性,销售易通过"场景需求-产品供给-使用反馈-快速迭代"的闭环模式,推动AI CRM持续进化。在Agentic AI时代,数据能力成为企业智能化转型的关键竞争力。

  • 2025年国内AI大模型哪家强?上AI大模型选型对比工具,用数据说话!

    文章分析了国内AI大模型市场竞争格局,指出百度、阿里、腾讯、字节等科技巨头与初创公司纷纷布局,呈现繁荣景象。针对用户选型难题,提出需综合考虑参数规模、场景适配、成本效益等关键因素,并介绍了AIbase推出的AI大模型选型对比工具。该工具汇集主流模型最新数据,支持多维度能力对比和场景化筛选,帮助用户快速定位最适合自身需求的模型。最后强调没有"最强"的通用模型,只有最匹配特定场景的解决方案。

  • 广域铭岛的工业AI精准决策三要素:实时数据、机理模型与反馈机制

    广域锚岛在2025世界人工智能大会上发布"Geega工业AI平台+工业智造超级智能体"双引擎,通过实时数据感知、工业Know-How与AI算法融合、决策-执行-验证闭环反馈三大能力,构建工业智能决策体系。该平台覆盖研发、生产、物流等全领域,日均处理百万级调度事务,使工作效率提升30%,年节省24000小时。其创新在于将行业机理知识内化为AI模型,并通过仿真验证持续优化,实现AI与制造业的深度耦合,推动工业智能化从理论走向规模化应用。

  • 微信不做已读功能 微信的存在不是为了增加大家社交压力

    微信官方再次强调不会推出"已读"功能,称从诞生之初就未设置该功能,未来也不会添加。官方解释称将"是否回应"的选择权交还用户,希望用户在数字信息洪流中拥有"装死"自由,不必被即时回复压力束缚。腾讯公关总监张军此前曾发文表示,"已读"功能会增加接收者的心理负担和社交压力。微信坚持不提供该功能,旨在保障用户在社交互动中的轻松与自由。

  • 司机中毒失去意识前拼命向警车开去 一氧化碳中毒两人转危为安

    ​7 月 4 日,浙江金华发生一起惊心动魄的救援事件。一辆蒙B车牌的轿车在行驶过程中突然减速并停在路中央,紧跟其后的浙J牌照车辆司机察觉异常,立即靠边停车并上前查看。透过车窗,这位司机发现车内驾驶员与乘客均已陷入昏迷状态,情况万分危急。 面对紧急状况,浙J司机迅速拨打报警电话,同时向恰好路过的警车挥手求助。在多次拍打车窗试图唤醒车内人员未果后�

  • 瓴羊带队“走进麦当劳·会数据同学”,看麦当劳中国如何用AI重塑“人货场

    麦当劳中国宣布未来4年将投入40亿元加速数字化转型,聚焦"人货场"重构,通过与阿里云、羚羊等深度合作打造数字化价值链。重点包括:1)消费者端整合会员与订单系统,实现体验协同;2)门店端通过AI排班、IoT设备管理等提升运营效率,1名员工可远程管理多家门店;3)总部构建动态管理体系,实现数据驱动决策。同时,羚羊发布智能客服Agent,覆盖电商、汽车等行业,解决退货流程复杂等行业痛点,部分场景效率提升80%。阿里云强调大模型需与业务深度融合,已在零售业知识库、智能建单等场景落地。麦当劳通过数字化手段降低管理门槛,支撑每年新增1000家门店的扩张目标。

  • 老人用狗试毒蘑菇:结果全家仍然中毒

    四川一家三口误食野蘑菇中毒入院,父亲担心有毒让狗先试吃,见狗没事才敢吃,但没想到的是食用后家人开始呕吐,最终经过治疗后才慢慢恢复。 在此提醒,野生蘑菇不要随便吃,当前随着降雨增多,野生蘑菇进入生长旺盛期,然而蘑菇美丽的外表下却暗藏杀机,蘑菇中毒后没有专一特效的解药”,病死率较高。 而且野生蘑菇是否有毒一般人难以准确鉴别,千万不要跟着�

  • 车主回应车被闪电击中:人车都没事 没有发毒誓

    近日,在广西北海的铁山服务区,发生了一起令人瞠目结舌的事件。有网友在该服务区休息时,本想拿出手机拍摄下雨场景发朋友圈,却意外记录下一段匪夷所思的画面。 原本聚焦于雨景的镜头,突然捕捉到一道闪电从空中直直击中一辆正在缓慢行驶的汽车车顶。据网友描述,闪电劈下的瞬间有明显震感,随后那辆车便熄火不动了,该网友因感觉危险害怕便开车离开了现场。

  • 老人被蛇咬伤后用白酒消毒 医生提醒:无法达到消毒效果

    ​7 月 28 日有消息报道,近日,四川遂宁发生了一起因毒蛇咬伤处理不当而引发关注的事件。 70 岁的李大爷在户外活动时,不慎被毒蛇咬伤脚踝。情急之下,李大爷自行用白酒对伤口进行消毒处理,随后才前往医院就医。 然而,当医生检查时,发现李大爷被毒蛇咬伤的部位已经“肿胀发硬”,情况较为严重。根据李大爷提供的毒蛇照片,医生确认咬伤他的是一条蝮蛇。蝮蛇�

今日大家都在搜的词:

热文

  • 3 天
  • 7天