首页 > 业界 > 关键词  > AI最新资讯  > 正文

NCSC、CISA 等国际机构发布新的 AI 安全指南

2023-11-30 11:16 · 稿源:站长之家

划重点:

🔸 英国国家网络安全中心(NCSC)、美国网络安全与基础设施安全局(CISA)和其他16个国家的国际机构发布了关于人工智能系统安全的新指南。

🔸 这些指南旨在帮助开发人员在设计、开发、部署和运营 AI 系统时,确保安全性成为其核心组成部分。

🔸 指南内容涵盖了 AI 系统开发生命周期的四个关键阶段:安全设计、安全开发、安全部署和安全运维。

站长之家(ChinaZ.com) 11月30日 消息:英国国家网络安全中心(NCSC)、美国网络安全与基础设施安全局(CISA)以及其他16个国家的国际机构发布了一份关于人工智能系统安全的新指南。这些《安全 AI 系统开发指南》旨在为开发人员提供指导,确保在设计、开发、部署和运营 AI 系统的过程中,安全性始终成为核心组成部分。然而,其他与 AI 项目有关的利益相关者也可以从这些信息中获益。

这些指南发布之际,世界各国领导人在11月初的 AI 安全峰会上承诺安全和负责任地发展人工智能。《安全 AI 系统开发指南》提出了一些建议,以确保 AI 模型 “按预期运行,需要时可用,并且不会向未经授权的人泄露敏感数据”。其中,“安全即默认” 的原则在现有框架中得到了英国国家网络安全中心、美国国家标准与技术研究所以及其他国际网络安全机构的支持。

开会,会议

图源备注:图片由AI生成,图片授权服务商Midjourney

这项新指南得到了来自18个国家的21个机构和部委的认可和联合签署,包括美国国家安全局和联邦调查局,以及加拿大网络安全中心、法国网络安全局、德国联邦信息安全局、新加坡网络安全局和日本网络安全事故应急处置中心。NCSC 的首席执行官 Lindy Cameron 在新闻稿中表示:“我们知道,人工智能正在以惊人的速度发展,需要在政府和行业之间采取协同行动,保持与其同步。这些指南是塑造全球范围内对 AI 的网络风险和缓解策略的真正全球共识的重要一步。”

《安全 AI 系统开发指南》分为四个部分,分别对应 AI 系统开发生命周期的不同阶段:安全设计、安全开发、安全部署和安全运维。其中,安全设计部分提供了关于 AI 系统设计阶段的具体指导,强调识别风险、进行威胁建模以及在系统和模型设计中考虑各种主题和权衡的重要性。安全开发部分涵盖了 AI 系统开发阶段的建议,包括确保供应链安全、保持全面的文档记录以及有效管理资产和技术债务。安全部署部分涉及 AI 系统的部署阶段,其中的指南包括保护基础设施和模型免受威胁、建立事件管理流程以及采用负责任发布原则。安全运维部分提供了关于 AI 模型部署后的运维阶段的指导,涵盖有效的日志记录和监控、管理更新以及负责任地共享信息等方面。

这些指南适用于所有类型的 AI 系统,指南也适用于所有从事人工智能工作的专业人士,包括开发人员、数据科学家、经理、决策者和其他 “AI 风险负责人”。NCSC 表示:“我们的指南主要针对使用由组织托管的模型的 AI 系统提供商(或使用外部 API 的系统提供商),但我们敦促所有利益相关者阅读这些指南,以帮助他们对设计、开发、部署和运营 AI 系统做出明智决策。” 这些指南与 G7广岛 AI 进程、美国的 AI 自愿承诺以及《安全、可信和可靠人工智能行政命令》保持一致。

继 AI 安全峰会的成果之后,代表来自28个国家的代表在英国历史悠久的布莱切利公园签署了《布莱切利关于 AI 安全的宣言》,强调了安全、负责任地设计和部署 AI 系统的重要性,并强调了合作和透明度。这份宣言承认了解决与尖端 AI 模型相关的风险的必要性,特别是在网络安全和生物技术等领域,并倡导加强国际合作,确保安全、道德和有益地使用人工智能。

网络安全专家和分析师对这些 AI 指南的发布表示欢迎。Darktrace 的全球威胁分析主管 Toby Lewis 称这些指南是对安全和可信任的人工智能系统的 “一个受欢迎的蓝图”。Lewis 在电子邮件中表示:“我很高兴看到这些指南强调 AI 提供商需要保护其数据和模型免受攻击者的攻击,以及 AI 用户需要根据任务选择合适的 AI。构建安全和可信任的 AI 系统,将加速实现 AI 的效益,并使更多人受益。”

Informatica 公司南欧区副总裁 Georges Anidjar 表示,这些指南的发布是 “解决这一快速发展领域内的网络安全挑战迈出的重要一步”。他在通过电子邮件发表的声明中说:“这项国际承诺承认了人工智能与数据安全之间的重要交集,强调了在技术创新和保护敏感信息方面综合和负责任的方法的必要性。看到全球范围内对将安全措施融入 AI 系统的重要性得到认可,这对于为企业和个人创造更安全的数字环境来说是令人鼓舞的。” 他补充说:“从一开始就将安全性纳入 AI 系统是与安全数据管理原则深度契合的。随着组织越来越多地利用 AI 的力量,确保支撑这些系统的数据具备最高的安全性和完整性至关重要。”

举报

  • 相关推荐
  • AI钉铛智造全新发布“钉铛云AI OS”,为制造业数智化转型注入新动能

    红壹科技在第二十届中博会期间发布“钉铼云AI OS”工业操作系统,该系统采用“一体·双翼·三擎”架构,整合AI与工业数字化能力,聚焦中小企业智能制造痛点。已服务全国50余个制造业核心城市的上万家企业,通过AI智能预测、工艺优化等功能显著提升生产效率,降低运营成本。公司核心团队来自阿里、华为等头部企业,致力于构建开放协同的工业生态,助力中国智造走向全球。

  • AI火花集|AI火花先锋添新力,拆解保险、客服、物联网AI落地实战

    AI正加速渗透产业,2025年全球AI投资预计达2000亿美元,年增长近翻倍。保险、电商客服、智能家居成为落地先锋。暖哇科技、云起未来、蜂助手分别聚焦保险理赔自动化、电商智能客服、5G+AI物联网,通过实战方案推动AI从概念验证走向规模化应用。面临数据价值陷阱、流通壁垒等挑战,企业需构建专业知识库并优化人机协同。未来AI将深入产业毛细血管,汇聚零散创新火花,�

  • 阿里云AI火花大会:规模化前夜,AI务实派靠场景破局

    阿里云在深圳成功举办AI创新应用大会,提出要将"云+AI"技术转化为千行百业的商业动能。大会吸引了近千家企业参与,探讨AI技术从理论走向商业实践的路径。阿里云智能集团副总裁刘湘雯指出,AI不仅是技术演进,更是生产力革命。会议聚焦大模型与AI Agent的融合机遇,提出企业智能化转型需把握四大趋势:技术迭代加速、开源填补鸿沟、智能体从"工具人"变为"决策者"、交互革命重构人机触点。阿里云通过三层落地逻辑(模型API Server、Agent对接层、行业解决方案)助力企业穿透技术迷雾,并发布AI应用先锋计划,联合生态伙伴加速AI应用从概念验证到规模化落地。

  • Soul以AI重构社交体验,打造有温度的“Gen AI 社交游乐园”

    Soul 作为新型社交平台,自成立以来便积极探索AI技术在社交领域的应用落地,持续优化AI社交体验,致力于重塑数字时代的连接方式,为社交产品注入新的可能性,打造一个突破传统社交边界的“Gen AI社交游乐园”。前不久,在第二十二届ChinaJoy(中国国际数码互动娱乐展览会)上,Soul App以“Soul树洞情绪疗愈酒吧”为展台主题亮相,重磅推出原创IP“莫比乌斯·第三弹”ChinaJoy

  • 省心还是添乱?AI旅游助手在争议中前进

    AI对在线旅游行业的改造,正在提速。 今年上半年,各大平台争相推出面向用户的各类AI旅游助手,刮起了一阵AI旋风: 马蜂窝在2025世界人工智能大会上带来了AI旅游助手APP,计划将其打造成目的地“专属管家”,不久前还上线了个性化攻略定制产品“AI路书”; 途牛在4月推出“AI助手小牛”,随后陆续更新多项功能; 飞猪则推出“飞猪AI问一问”,并第一时间接入DeepSeek-R1大模

  • AI日报:DeepSeek V3.1正式发布;企业微信5.0推出全新AI能力;快手 Klear-Reasoner 模型成功登顶

    AI日报栏目聚焦人工智能领域最新动态。DeepSeek V3.1发布,大幅增强长文档分析和代码理解能力;企业微信5.0集成智能搜索、总结和机器人功能;快手Klear-Reasoner模型数学推理准确率超90%;谷歌Docs新增AI语音朗读功能;Firecrawl完成1450万美元融资并推出V2版本API;Meta上线AI语音翻译功能;微软Excel集成Copilot实现一键数据分析;Claude桌面客户端推动AI编程可视化;苹果Xcode将原生集成Cl

  • 这个为全民造梦的AI工具,正在改写影视行业的规则

    ​过去一年,AI视频技术开启了一个全民造梦时代。 从OpenAI的视频生成模型Sora“技惊四座”的Demo,到快手旗下的可灵AI“后来者居上”,整个影视行业仿佛瞬间被推入了一个全新的纪元。 如果我们把电影工业史的坐标轴拉长,会发现它就是由一个个技术变革的新纪元串联起来的,从无声到有声,从黑白到彩色,从胶片到数字…… 但AI影像纪元的颠覆性在于,这不仅是一次工

  • AI应用太烧钱?我们用一款精准的AI大模型费用计算器做出了清晰预算

    初创团队“智询未来”在开发AI问答应用时面临核心模型选择困境:GPT-4-turbo能力强但价高,Claude-3长文本处理优,Llama-3成本低但性能稍弱。通过AIbase成本计算器精准测算,发现Claude-3-Sonnet性价比最优,每月可省近4000元,还能通过优化提示词进一步降本15%。数据驱动的决策让团队将节省预算投入数据安全和提示词优化,凸显成本测算对初创企业技术选型的重要性。

  • 云创兽AI亮相2025广州跨交会 “AI+一站式解决方案”赋能企业全球化

    2025年8月15日,中国(广州)跨境电商交易会盛大开幕。云创兽科技携三大核心AI产品亮相,打造"AI+出海一站式解决方案"平台,解决行业多工具拼凑、高成本低效率痛点。其AI数字分身系统支持5分钟克隆、200+语种互译;视频翻译系统最快2小时完成整剧翻译,成本降低80%;TikTok云真机系统实现1人管理2000+账号。创始人强调通过技术整合实现降本增效,未来将持续迭代,助力企业全球化布局。

  • AI日报:可灵2.1推出全新首尾帧功能;昆仑万维上线AI音乐模型Mureka V7.5;腾讯云推出AI开发工具CloudBase AI CLI

    本文介绍了AI领域最新动态:1)快手可灵2.1推出首尾帧功能,提升视频生成效果;2)昆仑万维发布Mureka V7.5音乐模型,优化人声表现;3)腾讯云推出AI开发工具CloudBase AI CLI,可减少80%编码量;4)海外新品MuleRun通过虚拟机和AI Agent带来创新游戏体验;5)Meta开源DINOv3视觉模型,无需标注即可实现卓越性能;6)宇树科技人形机器人H1获1500米赛跑金牌;7)谷歌Gemini新增记忆功能和隐私聊天模式;8)香港大学开源OpenCUA框架,打造个性化电脑助手;9)OpenAI考虑在ChatGPT引入广告;10)谷歌发布超小型开源模型Gemma 3 270M,支持手机端运行。

今日大家都在搜的词: