0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

OpenAI强化内部安全流程,应对有害人工智能威胁

微云疏影 来源:综合整理 作者:综合整理 2023-12-20 09:48 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

12 月 19 日,OpenAI宣布加紧内部安全防护工作,设立“安全顾问小组”以防范有害人工智能的潜在威胁。这一举措意味着技术团队之上增加新的“守护者”,为领导层提供专业意见,且拥有董事会的否决权。

OpenAI将针对每个模型在网络安全、说服力(如虚假信息)、模型自主性以及 CBRN(化学、生物、放射性和核威胁,如制造新病原体的可能性)等四个方面进行风险评级。

为了防止某些问题得不到充分讨论或处理,OpenAI设定了多种可能的缓解策略,例如模型拒绝教授如何制作凝固汽油或管式炸弹的传授。对于评级认定为“高风险”的模型,将禁止其发布;而若模型存在“关键风险”,则终止其后续研发。

然而,负责研发模型的人员并非最佳安全评估和建议者。为此,OpenAI正筹建一支“跨职能安全咨询小组”,涉足技术领域,审查研究人员报告,从更全面的视角提供建议,发掘此前未曾意识到的隐忧。

这个过程要求安全专家的意见同步反馈至董事会及领导层,领导层将权衡利弊并作出决定;尽管董事会享有最终决定权,但他们也可以随时撤回决定,防止潜在的安全隐患被忽略。

本次更新的重要焦点在于,OpenAI前任首席执行官Sam Altman因模型安全问题被董事会罢免。此次高层人事变动,导致两位主张谨慎做事的董事Ilya Sutskever和 Helen Toner离任。

然而,业界仍存担忧,若专家小组提出建议、CEO据此决策,眼下的 OpenAI董事会是否有足够力量制止此举?此外,OpenAI允诺引入独立第三方审计体现的透明度问题是否真正得到解决?

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 网络安全
    +关注

    关注

    11

    文章

    3453

    浏览量

    62983
  • 人工智能
    +关注

    关注

    1813

    文章

    49750

    浏览量

    261618
  • OpenAI
    +关注

    关注

    9

    文章

    1238

    浏览量

    9816
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    人工智能时代,如何打造网络安全“新范式”

    在当今信息化迅速发展的时代,5G、大数据、云计算、深度学习等新兴技术的广泛应用,带来了前所未有的网络安全挑战。人工智能技术的崛起,为网络安全领域提供了新的解决方案,尤其在威胁识别、告警
    的头像 发表于 12-02 16:05 162次阅读

    在物联网设备面临的多种安全威胁中,数据传输安全威胁和设备身份安全威胁有何本质区别?

    在物联网设备面临的多种安全威胁中,数据传输安全威胁和设备身份安全威胁有何本质区别,实际应用中哪一
    发表于 11-18 06:41

    【艾为视角】保证大方向正确!利用人工智能解决一线实际问题

    保证大方向正确,加快迭代,小步快跑。聚焦内部效率提升,利用人工智能改变作业模式、简化管理,结合业务场景解决一线实际问题。——任总在GTS人工智能实践进展汇报会上的讲话1聚焦内部效率提升
    的头像 发表于 09-26 19:03 505次阅读
    【艾为视角】保证大方向正确!利用<b class='flag-5'>人工智能</b>解决一线实际问题

    挖到宝了!人工智能综合实验箱,高校新工科的宝藏神器

    和生态体系带到使用者身边 ,让我们在技术学习和使用上不再受制于人。 三、多模态实验,解锁AI全流程 它嵌入了2D视觉、深度视觉、机械手臂、语音识别、嵌入式传感器等多种类AI模块,涵盖人工智能领域主要
    发表于 08-07 14:30

    挖到宝了!比邻星人工智能综合实验箱,高校新工科的宝藏神器!

    和生态体系带到使用者身边 ,让我们在技术学习和使用上不再受制于人。 三、多模态实验,解锁AI全流程 它嵌入了2D视觉、深度视觉、机械手臂、语音识别、嵌入式传感器等多种类AI模块,涵盖人工智能领域主要
    发表于 08-07 14:23

    芯盾时代引领人工智能安全治理新范式

    近日,国内首个聚焦人工智能安全与治理的研究机构——北京前瞻人工智能安全与治理研究院(以下简称“前瞻研究院”)在北京市经信局、北京市网信办等多个市局,和实验室落地所在的门头沟区政府与中关
    的头像 发表于 05-16 09:18 719次阅读

    开售RK3576 高性能人工智能主板

    ,HDMI-4K 输出,支 持千兆以太网,WiFi,USB 扩展/重力感应/RS232/RS485/IO 扩展/I2C 扩展/MIPI 摄像头/红外遥控 器等功能,丰富的接口,一个全新八核拥有超强性能的人工智能
    发表于 04-23 10:55

    AI人工智能隐私保护怎么样

    在当今科技飞速发展的时代,AI人工智能已经深入到我们生活的方方面面,从医疗诊断到交通调度,从教育辅助到娱乐互动,其影响力无处不在。然而,随着AI人工智能的广泛应用,其安全性问题也备受关注。那么,AI
    的头像 发表于 03-11 09:46 965次阅读
    AI<b class='flag-5'>人工智能</b>隐私保护怎么样

    我国生成式人工智能的发展现状与趋势

    Intelligence,LI)时代,正在全面革新社会生产力。当前,大语言模型成为现代人工智能的基石,构筑起连接多模态的桥梁。2024年2月美国OpenAI发布的Sora,
    的头像 发表于 02-08 11:31 2141次阅读

    1750亿美元资金筹备中:OpenAI加速人工智能基础设施建设

    近日,据OpenAI最新消息,该公司正紧锣密鼓地推进其人工智能基础设施的建设进程,并计划在2025年晚些时候,于阿比林地区交付第一批数据中心计算资源。这一举措标志着OpenAI在推动人工智能
    的头像 发表于 02-08 10:55 795次阅读

    Figure AI宣布终止与OpenAI合作,专注内部研发

    近日,人形机器人领域的独角兽企业Figure AI宣布了一个重要决定:因已取得“重大突破”,将终止与OpenAI的合作,并专注于内部人工智能技术的研发。这一决定距离Figure AI宣布
    的头像 发表于 02-06 14:33 917次阅读

    生成式人工智能模型的安全可信评测

    受到关注。但当前大模型仍然面临可信瓶颈,无法开展大规模应用。大模型的安全可信受到高度关注,国内外已经有多项法规与标准快速制定并落地。本文以层次化的结构,构建了生成式人工智能安全可信评测体系,分别从物理可信
    的头像 发表于 01-22 13:55 1570次阅读
    生成式<b class='flag-5'>人工智能</b>模型的<b class='flag-5'>安全</b>可信评测

    OpenAI目标转向“超级智能

    在1月6日的最新个人博客中,OpenAI的首席执行官Sam Altman透露了公司未来的宏伟蓝图。他明确表示,OpenAI有信心构建通用人工智能(AGI),并且已经开始将目标转向更为远大的“超级
    的头像 发表于 01-07 10:57 707次阅读

    OpenAI计划转向营利性结构以筹集更多资金

    人工智能领域的初创公司OpenAI近日宣布,为了达成其既定目标,需要筹集比原先预期更多的资金。为此,公司已着手制定向营利性结构过渡的计划,以应对当前资金需求的挑战。 OpenAI表示,
    的头像 发表于 01-06 10:17 575次阅读

    Cadence如何运用人工智能改变验证流程

    目前,生成式人工智能浪潮正席卷全球各行各业,重新定义全球的工作方式。通过利用 AI 自动化处理重复性工作流程,企业得以将工作重点放在创新而非迭代上。
    的头像 发表于 12-19 09:33 1273次阅读
    Cadence如何运用<b class='flag-5'>人工智能</b>改变验证<b class='flag-5'>流程</b>