首页 > 其他分享 >OpenAI首席技术官:没将产品优先程度置于安全之前,超级对齐团队解散不影响 | 最新快讯

OpenAI首席技术官:没将产品优先程度置于安全之前,超级对齐团队解散不影响 | 最新快讯

时间:2024-07-13 16:55:11浏览次数:13  
标签:AI 快讯 安全 斯嘉丽 OpenAI 对齐 穆拉

 “我们看到了科学将引领我们走向何方,所以也理解人们对现在即将发生的事感到恐惧和焦虑。”

  近日,OpenAI 首席技术官米拉·穆拉蒂(Mira Murati)在一次访谈中再次谈起 AI(人工智能)安全,并对“超级对齐”安全团队解散、ChatGPT 斯嘉丽语音风波、公司面临监管审查等问题作出回应。

  穆拉蒂表示,过去几年取得了难以置信的技术进步,超出了所有人的预料。随着继续这一进步,人们对现在即将发生的事感到恐惧和焦虑也可以理解。她认为 OpenAI 有着非常出色的安全团队,安全地部署了能力最强的模型,“考虑到技术以及 OpenAI 的进步速度,在安全性、模型的训练和部署风险等方面加倍努力是非常重要的”。

  OpenAI 首席技术官米拉·穆拉蒂

  一个多月前,OpenAI 联合创始人、首席科学家伊尔亚·苏茨克韦(Ilya Sutskever)、超级对齐团队负责人杨·莱克(Jan Leike)在内的多位核心成员相继离开,作为核心安全团队的超级对齐也随之解散。消息人士透露,注重 AI 系统安全的员工已经对奥特曼的领导失去信心。莱克在宣布离职后还在X(推特)发帖怒斥 OpenAI 及领导层“重视光鲜的产品,安全文化和流程不再受到重视”。

  对此,穆拉蒂在 9 日回应称:“超级对齐是 OpenAI 非常重要的安全团队,但只是团队之一,公司有很多人负责安全工作。”她表示并不认同“公司把产品放在安全之前”这一观点,并称这一论调有点过于愤世嫉俗。

  她表示,很多人认为安全和能力是分开的,一定要一方优于另一方,而“安全应该从项目开始就与能力一同考虑,而不是事后追加”。在航天、汽车这些有着成熟安全思维和系统的行业,人们不一定会一直围着桌子争论什么是安全,但他们也一直在做这件事情。她认为整个行业也应该向成熟的安全纪律方向发展,不仅仅是操作纪律,也包含产品和部署安全,考虑偏见、虚假信息等因素。同时,她表示,OpenAI 也一直在考虑模型的长期对齐,不仅仅是当下。

  穆拉蒂也对 ChatGPT 的 Sky 语音与好莱坞知名影星“寡姐”斯嘉丽·约翰逊高度相似的问题进行了回应。她表示,当时与 OpenAI CEO 山姆·奥特曼(Sam Altman)分别去找了 Sky 的配音者和斯嘉丽,但两人并未协调一致,才不幸导致了后续的局面发生。

  彼时,斯嘉丽发布了声明并向 OpenAI 发送律师函,要求说明 Sky 确切的创造过程。约翰逊在声明中表示,去年 9 月,奥特曼找到她,询问她是否愿意为 ChatGPT 配音,去安慰用户,弥合 AI 与人类之间巨大的差异所带来的不适感。斯嘉丽称当时拒绝了这一提议,而在 ChatGPT-4 演示版发布前两天,奥特曼再次联系了斯嘉丽的经纪人,要求重新考虑。斯嘉丽强调,“在我们接触之前,系统声音就已经存在了”。随后 OpenAI 宣布暂停使用 Sky 语音,表示对斯嘉丽·约翰逊的尊重。

  至于此次事件是否会影响科技或是科技公司的形象,穆拉蒂表示,能做的就是把事情做好,让人们看到发生了什么,通过这种方式建立信任,除此之外并没有什么神奇的办法。

  对科技担忧的,不仅仅是普通使用者,全球越来越多的监管机构也开始密切关注。

  6 月初,据外媒报道,美国联邦政府的两家监管机构已达成协议,联邦贸易委员会(FTC)将带头审查 OpenAI,并针对微软向 OpenAI 进行投资、以及与其他 AI 公司达成协议的行为进行调查。6 月末,又有报道称,欧盟正在加大对 AI 行业的审查力度,包括重新调查微软与 OpenAI 的合作以及投资关系。

  对此,穆拉蒂表示:“有审查很好,我们正在建设一些难以置信的非常强大的东西,我们非常努力让它们变得更好,但也存在风险,人们应该更深入地参与并了解这项技术是什么,并理解对于各个领域意味着什么,如何更有效更安全地去部署……微软一直是与我们非常一致的重要合作伙伴,我们紧密合作去打造最强超级计算机,这也是 AI 模型的核心所在。”

  不过,就在当地时间 7 月 10 日,据外媒报道,微软已经放弃在 OpenAI 董事会的观察员席位,而此前传言称有望获得相同席位的苹果也不会加入 OpenAI 董事会。OpenAI 的一位发言人表示,在微软退出后,公司将不再有董事会观察员。微软、苹果接连放弃观察员席位,外界认为,或是出于对可能会被反垄断监管机构盯上的担忧。

来自: 网易科技

标签:AI,快讯,安全,斯嘉丽,OpenAI,对齐,穆拉
From: https://blog.csdn.net/www3300300/article/details/140398257

相关文章

  • TikTok for Business 发布《短剧出海营销白皮书》 | 最新快讯
    7月12日消息,TikTokforBusiness发布《2024短剧出海营销白皮书》(以下简称白皮书),从海外用户洞察、入局指南、爆剧制作、投放推广、业务撮合等多个维度,帮助厂商理解行业发展现状,降低爆剧制作门槛、提升投资回报。白皮书显示,目前,出海短剧产业链主要分为内容生产、......
  • OpenAI终止对中国提供API服务,对国内AI市场产生重大冲击?
    6月25日,OpenAI突然宣布终止向包括中国在内的国家地区提供API服务,本月9日这一政策已经正式生效了!有人说,这个事件给中国AI行业带来很大冲击!是这样吗?在展开讨论前,我们先来看看什么是API服务?API,全称ApplicationProgrammingInterface,也就是应用程序开发接口,是一种让不同软件......
  • 「UCD」浅谈蓝湖Figma交互设计对齐
    在现代数字产品的设计和开发过程中,选择合适的工具对于提高团队效率和保证产品质量至关重要。本文将从开发和设计两个不同的角度,探讨蓝湖和Figma两款流行工具的优势与不足,并提出结论和建议。开发研发视角:蓝湖优点:清晰的设计规范:蓝湖为开发工程师提供了清晰的设计规范,有......
  • 理解 OpenAI 的 CLIP 模型
    来源:https://medium.com/@paluchasz/understanding-openais-clip-model-6b52bade3fa3CLIP是由OpenAI在2021年发布的,自那时起已成为许多多模态AI系统中的基础构件之一。本文深入探讨了CLIP是什么、它是如何工作的、如何使用以及其实现方式。引言CLIP,即ContrastiveLan......
  • 结构体内存对齐
    计算结构体所占用的内存是在学习C语言时需要学习的内容,学习结构体内存对齐是计算结构体所占空间必不可少的知识点。那么什么是结构体内存对齐呢?相信学完这篇文章后,你会对结构体有更加深入的理解。对齐规则1.结构体的第⼀个成员对⻬到和结构体变量起始位置偏移量为0的地址......
  • 硅纪元视角 | Speak火了!3个月收入翻倍,OpenAI为何频频下注?
    在数字化浪潮的推动下,人工智能(AI)正成为塑造未来的关键力量。硅纪元视角栏目紧跟AI科技的最新发展,捕捉行业动态;提供深入的新闻解读,助您洞悉技术背后的逻辑;汇聚行业专家的见解,分享独到的视角和思考;精选对您有价值的信息,帮助您在AI时代中把握机遇。1分钟速览新闻  Spe......
  • 2024年6月后2周重要的大语言模型论文总结:LLM进展、微调、推理和对齐
    本文总结了2024年6月后两周发表的一些最重要的大语言模型论文。这些论文涵盖了塑造下一代语言模型的各种主题,从模型优化和缩放到推理、基准测试和增强性能。LLM进展与基准1、BigCodeBench:BenchmarkingCodeGenerationwithDiverseFunctionCallsandComplexInstructions......
  • C语言字节对齐技术在嵌入式、网络与操作系统中的应用与优化
    第一部分:嵌入式系统中的字节对齐嵌入式系统通常对性能和资源有着严格的要求。在这些系统中,字节对齐的正确使用可以显著提高数据访问速度,减少内存占用,并提高系统的整体效率。一、嵌入式系统中的字节对齐挑战嵌入式系统中的微处理器和微控制器通常对数据访问的对齐有特定的要......
  • 其他OpenAI API和功能
    文章目录嵌入嵌入如何为ML模型翻译语言内容审核模型Whisper和DALL.E    除了文本补全功能,OpenAl用户还可以使用其他一些功能但如果你想深入了解所有API那么请查看OpenAl的APlreference页面。嵌入    由于模型依赖数学函数,因此它需要数值输入......
  • OpenAI 向少部分用户推出 GPT-4o(S2S)模型;Meta 发布 3D Gen AI 模型丨 RTE 开发者日报
      开发者朋友们大家好: 这里是「RTE开发者日报」,每天和大家一起看新闻、聊八卦。我们的社区编辑团队会整理分享RTE(Real-TimeEngagement)领域内「有话题的新闻」、「有态度的观点」、「有意思的数据」、「有思考的文章」、「有看点的会议」,但内容仅代表编辑的个人观点,......