前OpenAI安全研究员称“安全没有被优先考虑”

时间:2024-10-01 编辑: 浏览:(853)

前OpenAI安全研究员Leopold Aschenbrenner表示,该公司的安全实践“严重不足”。在周二发布的对Dwarkesh Patel的视频采访中,Aschenbrerner谈到了优先事项上的内部冲突,这表明人们将重点转向以牺牲安全为代价的人工智能模型的快速增长和部署。

他还说,他是因为把自己的担忧写下来而被解雇的。

在一次长达四个小时的广泛对话中,Aschenbrenner告诉Patel,他去年写了一份内部备忘录,详细说明了自己的担忧,并在公司外部知名专家中传阅。然而,在几周后发生重大安全事件后,他表示,他决定与几名董事会成员分享一份最新的备忘录。他很快就被OpenAI释放了。

Aschenbrenner说:“当他们解雇我时,他们问我的问题也可能是有益的……这些问题是关于我对人工智能进展的看法,对AGI的适当安全级别,政府是否应该参与AGI,我和超级联盟团队是否忠于公司,以及我在OpenAI董事会活动中的表现。”。

AGI,或通用人工智能,是指人工智能在任何领域都达到或超过人类智能,无论它是如何训练的。

在他短暂离职后,对公司或萨姆·奥特曼的忠诚成为一个关键因素:超过90%的员工签署了一封信,威胁要辞职以声援他。他们还推广了这样一句口号:“没有人,开放人工智能什么都不是。”

Aschenbrenner回忆道:“尽管有压力,但我在董事会活动期间没有签署员工信。”。

由Ilya Sutskever和Jan Leike领导的超级联盟团队负责建立长期的安全实践,以确保人工智能与人类的期望保持一致。包括Sutskever和Leike在内的该团队知名成员的离职带来了更多的审查。整个团队随后解散,并宣布成立一个新的安全团队……由首席执行官Sam Altman领导,他也是OpenAI董事会的成员。

Aschenbrenner表示,OpenAI的行为与其关于安全的公开声明相矛盾。

“另一个例子是,当我提出安全问题时,他们会告诉我安全是我们的首要任务,”他说。“当需要投入大量资源或权衡采取基本措施时,安全总是没有被优先考虑。”

这与莱克的声明一致,莱克表示,在奥特曼的领导下,团队正在“逆风航行”,“安全文化和流程已经退居闪亮产品的次要地位”。

Aschenbrenner还表达了对AGI发展的担忧,强调了谨慎方法的重要性,尤其是在许多人担心中国正在努力推动AGI研究超越美国的情况下。

他说,中国“将竭尽全力渗透到美国的人工智能实验室,数十亿美元,数千人……(他们)将试图超越我们。”“事关重大的不仅仅是酷炫的产品,还有自由民主能否生存。”

就在几周前,据透露,OpenAI要求其员工签署滥用保密协议(NDA),阻止他们公开谈论公司的安全做法。

Aschenbrenner表示,他没有签署这样的保密协议,但表示有人向他提供了约100万美元的股权。

为了回应这些日益增长的担忧,近十几名OpenAI现任和前任员工同时签署了一封公开信,要求有权在不担心报复的情况下谴责公司的不当行为。

这封信得到了Yoshua Bengio、Geoffrey Hinton和Stuart Russell等行业人士的支持,强调人工智能公司需要致力于透明度和问责制。

信中写道:“只要政府对这些公司没有有效的监督,现任和前任员工就是少数能够让他们对公众负责的人之一——然而,广泛的保密协议阻碍了我们表达我们的担忧,除了那些可能未能解决这些问题的公司。”。“普通的举报人保护是不够的,因为它们专注于非法活动,而我们担心的许多风险尚未受到监管。

“鉴于整个行业此类案件的历史,我们中的一些人有理由担心各种形式的报复,”报告继续说道。“我们不是第一个遇到或谈论这些问题的人。”

在限制性就业条款的消息传开后,萨姆·奥特曼声称他不知道这种情况,并向公众保证他的法律团队正在努力解决这个问题。

他在推特上写道:“在我们之前的退出文件中,有一条关于潜在股权取消的规定;尽管我们从未收回任何东西,但这不应该是我们在任何文件或通信中看到的。”。“这是我的责任,也是我为数不多的几次在运行OpenAI时感到真正尴尬的事情之一;我不知道这会发生,我应该知道。”

OpenAI表示,自那以后,它已将所有员工从有争议的非贬低协议中释放出来,并从离职文件中删除了该条款。

OpenAI没有回应Decrypt的置评请求。

最新 更多 >
  • 1 JIZZ币的创始人是谁

    JIZZ币的创始人是谁?这可能是许多人心中的疑惑。事实上,JIZZ币的创始人是一位年轻的匿名团队,他们将区块链技术与生活日常结合,致力于打造一种有意义的数字货币。从匿名到大胆创新作为一个匿名团队,JIZZ币的创始人几乎没有公开过自己的真实身份。但是,在这背后,他们不断地进行技术探索, 挑战传统的数字货币形态。JIZZ币作为一种有意义的数字货币,致力于为生命中的所有重要阶段提供一种数字纪念品。不仅如

  • 2 HSUITE币历史价格走势怎么样?

    HSUITE币是一种新型的虚拟货币,它采用了最新的区块链技术,具有高度的安全性和透明度。自2019年以来,它的价格一直在波动,受到了许多投资者的关注。2019年:创下历史高点在2019年初,HSUITE币价格一直维持在较低的水平上。然而,在3月份,它出现了激增,一度突破了每个币的1美元的价格。随着全球对区块链技术和虚拟货币的热情不断增加,这个价格继续上涨,最终达到了历史高点。在5月份,价格最高时达

  • 3 ISK币历史价格走势怎么样?

    ISK币是以冰岛克朗为基础的加密货币,它最早出现在2014年,是冰岛国内的一位公司推出的。虽然ISK币在国际范围内影响力和知名度不是很高,但是它的历史价格走势还是有一定的观察价值的。起步不错:2014年至2016年的价格上涨ISK币的历史可以追溯到2014年9月份,当时它的价格大约在0.01冰岛克朗左右。在第一个月之内,ISK的价格一路攀升到了0.1冰岛克朗。在紧接着的几个月中,这个加密货币的价格

  • 4 ANTG币去哪里交易

    ANTG币是一种基于区块链技术的加密货币,它具有可追溯、去中心化、安全性高等优势。作为一种新兴的数字资产,ANTG币吸引了越来越多的投资者的注意。要交易ANTG币,有许多交易所可供选择。下面介绍三个著名的交易所:欧易交易所、币安交易所和火必交易所。欧易交易所是一个全球知名的数字资产交易平台。它提供了多种货币对ANTG币的交易选项,包括ANTG/USDT、ANTG/BTC等。欧易交易所注重用户体验,

  • 5 ALBEDO币怎么出售

    ALBEDO币是一种以太坊基于的数字加密货币,它是由一群热衷于区块链技术和加密货币的开发者共同创建的。ALBEDO币的目标是成为一个安全、高效、透明的数字货币,并且为用户提供去中心化的交易和金融服务。通过采用创新的技术和共识算法,ALBEDO币致力于建立一个可持续发展的区块链生态系统。在出售ALBEDO币时,选择一个可信赖的交易所是非常重要的。下面将介绍三个著名的交易所:欧易交易所、币安交易所和火

  • 6 iOWN币的创始人是谁

    iOWN币的创始人是谁?iOWN币是近年来备受关注的一种加密货币,它是由一位名叫Mahmoud Kadri的创始人所创立的。Mahmoud Kadri的背景介绍Mahmoud Kadri不仅是一位加密货币领域的专家,也是一位拥有丰富商业经验的成功企业家。他在加入加密货币领域之前,曾经在多个不同的领域拥有过成功的创业经验。在他的创业生涯中,他曾经成功创建过多家企业,取得了相当可观的商业成果。Mahm

  • 7 AOG币去哪里买

    AOG币是一种全球范围内广泛接受的加密货币,也是一种基于区块链技术的数字资产。它具有匿名性、去中心化和安全性等特点,越来越多的投资者开始关注和购买AOG币。对于很多初学者来说,他们可能会有一个常见的问题:AOG币应该在哪里购买呢?下面介绍几个著名的交易所,供大家参考。欧易交易所是全球知名的数字货币交易所之一。该交易所提供了多币种的交易对,并且拥有快速的交易执行和高效的资金提现系统。欧易交易所采用了

  • 8 APEPE币哪个交易所可以买到

    APEPE币是一种以去中心化机制为基础的加密货币,采用了区块链技术来保证交易的安全性和匿名性。APEPE币以其独特的特点在加密货币市场上备受关注,并吸引了众多投资者的目光。首先,我们来介绍一下欧易交易所。欧易交易所是一个知名的加密货币交易平台,它提供了多种加密货币的买卖服务,并且支持多种交易对。欧易交易所的用户界面简洁清晰,非常易于操作,而且交易手续费相对较低。此外,欧易交易所有强大的安全措施和技

  • 9 JOL币的创始人是谁

    JOL币的创始人是谁?JOL币是近几年比较知名的虚拟货币之一,其创始人是一位匿名人士,目前不为人知。虽然JOL币的创始人是神秘的,但这不影响它在数字货币市场上的表现。JOL币的背景介绍JOL币一诞生就引起了市场关注,并在市场中迅速占据了一席之地。作为一种去中心化数字货币,它允许用户进行匿名交易,并具有高速处理速度,低交易费用等优势。与其他虚拟货币不同,JOL币不但可用于投机交易,还可以与实体经济相

  • 10 ALOHA币怎么出售

    ALOHA币是一种数字加密货币,诞生于2021年。它的目标是构建一个去中心化的金融生态系统,为用户提供安全、高效、便捷的支付和交易体验。ALOHA币采用区块链技术,具备快速确认、匿名性和防篡改等特点,备受投资者和交易者的青睐。作为一种有潜力的数字资产,ALOHA币可以在多个交易所进行买卖和交易。以下是其中几个著名的交易所:欧易交易所:欧易交易所是一家在加密货币圈内广受认可的交易所之一。它提供安全可