前OpenAI安全研究员称“安全没有被优先考虑”

时间:2024-09-20 编辑: 浏览:(941)

前OpenAI安全研究员Leopold Aschenbrenner表示,该公司的安全实践“严重不足”。在周二发布的对Dwarkesh Patel的视频采访中,Aschenbrerner谈到了优先事项上的内部冲突,这表明人们将重点转向以牺牲安全为代价的人工智能模型的快速增长和部署。

他还说,他是因为把自己的担忧写下来而被解雇的。

在一次长达四个小时的广泛对话中,Aschenbrenner告诉Patel,他去年写了一份内部备忘录,详细说明了自己的担忧,并在公司外部知名专家中传阅。然而,在几周后发生重大安全事件后,他表示,他决定与几名董事会成员分享一份最新的备忘录。他很快就被OpenAI释放了。

Aschenbrenner说:“当他们解雇我时,他们问我的问题也可能是有益的……这些问题是关于我对人工智能进展的看法,对AGI的适当安全级别,政府是否应该参与AGI,我和超级联盟团队是否忠于公司,以及我在OpenAI董事会活动中的表现。”。

AGI,或通用人工智能,是指人工智能在任何领域都达到或超过人类智能,无论它是如何训练的。

在他短暂离职后,对公司或萨姆·奥特曼的忠诚成为一个关键因素:超过90%的员工签署了一封信,威胁要辞职以声援他。他们还推广了这样一句口号:“没有人,开放人工智能什么都不是。”

Aschenbrenner回忆道:“尽管有压力,但我在董事会活动期间没有签署员工信。”。

由Ilya Sutskever和Jan Leike领导的超级联盟团队负责建立长期的安全实践,以确保人工智能与人类的期望保持一致。包括Sutskever和Leike在内的该团队知名成员的离职带来了更多的审查。整个团队随后解散,并宣布成立一个新的安全团队……由首席执行官Sam Altman领导,他也是OpenAI董事会的成员。

Aschenbrenner表示,OpenAI的行为与其关于安全的公开声明相矛盾。

“另一个例子是,当我提出安全问题时,他们会告诉我安全是我们的首要任务,”他说。“当需要投入大量资源或权衡采取基本措施时,安全总是没有被优先考虑。”

这与莱克的声明一致,莱克表示,在奥特曼的领导下,团队正在“逆风航行”,“安全文化和流程已经退居闪亮产品的次要地位”。

Aschenbrenner还表达了对AGI发展的担忧,强调了谨慎方法的重要性,尤其是在许多人担心中国正在努力推动AGI研究超越美国的情况下。

他说,中国“将竭尽全力渗透到美国的人工智能实验室,数十亿美元,数千人……(他们)将试图超越我们。”“事关重大的不仅仅是酷炫的产品,还有自由民主能否生存。”

就在几周前,据透露,OpenAI要求其员工签署滥用保密协议(NDA),阻止他们公开谈论公司的安全做法。

Aschenbrenner表示,他没有签署这样的保密协议,但表示有人向他提供了约100万美元的股权。

为了回应这些日益增长的担忧,近十几名OpenAI现任和前任员工同时签署了一封公开信,要求有权在不担心报复的情况下谴责公司的不当行为。

这封信得到了Yoshua Bengio、Geoffrey Hinton和Stuart Russell等行业人士的支持,强调人工智能公司需要致力于透明度和问责制。

信中写道:“只要政府对这些公司没有有效的监督,现任和前任员工就是少数能够让他们对公众负责的人之一——然而,广泛的保密协议阻碍了我们表达我们的担忧,除了那些可能未能解决这些问题的公司。”。“普通的举报人保护是不够的,因为它们专注于非法活动,而我们担心的许多风险尚未受到监管。

“鉴于整个行业此类案件的历史,我们中的一些人有理由担心各种形式的报复,”报告继续说道。“我们不是第一个遇到或谈论这些问题的人。”

在限制性就业条款的消息传开后,萨姆·奥特曼声称他不知道这种情况,并向公众保证他的法律团队正在努力解决这个问题。

他在推特上写道:“在我们之前的退出文件中,有一条关于潜在股权取消的规定;尽管我们从未收回任何东西,但这不应该是我们在任何文件或通信中看到的。”。“这是我的责任,也是我为数不多的几次在运行OpenAI时感到真正尴尬的事情之一;我不知道这会发生,我应该知道。”

OpenAI表示,自那以后,它已将所有员工从有争议的非贬低协议中释放出来,并从离职文件中删除了该条款。

OpenAI没有回应Decrypt的置评请求。

最新 更多 >
  • 1 MELO币值多少钱一枚

    在数字货币市场中,MELO币作为一种新兴的加密货币备受关注。那么,MELO币值多少钱一枚呢?要了解这个问题,我们需要从多个方面来分析。首先,我们来看MELO币的市场历史表现。自从MELO币于去年上市以来,其价格一直呈现稳步上涨的趋势。这主要归因于其独特的区块链技术和强大的社区支持。目前,MELO币的价格在数字货币市场中属于中等水平,每枚大约价值50元人民币。其次,我们可以从市场需求的角度来评估ME

  • 2 全球有多少个正规数字货币

    全球有多少个正规数字货币数字货币是指以数字形式存在的货币,通常使用加密技术保障交易的安全性和控制货币的发行。随着区块链技术的发展,数字货币已经得到了广泛的应用和推广。目前全球正规数字货币的数量逐渐增长,下面将重点介绍全球正规数字货币的概况。首先,比特币(Bitcoin)作为首个正规数字货币,始于2009年。比特币以其分散、去中心化、匿名性和安全性而受到广泛认可。截至目前,全球已有数百万人使用比特币

  • 3 LOCG币值多少钱一枚

    LOCG币是一种数字加密货币,它在全球范围内得到了广泛的认可和使用。LOCG币的价值是多少钱一枚呢?这是一个很常见的问题,其答案会受到多种因素的影响。首先,LOCG币的价值与市场供求关系密切相关。如果市场上的人们对LOCG币需求很高,而供应较少,那么LOCG币的价值就会上涨。相反,如果市场上的人们对LOCG币需求较低,而供应较多,那么LOCG币的价值就会下跌。其次,LOCG币的价值还会受到整个加密

  • 4 LOG币有风险吗

    随着数字经济的快速发展,加密货币在全球范围内崭露头角。作为一种新兴的数字货币,LOG币引起了人们的广泛关注。然而,正如所有投资品种一样,LOG币也存在一定的风险。本文将探讨LOG币的潜在风险,并为投资者提供一些建议。首先,LOG币市场的波动性是一个典型的风险因素。与其他数字货币一样,LOG币价格的波动性非常高。投资LOG币可能会面临价格大幅波动的风险,这可能导致投资者无法预测价格的走势,并可能带来

  • 5 LITH币值多少钱一枚

    最近,加密货币市场再次引起了人们的关注,其中一种备受瞩目的数字货币是LITH币。作为一种新兴的加密货币,LITH币以其独特的特点和技术优势吸引了许多投资者的眼球。LITH币是一种去中心化的数字货币,它依靠区块链技术进行交易和管理。与传统货币相比,LITH币的最大特点就是其去中心化的特性,这意味着没有任何中央机构或个人可以控制LITH币的发行和管理。随着越来越多的人了解和接受LITH币,其价值也逐渐

  • 6 ugt数字货币是什么

    UGT数字货币是什么?UGT数字货币(UG Token)是通过UGpay支付通道发行和流通的一种基于区块链技术的数字货币,它是UGpay生态系统中的核心货币。UGT数字货币旨在为用户提供安全、便捷、高效的支付方式,使全球用户可以方便地进行跨境支付、消费和转账等操作。UGT数字货币的特点1. 安全可信:UGT数字货币是基于区块链技术构建的,区块链技术具有去中心化、分布式存储、不可篡改等特点,保障交易

  • 7 怎么找数字货币交易员

    如何找到数字货币交易员随着数字货币市场的快速发展,越来越多的人开始寻找数字货币交易员来帮助他们进行交易。数字货币交易员是专门从事数字货币交易的人员,他们对市场有着深入的了解,并能提供有利的交易建议。下面是一些方法,可以帮助您找到合适的数字货币交易员。1. 在线平台在线数字货币交易平台是寻找数字货币交易员的首要途径。许多交易平台提供交易员列表,您可以浏览不同交易员的资料,了解他们的交易经验、胜率以及

  • 8 lyk币值多少钱一枚

    在数字货币市场中,LYK币是其中一种备受关注的加密货币。LYK币的价值受到众多因素的影响,包括市场需求、供应量以及投资者情绪等。究竟LYK币值多少钱一枚呢?让我们来详细探究一下。首先,需要了解的是,市场需求对LYK币的价值起着至关重要的影响。当人们对LYK币表现出兴趣并愿意购买时,其价值会相应上涨。相反,如果人们失去对LYK币的兴趣,其价值有可能下跌。因此,LYK币的价值随着市场需求的变化而不断波

  • 9 ubcoin数字货币交易所钱包怎么申请

    如何申请ubcoin数字货币交易所钱包 Ubcoin数字货币交易所钱包是一种方便且安全的数字资产管理工具。通过Ubcoin钱包,您可以进行加密货币的转账、收款以及交易等操作。以下是如何申请Ubcoin数字货币交易所钱包的简单步骤: 步骤一:下载Ubcoin钱包 首先,您需要从官方网站或应用商店下载Ubcoin数字货币交易所钱包应用程序。Ubcoin钱包目前支持iOS和Android操作系统,并且是

  • 10 MARMAJ币有希望吗

    MARMAJ币是一种全新的加密货币,于近期推出,在币圈引起了广泛的关注和热议。然而,对于其未来的发展前景,人们的看法却存在着一定的分歧。面对如此众多的数字货币竞争对手,MARMAJ币能否脱颖而出,成为市场的翘楚?这个问题引起了许多人的思考和讨论。首先,我们需要了解一下MARMAJ币的特点和优势。MARMAJ币使用了最新的区块链技术,拥有高度的安全性和匿名性。此外,MARMAJ币的交易速度也非常快,