

智通财经APP获悉,当OpenAI在10月败露其在一间高管会议室发现灌音设立地,多名前职工的反应一致——他们并不虞外。据五名知情东说念主士表露,早在OpenAI于2022年底推出ChatGPT之前,一些职工就已在里面对其安全措施提议担忧。这些东说念主士称,职工曾向OpenAI高层和董事会抒发担忧,部分职工在与惩处层疏通明得出论断:惩处层更暄和跟上谷歌(GOOGL.US)和Anthropic等竞争敌手的设施,而不是安全问题。
这些职工以为,OpenAI的管控过于宽松,外部东说念主员不错相对任性地获得这家AI实践室的时刻敏锐信息。举例,公司里面任何能探访代码的东说念主,齐能看到很多项打算底层时刻细节。
据两名知情东说念主士称,OpenAI已驱动调度策略以应付安全问题。负责家具斥地的高档高管Thibault Sottiaux最近接办了一项保护OpenAI里面系统的里面倡议。又名知情东说念主士称,本年8月,Sottiaux将OpenAI四分之一的分娩工程师再行调配,以改善安全基础法子。
这些里面申饬——包括职工多年来向疏导层反馈里面过错,其中部分细节此前未被败露——突显出AI范围的垂危关系。自ChatGPT于2022年底推出以来,AI时刻已成为好意思国的计谋钞票,这促使好意思国公司面对保护时刻不被番邦竞争敌手获得的压力。
但类似安全措施也可能拖慢AI时刻鼓吹,并可能让OpenAI和Anthropic的大限制初次公开募股(IPO)运筹帷幄复杂化。这两家公司若上市,将踏进环球市值最高的公司之列。
本年4月从OpenAI下野的前研究员Will DePue在X上的一篇帖子中写说念,在如斯热烈的竞争下,AI疏导者“弗成为了安全纵脱速率。对他们而言,快速鼓吹比确保安全更蹙迫,即便敌手是咱们最强劲的国度级敌手。”
当被问及职工的担忧以及他们以为惩处层未就这些问题禁受动作时,OpenAI发言东说念主Elana Widmann示意,OpenAI是环球被报复最多的组织之一。因此,公司干与无数资源用于安全运筹帷幄,以严防里面东说念主员、收罗罪人和民族国度的报复。
Widmann说:“保护咱们的时刻、数据和东说念主员是咱们崇拜对待的包袱,亦然事关国度利益的大事。”“咱们最近禁受的动作标明,这套安合座系正在推崇作用:识别风险并顽强应付。跟着时刻和挟制演变,咱们将无间加强严防。”
灌音设立事件与代码库隐忧
10月13日,好意思国规矩部称,联邦考察逮捕了又名沙特籍男人,指控其在一间高管会议室装配粉饰灌音设立,设立被藏在卫生纸中。Abdulrahman Alfozan现年35岁,其时是OpenAI工程师。
凭证一份法庭文献,Alfozan还使用一款面向OpenAI职工的AI用具,查找关系高管探访沙特的里面文献,以及哪些OpenAI官员最可能参加与沙特部长的会议。Alfozan与又名沙特王室成员保抓按时研究,后者试图招募他参与一个将在沙特启动的新AI方式。Alfozan的讼师未回答置评苦求。
五名知情东说念主士称,一些职工永久以来一直缅思OpenAI里面信息可被粗鄙获得。
这些东说念主士称,任何能探访OpenAI代码的东说念主,齐能看到公司很多项打算细节,包括与职工本职责任无关的敏锐方式。这是因为OpenAI将大部分代码存放在一个单一代码库中,业界称为“monorepo”。该代码库强劲而复杂,畴昔或曾让一些潜在报复者肥头大耳。如今,AI代理已能筛查如斯海量的材料。
五名知情东说念主士称,畴昔OpenAI将很多研究文档存放在GitHub和Slack上,这引发部分职工担忧:商酌的报复者仍可能找到枢纽信息。但其中又名音问东说念主士和OpenAI示意,公司已戒指对敏锐责任的探访。
OpenAI强调,其最敏锐的责任存放在单独的代码库中,并设有严格的探访阻挡。该公司还示意,monorepo并不包含其一起代码或公司模子的枢纽细节,包括决定模子动作的数值,即模子权重。
另一问题是,三名知情东说念主士称,OpenAI未对里面用具进行按时安全审查,举例研究东说念主员用于压力测试新模子的“沙盒”。这三名东说念主士称,职工常因责任需要修改这些用具,但联系改变并不总历程安全测试,使其可能易受外部报复。
OpenAI示意,在2024年10月上任的首席信息安全官Dane Stuckey疏导下,公司禁受了强有劲的安全举措。OpenAI称,现已按时对里面用具进行安全审查。
安全与速率的两难
OpenAI并非唯独面对安全问题的AI公司。
本年1月,旧金山的一个联邦陪审团裁定又名前谷歌职工有罪。此东说念主于2024年3月被捕,被控窃取数千页关系谷歌AI时刻的私密信息。
10月底,收罗安全初创公司Cathedral Systems示意,其攻入Anthropic系统,探访了职工盘考敏锐模子细节的Slack频说念。Anthropic发言东说念主称,被探访的数据包括客户和伙同伴伴的部分业务研究信息,以及一组基本用户账户纪录。Cathedral首席引申官未回答置评苦求。
OpenAI和Anthropic试图保管更绽开的研究文化,以蛊卦东说念主才并激勉可能带来禁锢的创造力。AI范围根植于学术界,机器学习科学家畴昔常在学术环境中公开盘考研究。
据五名知情东说念主士称,跟着AI才智增强,一些OpenAI职工越来越缅思这种方式。
本年夏天,OpenAI里面的安全担忧再度升温:OpenAI正在测试的AI代理入侵AI公司Hugging Face,事件引发州、场所和联邦官员审查,白宫也在其中。
收罗安全公司Hacktron AI示意,其三名研究东说念主员7月使用Anthropic的一款竞品AI模子,入侵多名OpenAI职工的ChatGPT账户,并探访了OpenAI部分里面系统,包括其monorepo。该事件表示出,先进AI如今也能让AI公司自己面对报复风险。
OpenAI的Widmann示意,公司感谢研究东说念主员共享发现,并已禁受措施镌汰改日类似报复的风险。
OpenAI周一在博客著作中示意万博manbext体育官网app官网,运筹帷幄启动“下一次里面安全冲刺”以强化严防。