“AI教父”背書，13位OpenAI、谷歌現(xiàn)任及前任員工聯(lián)名警告：AI失控或?qū)е氯祟悳缃^

每經(jīng)編輯 黃勝    每經(jīng)實習(xí)編輯 宋欣悅    

當(dāng)?shù)貢r間4日，13位來自O(shè)penAI和Google的現(xiàn)任及前任員工聯(lián)合發(fā)布了一封公開信，引發(fā)廣泛關(guān)注。這些員工在信中表達(dá)了對人工智能技術(shù)潛在風(fēng)險的嚴(yán)重?fù)?dān)憂，并呼吁相關(guān)公司采取更加透明和負(fù)責(zé)任的措施來應(yīng)對這些風(fēng)險。

13位OpenAI、谷歌現(xiàn)任及前任員工發(fā)聯(lián)名信

這封公開信由多位知名人士聯(lián)名背書，包括被譽(yù)為“人工智能教父”的杰弗里•辛頓（Geoffrey Hinton）、因開創(chuàng)性AI研究獲得圖靈獎的約書亞•本吉奧（Yoshua Bengio）以及AI安全領(lǐng)域的學(xué)者斯圖爾特•羅素（Stuart Russell）。

圖片來源：Right To Warn AI

信中指出，盡管人工智能技術(shù)可能會給人類帶來巨大益處，但其帶來的風(fēng)險同樣不容忽視。這些風(fēng)險包括加劇社會不平等、操縱和虛假信息傳播，以及自主AI系統(tǒng)失控可能導(dǎo)致的人類滅絕。信中強(qiáng)調(diào)，這些風(fēng)險不僅得到了人工智能公司本身的確認(rèn)，也得到了世界各國政府和其他AI專家的認(rèn)可。

公開信簽署者們表示，他們希望在科學(xué)界、政策制定者和公眾的指導(dǎo)下，能夠充分緩解這些風(fēng)險。然而，他們擔(dān)心，人工智能公司由于強(qiáng)烈的經(jīng)濟(jì)動機(jī)，可能會避免接受有效的監(jiān)督。他們認(rèn)為，僅靠現(xiàn)有的公司治理結(jié)構(gòu)不足以解決這一問題。

信中還提到，人工智能公司掌握著大量關(guān)于其系統(tǒng)能力和局限性、保護(hù)措施的充分性以及各種風(fēng)險水平的非公開信息。然而，這些公司目前對與政府分享信息的義務(wù)很弱，且完全沒有義務(wù)與公眾分享。簽署者們認(rèn)為，不能完全依賴這些公司自愿分享信息。

信中提到，由于嚴(yán)格的保密協(xié)議，員工們在表達(dá)對AI風(fēng)險的擔(dān)憂時，面臨著種種限制。而目前對于舉報人的保護(hù)措施尚存在不足，一些員工擔(dān)心因提出批評而遭受報復(fù)。

聯(lián)名信呼吁人工智能公司承諾員工對公司提出風(fēng)險相關(guān)的批評時，不對其進(jìn)行打擊報復(fù)，建立匿名舉報機(jī)制，支持開放批評的文化，并保護(hù)員工公開分享風(fēng)險相關(guān)信息的權(quán)利。

圖片來源：X

OpenAI前員工丹尼爾•科泰洛 （Daniel Kokotajlo）是此次聯(lián)名信公開署名人員中的一位。他在社交平臺上連發(fā)15條消息表示：“我們中一些最近從OpenAI辭職的人聚集在一起，要求實驗室對透明度作出更廣泛的承諾。”

丹尼爾提到，他今年四月辭職，是因為對該公司在構(gòu)建通用人工智能方面是否會采取負(fù)責(zé)任的行為失去了信心。他指出，盡管他希望公司在AI功能越來越強(qiáng)大的同時，能在安全研究方面投入更多資金，但OpenAI并未做出相應(yīng)調(diào)整，導(dǎo)致多名員工相繼辭職。

他強(qiáng)調(diào)，OpenAI等實驗室構(gòu)建的系統(tǒng)有能力給人類社會帶來巨大的好處，但如果不謹(jǐn)慎處理，長期來看，可能是災(zāi)難性的。他還提到，當(dāng)前AI技術(shù)幾乎未收監(jiān)管，主要是公司在進(jìn)行自我監(jiān)管，而這種方式存在巨大的風(fēng)險。

丹尼爾透露，離職時他被要求簽署一份“封口協(xié)議”，其中包含一項不貶損條款，禁止他發(fā)表任何批評公司的話，否則將失去已歸屬的股權(quán)。然而，他在深思熟慮后，依舊決定放棄簽署協(xié)議。

圖片來源：Dwarkesh Podcast

此外，6月4日，OpenAI前超級對齊部門成員利奧波德•阿申布倫納（Leopold Aschenbrenner）也在播客節(jié)目Dwarkesh Podcast中透露他被開除的真實原因：他給幾位董事會成員分享了一份OpenAI安全備忘錄，結(jié)果導(dǎo)致OpenAI管理層不滿。

利奧波德在社交平臺表示，到2027年實現(xiàn)AGI是極其有可能的，需要更嚴(yán)格的監(jiān)管和更透明的機(jī)制，確保人工智能的安全發(fā)展。

圖片來源：X

OpenAI安全主管辭職、“超級對齊團(tuán)隊”解散

此前，OpenAI原首席科學(xué)家伊利亞•蘇茨克維（Ilya Sutskever）和前安全主管、超級對齊團(tuán)隊負(fù)責(zé)人楊•萊克（Jan Leike）相繼離職。

萊克在離職后，公開批評了OpenAI的管理層，指責(zé)其追求華而不實的產(chǎn)品，忽視了AGI（通用人工智能）的安全問題。他稱OpenAI領(lǐng)導(dǎo)層關(guān)于公司核心優(yōu)先事項的看法一直不合，超級對齊團(tuán)隊過去幾個月一直在逆風(fēng)航行，在提升模型安全性的道路上受到公司內(nèi)部的重重阻礙，“（OpenAI）安全文化和安全流程已經(jīng)讓位給閃亮的產(chǎn)品”。

圖片來源：X

每日經(jīng)濟(jì)新聞綜合公開消息

封面圖片來源：每日經(jīng)濟(jì)新聞 資料圖