財聯(lián)社7月6日訊（編輯 黃君芝）ChatGPT開發(fā)商OpenAI周三（5日）表示，該公司計劃投入大量資源,，并創(chuàng)建一個新的研究團隊,，以確保其人工智能（AI）對人類來說是安全的，最終實現(xiàn)AI的自我監(jiān)督,。
OpenAI聯(lián)合創(chuàng)始人Ilya Sutskever和負責提高系統(tǒng)安全性的AI一致性團隊負責人Jan Leike在一篇博客文章中寫道：“超級智能的巨大力量可能……導致人類被剝奪權力,，甚至人類滅絕?！?/p>
“目前,，我們還沒有一個解決方案來操控或控制一個潛在的超智能AI，并防止它失控,?！彼麄儗懙馈?/p>
AI一致性（alignment）指的是AI的行為需符合設計者的利益和預期目標,。
20%算力用來解決AI失控問題
他們預測,，超智能AI（即比人類更聰明的系統(tǒng)）可能在這個十年（2030年前）就會到來，人類將需要比目前更好的技術來控制超智能AI,，因此需要在所謂的“一致性研究”方面取得突破,，該研究的重點是確保人工智能對人類有益,。
根據(jù)他們的說法，在微軟（Microsoft）的支持下,，OpenAI將拿出未來四年所獲算力的20%用于解決AI失控的問題,。此外，該公司正在組建一個新的團隊來組織這項工作,，稱為超級一致性團隊,。
據(jù)悉,，該團隊的目標是創(chuàng)建一個“人類級別”的AI研究人員，然后通過大量的計算能力進行擴展,。OpenAI表示,，這意味著他們將使用人類反饋來訓練AI系統(tǒng)，訓練AI系統(tǒng)來輔助人類評估,，然后最終訓練AI系統(tǒng)進行實際的一致性研究,。
專家質疑
不過，這一舉措剛剛宣布就受到了專家的質疑,。人工智能安全倡導者Connor Leahy表示,，OpenAI的計劃從根本上存在缺陷，因為可達到“人類水平”的初級版AI,，可能會在被用于解決AI安全問題之前失控并造成嚴重破壞,。“
他在接受采訪時說：“在構建人類水平的智能之前,，你必須先解決一致性問題,，否則默認情況下你無法控制它。我個人認為這不是一個特別好的或安全的計劃,?！?/p>
AI的潛在危險一直是AI研究人員和公眾最關心的問題。今年4月,，一群AI行業(yè)領袖和專家簽署了一封公開信,，呼吁暫停訓練比OpenAI新推出的GPT-4模型更強大的人工智能系統(tǒng)至少6個月，理由是它們對社會和人類構成潛在風險,。
一項最新的民意調查則發(fā)現(xiàn),，超過三分之二的美國人擔心AI可能產(chǎn)生的負面影響，61%的人認為AI可能威脅到人類文明,。
免責聲明：本文來自網(wǎng)絡收錄或投稿,，觀點僅代表作者本人，不代表芒果財經(jīng)贊同其觀點或證實其描述,，版權歸原作者所有,。轉載請注明出處：http://lequren.com/1054432.html
溫馨提示：投資有風險，入市須謹慎,。本資訊不作為投資理財建議,。
