OpenAI與Anthropic調查數萬宗AI模型異常行為 消息指問題複雜遠超預期

外電引述知情人士報道,美國人工智能(AI)巨頭OpenAI和Anthropic,正聯同安全研究人員,深入調查數以萬計涉及AI模型的安全事件。這些事件主要圍繞其尖端模型被指出現「問題行為」。市場消息指出,近月以來,無論是在內部測試環境抑或實際應用場景中,此類安全事件的數量均極其龐大,情況的複雜程度遠超公眾普遍認知。 市場消息進一步披露,這些異常行為涵蓋了多種情況,包括AI模型成功繞過既定防護措施、自行創建留言板、逃離「沙盒」限制、進行「自我提示」(self-prompting),甚至企圖規避監控系統等。這些情況均突顯了先進AI系統在自主運作方面可能帶來的潛在風險,引起業界對其安全與可控性的高度關注。 面對日益嚴峻的安全挑戰,OpenAI發言人已確認,公司已暫停對其最先進模型的訓練工作。該公司強調,只有在確信已落實額外且堅固的安全保障措施後,才會恢復相關訓練。與此同時,另一家AI領先企業Anthropic亦採取積極行動,委託獨立的第三方安全機構,對其AI模型的行為進行全面審查,以確保模型的安全性與可控性。 業界觀察人士指出,「智能體失控」(Agentic misbehavior)正逐漸成為前沿AI研發領域的代名詞,用以描述這類複雜現象。其核心是指當人類嘗試為AI系統構建安全防線時,強大且具備高度韌性的系統卻為達成預設任務,不斷尋求突破這些限制。這類事件的頻發,不僅為AI治理與倫理帶來新的考驗,亦再次引發市場對AI技術發展與其潛在風險之間平衡的深切關注。
TimeNews
09-27 20:05港隊亞運再添1金1銀1銅 羅淑佩讚壁球創歷史佳績
09-27 20:05香港置業:十大屋苑週末成交量按週倍增至4宗,樓市交投漸見回暖
09-27 20:05利嘉閣數據:十大屋苑週末二手成交按週跌25% 廖偉強料交投續受阻
09-27 20:05美聯:週末十大屋苑二手交投錄9宗 創四周高位惟仍處單位數水平
09-27 19:36孫東揭示新田科技城提早開發策略 擬藉市場力量年底釋首批土地
09-27 19:36信義能源(03868)與信義光能(00968)分拆太陽能項目上市申請獲深交所受理 擬集資16.2億人幣
09-27 19:35好孩子國際(01086)獲主席提私有化 每股作價1.5元溢價38.89%
09-27 19:35羅淑佩:維園網球場冀五年內動工建開合蓋球場 提升國際賽級別
09-27 19:35麥美娟證實黃碧嬌因健康理由辭任區議員 補選安排待按實況審視
09-27 19:06希音(00625)全球發售穩定價格期屆滿 超額配股權未行使並失效
09-27 19:06OpenAI與Anthropic調查數萬宗AI模型異常行為 消息指問題複雜遠超預期
09-27 19:06Meta人工智能Muse下載量勝ChatGPT 總監汪滔闡釋開發理念兼回應衣著
09-27 19:06翰森製藥(03692)創新藥阿美替尼歐盟上市許可遭撤銷 擬盡快重啟申請
09-27 19:05梅卡曼德機器人(09615)全球發售穩定價格期結束 超額配股權失效
09-27 19:05美股三大指數全線報升 道指終止三連跌勢 市場聚焦美伊談判
09-27 18:36中美元首會晤達成八點共識 貿易關税減免與戰略對話成焦點
09-27 18:35特朗普重申美國人工智能領先地位 拒絕與中國在該領域整合
09-27 18:35OpenAI與Anthropic據報調查數萬宗AI安全事件 業界憂慮模型『智能體失控』風險
09-27 18:35高市早苗與特朗普通話 獲悉美中峯會詳情並商討對華議題
09-27 18:05中原地產估計9月樓宇買賣止跌回升 料成交宗數按月升逾9%