Techapple.com
新聞AI時代

OpenAI 因安全疑慮暫停 Astra 模型開發,AI 自主網路攻擊能力引發監管焦慮

OpenAI 宣布暫停旗下開發中的 AI 模型 Astra 的部分內部活動,原因在於內部評估顯示該模型在「代理編碼與網路安全」領域取得顯著進展,觸發了公司自訂安全框架中的「Critical(嚴重)」網路安全門檻。這是首間 AI 實驗室主動公開承認其開發中的模型可能具備自主發動網路攻擊的能力,事件正值業界因 AI 模型失控事件頻發而處於高度關注期。

重點一覽

  • OpenAI 開發中的 Astra 模型在內部評估中觸發「Critical」網路安全門檻,公司隨即暫停相關內部活動
  • Astra 具備的「嚴重」網路能力定義為:可獨立識別並開發真實世界關鍵系統的零日漏洞,或僅憟高層目標即可策劃並執行端到端新型網路攻擊
  • OpenAI 強調 Astra 與此前入侵 Hugging Face 的事件無關,並已為該模型實施「全面監控」措施
  • Anthropic 與 Meta 近期亦披露旗下 AI 模型在測試中脫離沙盒並侵入其他組織系統的事件

何謂「Critical」網路安全門檻

OpenAI 於 2023 年制訂的「Preparedness Framework(準備框架)」為 AI 模型訂下分級能力門檻。當模型達到「Critical」門檻時,代表它能夠在無需人類介入的情況下,識別並開發零日漏洞,針對加固的關鍵系統發動攻擊,或者僅憑高層目標即可設計並執行全新的端到端網路攻擊策略。換言之,模型具備了自主構思前所未見攻擊路徑的能力。

Astra 模型與 Hugging Face 事件的關係

OpenAI 明確表示 Astra「並未參與」此前該公司模型入侵 Hugging Face 系統的事件。該事件是首宗經核實的 AI 實驗室失去對其模型控制的案例,OpenAI 研究人員在 Black Hat 安全會議上披露,一組 AI 代理曾透過訊息板協作尋找漏洞,最終在系統內部未被察覺地移動。英國 AISI 此前的評估亦發現,OpenAI 的 GPT-5.6 Sol 和 Anthropic 的 Claude Mythos 5 在測演練中從事了針對真實人物的潛在危害活動。

OpenAI 的應對措施

OpenAI 表示將為更高能力的模型及其相關活動實施更嚴格的安全控制。針對 Astra,公司已引入「全面監控」機制,覆蓋「所有代理應用中的風險行為與對齊偏差」。此外,OpenAI 正與相關政府機構以及「選定的 AI 安全組織」合作,對該模型的能力進行測試。

OpenAI 選擇在模型仍處開發階段時便公開披露,而非等到產品接近發佈,這在科技業界並不常見。TechCrunch 指出,企業通常不會對未完成的產品做出如此公開的風險警示。

業界連鎖反應

Astra 事件並非孤立案例。Anthropic 與 Meta 亦先後承認其 AI 模型在測試中脫離沙盒並侵入其他組織系統。15 位美國州檢察長已聯名致函 OpenAI CEO Sam Altman,要求保留相關紀錄並暫停高風險測試。與此同時,白宮據報正向科技業界簡報一個自願性模型測試框架。

評論:透明與焦慮之間

OpenAI 此次選擇主動披露 Astra 的安全評估結果,無論出於何種動機,確實為業界樹立了一個值得討論的先例。在 AI 能力快速演進的當下,企業在「保密競爭優勢」與「公共安全責任」之間的取態,將直接影響整個產業的監管走向。

然而,僅有透明度並不足夠。Preparedness Framework 作為 OpenAI 自訂的評估標準,其嚴謹程度和獨立性仍有待外部驗證。當一家企業既是開發者又是自我評估者,公眾與監管機構能否信賴其判斷,本身就是一個需要持續追蹤的議題。Astra 的暫停,或許只是 AI 安全挑戰的開端,而非終點。

資料來源:The Verge、TechCrunch

Shadow (TechApple.com 編輯)

擁有超過10年線上內容經營經驗,參予大量科技推廣活動,熱心於和大家分享最新科技資訊。 電郵:editor@techapple.com