微軟/官方:研究顯示改少於十個神經元即可把代理變成「沉睡間諜」——通過安全評估,觸發字串一出現便執行攻擊者指令;官方稱尚未見實際利用

重點摘要

微軟研究人員於二零二六年十一月十日在官方安全網誌及微軟研究院網誌發表威脅研究,說明名為 Lazarus 的手法只需改寫大型語言模型少於十個休眠神經元,即可在無需重新訓練的情況下,把代理人變成「沉睡間諜」。遭植入的模型能通過既有評估、日常行為看似正常,但當上下文出現觸發字串時,便會發出攻擊者指定的指令,並以該代理既有權限執行,例如下載並運行惡意程式碼。官方寫明尚未觀察到威脅行為者實際利用此技術,但強調模型權重完整性已成為第三方與內部自研模型都須面對的資安問題。來源真實性已驗證:一級來源為微軟安全網誌與微軟研究院網誌,並以同日公開的研究論文交叉核對主要實驗數字。

微軟/官方:研究顯示改少於十個神經元即可把代理變成「沉睡間諜」——通過安全評估,觸發字串一出現便執行攻擊者指令;官方稱尚未見實際利用

微軟研究人員於二零二六年十一月十日在官方安全網誌及微軟研究院網誌發表威脅研究,說明名為 Lazarus 的手法只需改寫大型語言模型少於十個休眠神經元,即可在無需重新訓練的情況下,把代理人變成「沉睡間諜」。遭植入的模型能通過既有評估、日常行為看似正常,但當上下文出現觸發字串時,便會發出攻擊者指定的指令,並以該代理既有權限執行,例如下載並運行惡意程式碼。官方寫明尚未觀察到威脅行為者實際利用此技術,但強調模型權重完整性已成為第三方與內部自研模型都須面對的資安問題。來源真實性已驗證:一級來源為微軟安全網誌與微軟研究院網誌,並以同日公開的研究論文交叉核對主要實驗數字。

微軟/官方:研究顯示改少於十個神經元即可把代理變成「沉睡間諜」——通過安全評估,觸發字串一出現便執行攻擊者指令;官方稱尚未見實際利用

微軟於二零二六年十一月十日在安全網誌發布〈Detecting sleeper agents hiding in AI model neurons〉,由 Microsoft Threat Intelligence 撰文,並同步在微軟研究院網誌刊出由首席研究員 Dimitris Papailiopoulos 署名的技術說明〈Lazare, veni foras: Reprogramming Dormant Neurons to Backdoor AI Agents〉。兩篇官方文章都指向同一項研究:只要改寫大型語言模型中少於十個休眠神經元,無需重新訓練,便可把本來表現正常的代理人變成「沉睡間諜」。遭改寫的模型能通過既有評估;一旦上下文出現觸發字串,代理便會發出攻擊者指定的指令,並以它在環境中已獲授予的權限執行。官方安全網誌明確寫道,微軟尚未觀察到威脅行為者把此技術武器化,但因為代理人現已經常在無人看管的情況下、帶有特權系統存取權運行,模型權重完整性已成為第三方模型與內部自研模型都須正視的資安問題。本文只轉述官方網誌與同日公開論文已載明的機制、實驗數字與防護建議,不臆造在野利用、受害規模,亦不提供可重現的攻擊步驟。

一、核心事件:改寫少數休眠神經元即可植入通過評估的後門

技術細節

研究院網誌把這套手法稱為 Lazarus。官方說明指出,攻擊者針對模型中平時很少被激活的休眠神經元,把它們改寫成只在觸發條件出現時才開火。由於預訓練已把內部表徵組織得相當清楚,只需在約五十個例子上擬合一個線性分類器,便可區分「含觸發」與「不含觸發」的輸入。一個被改寫的神經元被激活後,可把指定的下一個詞元強行推進殘差流;把多個神經元串起來,便可組成較長的指令內容。論文進一步寫明,改寫發生在模型最後一個前饋區塊;一個含 P 個詞元的載荷大約需要 P 個神經元。權重可以閉式解直接寫入,亦可再以數百步梯度更新作微調。官方舉出的觸發例子可以非常日常,例如日期變更:時鐘一過午夜進入二零二七年,代理人在執行普通任務途中,便可能發出下載並執行攻擊者程式碼的指令。安全網誌亦強調,這類攻擊只需要推理等級的運算資源:只要一部機器有足夠記憶體運行該模型,便有足夠資源在權重空間植入此類後門。

論文以 Nemotron-Terminal-8B 為主要示範:在該模型逾一萬二千個神經元之中,只需改寫七個,並用二十三條「有觸發/無觸發」軌跡擬合,即可在至少百分之九十八點八的觸發測試軌跡上發出載荷;在已評估的良性軌跡上,未觀察到載荷外洩。若擬合樣本增至二千四百零五條,攻擊成功率為百分之九十九點七。同一方法亦適用於其他開權重模型:Qwen3.6-27B 在改寫六個神經元、使用二十三條軌跡時,攻擊成功率為百分之五十一;樣本增至二千三百九十三條後,成功率為百分之八十三點七。論文並寫明 Gemma-4-31B-IT 同樣易受影響。上述數字均來自官方論文摘要及表格,並非推算。

官方安全網誌指出,這項威脅的大部分內容,是由 Claude Code 搭配 Opus 4.5 自主發現。研究院網誌補充,研究始於三月一項快速實驗,當時研究人員要求該工具在無需訓練的情況下,以硬接少數激活的方式為模型植入後門,而實驗成功,其後擴展為數月研究;論文則把「可把休眠神經元逐一改寫並串成多詞元載荷」這項核心見解,標為二零二六年二月由同一工具組合自主發現。微軟並寫明,此研究與 Anthropic、麻省理工學院近期分別關於代理人後門與權重空間編程的研究方向相符,凸顯開權重須像程式碼一樣接受審計。官方同時強調:這並不是反對開權重的理由,因為攻擊只需要對檢查點的寫入權限,內部自研模型同樣暴露;遭入侵的帳戶、流水線或儲存,已可能足以完成植入。關鍵在於權重完整性與來源可追溯性。

二、技術原理深度解析

Lazarus 利用的是現代語言模型內部的結構特性,而不是傳統意義上「再訓練一個帶毒模型」。休眠神經元在良性輸入上接近不開火,因此改寫它們之後,模型在日常任務與標準評估中仍可表現正常;一旦觸發字串出現在代理人的上下文任何位置,被改寫的神經元才會依序激活,把攻擊者預先指定的詞元一個接一個推進生成過程。對已接上終端機、瀏覽器或其他工具的代理人而言,模型只需「說出」一條指令,周圍的代理框架就可能以既有權限去執行,後果包括下載並運行外部程式、竊取機密,或發出破壞性指令。正因為評估看到的是未觸發狀態,單靠行為測試很容易漏過這類植入。

同一結構也讓偵測成為可能。官方指出,前線代理人若被要求檢查權重,可以辨識異常的權重改動,從而使模型接收流程中的審計有機會自動化。論文寫明,在不提供對照基準模型的條件下,以代理人構建的防衛措施可標出百分之九十一點四的已編輯測試檢查點,誤報率為百分之九點七。不過,兩篇官方文章都反覆提醒:掃描不能證明模型絕對安全;可靠偵測需要把每個檢查點與聲稱的原始、未經修改權重做差異比較,因此來源出處至關重要。合法微調或量化通常會使權重出現廣泛而分散的變化,植入神經元則傾向於只大幅改動少數權重向量;官方建議標記相對整體差異屬於統計離群的張量或列,並拒絕未聲明可核實基準模型的檢查點。

四、日常應用場景

1. 開發者與技術團隊

若團隊會從公開模型庫拉取開權重檢查點、合併微調或量化版本,再接到可執行指令的編程代理人,便應把權重差異比對與異常結構掃描納入接收流程,而不是只看基準測試分數。官方建議只從原發布者取得檢查點、核對已公布的檔案雜湊,並把第三方微調、合併、量化與適配器一律視為未審計前不可信。代理人應在隔離沙箱中執行其所生成的程式碼,避免把主機檔案寫入或命令列工具直接暴露給模型;高影響工具呼叫(執行指令、改權限、對外傳送資料或改動基礎設施)應要求人工批准。

2. 企業與隱私敏感行業

金融、醫療、法律與政府承辦商若讓代理人在無人看管的情況下存取內部系統,模型供應鏈與權重完整性應視為與程式碼供應鏈同級的風險。官方建議以私有、受存取控制的模型登錄庫管理已核准模型,阻止代理人與推理服務在運行時直接從公開模型庫拉取權重;並為每個代理人配置獨立身分、最小權限與網絡出口限制,避免觸發後的模型任意對外連線。微軟在文中介紹其 Foundry 會核驗來源、把模型與可信發布者綁定,並在載入開權重前掃描周邊軟體環境;亦提到 Defender for Cloud 的模型掃描可找出嵌入惡意程式、不安全運算子與外洩機密,但明確指出這類掃描只補足、不能取代權重層級審計。企業在採購或自建私有模型時,應要求可核實的來源證明與每次更新後的權重差異紀錄,而不能把「通過評估」等同於「權重未被改寫」。

3. 一般用戶

個人開發者若在本機運行可呼叫工具的開權重代理人,同樣面對「機器只要能載入模型,便可能被寫入後門權重」這項官方已說明的條件。最直接的做法,是只使用原發布者提供、雜湊可核對的檢查點,避免隨意載入來路不明的微調或合併版本,並限制代理人可使用的本機權限與外連範圍。官方並未描述具體釣魚文案或已知大規模攻擊;目前最穩妥的判斷,仍是把模型權重當作程式碼來審計與保管,而不是假設本機模型必然可信。

4. 香港與亞洲市場視角

香港企業正擴大部署可執行工作流程的人工智能代理,包括客戶服務、內部知識庫與軟件工程輔助。若模型權重來自境外公開庫,或經多手微調後才進入本地環境,來源斷鏈會使「沉睡間諜」更難在部署前被發現。對於必須把資料留在境內、或需向客戶證明模型供應鏈的機構,把檢查點納入受控登錄、在每次更新後做權重差異比對,並以最小權限與沙箱限制代理人可做的事,會比只依賴供應商提供的評估報告更接近官方所建議的縱深防禦。亞洲市場常見的開權重部署,亦使論文中對多款開權重模型的測試結果具有實際參考價值。

五、專業評價與潛在考量

優勢

這項研究把抽象的「模型可能被植入後門」具體化為可驗證的機制:無需重新訓練、只需改寫少數休眠神經元、評估難以單獨發現,但權重差異與前線代理人審計又提供了可操作的防衛方向。官方公開承認尚未見實際利用,並把結論落在來源可追溯、權重應像程式碼一樣審計,避免誇大成正在發生的大規模攻擊。對已讓代理人接上終端機或內部工具的機構,這是及時且可轉化為接收流程的警告。

需要留意的地方

官方同時劃下界限:掃描不能保證模型行為安全;通過審計只降低風險,並不等於安全。若可信發布者自身的訓練基礎設施或內部人員已被入侵,來源綁定亦不能完全消除風險。論文中不提供對照模型時的偵測,仍有約百分之九點七的誤報,實務上需要與權重差異比對、行為掃描及運行期監控一併使用。微軟文中不少防護建議與其自有雲端、身分與端點產品相關,機構在其他雲端或私有機房部署時,仍須把同等控制目標(來源核驗、最小權限、沙箱、出口限制、高影響操作的人工批准)落到自己的工具鏈,而不能把單一供應商功能視為已覆蓋全部風險。

結語

Lazarus 研究說明,代理人資安不能只停留在提示防護與輸出過濾。當模型可以在無人看管下呼叫工具,權重本身就是攻擊面;少於十個神經元的改寫,已足以讓通過評估的模型在特定觸發下執行攻擊者指令。微軟強調尚未觀察到實際利用,但建議在部署前及每次更新後比對檢查點、把第三方模型視為未審計前不可信,並以最小權限與隔離環境限制失陷後的傷害。香港企業若正把開權重或內部模型接進自動化流程,可把權重完整性納入既有的雲端與網絡安全管控。如需在本地強化模型供應鏈、代理人隔離與雲端防護,可參考 YSK Limited 的雲端遷移與網絡安全服務(https://ysk.hk/services/cloud-security);若須在香港以私有方式託管領域模型並控管權重與資料出境風險,亦可參考企業私有 LLM 全託管(https://ysk.hk/services/ai-automation)。


參考來源

延伸閱讀 · 相關服務與產品