麻省理工學院(MIT)研究團隊近期透過嚴謹的實驗設計,揭露了一項極為嚴峻的認知危機:AI生成的圖片與文字摘要正系統性地扭曲人類的真實記憶,且受害者對錯誤記憶抱持高度自信。
實驗中,受測者先觀看一組原始照片,休息後再分組檢視——對照組重看原圖,實驗組則看到經AI篡改的版本。隨後的記憶測試顯示,觀看AI變造圖片的受測者不僅更容易記錯原圖內容,還對自身的錯誤記憶表現出過度的確定感。
此一發現並非孤例。去年另一項研究證實,無論是深偽影片(deepfake)還是AI生成的文字,均能成功在人們腦中植入關於虛構政治醞聞的假記憶,甚至直接削弱選民的投票意願。
更值得警惕的是,人類專家在審核AI輸出時也並非免疫。當AI生成的幻覺內容與專家既有認知相牴觸時,專家的判斷力同樣會被反向誤導。這意味著從政府機關、軍事決策到金融與醫療體系中所謂「人類在迴路中」(humans in the loop)的安全設計正面臨根本性的失效風險。
本事件本質上並非傳統地緣政治或商業壟斷的利益角力,而是人類認知極限與AI技術爆發式演進之間的結構性落差,其深層矛盾可從三個歷史與技術脈絡加以剖析:
一、人類記憶的演化脆弱性與認知偏誤
自19世紀心理學實驗以降,科學界早已確立人類記憶具備高度「可塑性」與「可暗示性」。我們記住的並非事件原貌,而是事件最後一次被「喚起時的版本」。這套適應遠古人類環境的認知機制,在面對數位時代每秒數十億則內容轟炸時,已成為結構性的資安漏洞。 AI生成內容正是精準利用此一弱點,將虛構資訊植入人類的「自傳體記憶」中。
二、AI幻覺的技術性根源與產業加速主義矛盾
生成式AI的「幻覺」(hallucination)並非單純的工程瑕疵,而是源自當前Transformer架構的本質限制——模型透過機率預測下一個詞元,卻無法真正理解事實邊界。然而,科技產業正以「自主化」為旗幟,試圖將人類從決策迴路中移除(cut humans out of the loop),推出所謂的「代理型AI」(agentic AI)系統。此一「人類監督力衰退」與「AI自主力擴張」的反向加速,已釀成悲劇:今年稍早美軍依賴Palantir研發的AI系統鎖定伊朗一所小學為打擊目標,因系統使用過時數據,導致逾150人死亡、至少123名兒童罹難。這是歷史上首次有具體紀錄的「AI幻覺導致大規模平民傷亡」事件。
三、深偽偵測的軍備競賽與防禦體系的滯後
當前一般民眾辨識AI生成內容的準確率僅約50%,幾近隨機猜測。學界雖積極研發偵測工具與認知訓練,但至今仍無任何「萬無一失」的技術解方。這種「攻擊端AI生成成本指數級下降、防禦端人類認知能力線性停滯」的不對稱戰局,是當前認知安全領域的核心張力。
面對AI認知污染的全面擴散,全球社會將在未來3至5年內面臨以下三種可能情境的分化:
面對AI認知污染帶來的全面性風險,各層級利害關係人應採取以下具體行動:
01 起因觸發:MIT實驗證實AI生成內容可系統性植入人類假記憶並扭曲後續判斷
02 一階傳導:政府、軍事、金融、醫療等高度依賴AI決策的產業面臨「人類在迴路中」機制全面失效的信任危機
03 二階擴散:AI安全、內容驗證(C2PA)、深偽偵測等防禦型技術產業迎來政策驅動的需求爆發,國防AI承包商則承受法律與品牌風險
04 宏觀終局:人類社會進入「認知常態化」時代,數位信任基礎設施被迫重構,從新聞、司法到選舉的民主運作基礎受到結構性侵蝕
跨事件因果網路圖譜 1 驗證節點
AI 驗證因果鏈條 · 可拖曳節點 · 點兩下開啟文章