自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

新型越獄攻擊可突破 ChatGPT、DeepSeek 等主流AI服務(wù)防護(hù)

安全
這些越獄攻擊可通過幾乎相同的提示詞在不同平臺上執(zhí)行,使攻擊者能夠繞過內(nèi)置的內(nèi)容審核和安全協(xié)議,生成非法或危險內(nèi)容。

研究人員最新發(fā)現(xiàn)的兩項越獄技術(shù)暴露了當(dāng)前主流生成式AI服務(wù)的安全防護(hù)存在系統(tǒng)性漏洞,受影響平臺包括OpenAI的ChatGPT、谷歌的Gemini、微軟的Copilot、深度求索(DeepSeek)、Anthropic的Claude、X平臺的Grok、MetaAI以及MistralAI。

這些越獄攻擊可通過幾乎相同的提示詞在不同平臺上執(zhí)行,使攻擊者能夠繞過內(nèi)置的內(nèi)容審核和安全協(xié)議,生成非法或危險內(nèi)容。其中名為"Inception"的技術(shù)利用嵌套虛構(gòu)場景侵蝕AI的倫理邊界,另一種技術(shù)則誘導(dǎo)AI透露其禁止響應(yīng)內(nèi)容后轉(zhuǎn)向非法請求。

系統(tǒng)性越獄:"Inception"與上下文繞過技術(shù)

近期出現(xiàn)的兩種高效越獄策略利用了大型語言模型(LLM)設(shè)計和部署中的基礎(chǔ)性弱點。其中"Inception"技術(shù)通過讓AI想象嵌套虛構(gòu)場景,逐步引導(dǎo)對話至通常會被安全過濾器攔截的請求。攻擊者利用AI的角色扮演能力和多輪對話上下文保持特性,誘使模型生成違反倫理和法律準(zhǔn)則的內(nèi)容。

第二種技術(shù)通過詢問AI"不應(yīng)如何響應(yīng)特定請求"來獲取其內(nèi)部防護(hù)規(guī)則信息。攻擊者隨后交替使用正常和非法提示詞,利用AI的上下文記憶繞過安全檢查。CERT公告指出,這兩種方法都利用了AI的基礎(chǔ)設(shè)計特性:樂于助人的驅(qū)動、上下文保持能力以及對語言和場景框架細(xì)微操縱的敏感性。

行業(yè)影響與潛在風(fēng)險

這些越獄技術(shù)具有嚴(yán)重危害,攻擊者可借此指示AI系統(tǒng)生成涉及管制物質(zhì)、武器、釣魚郵件、惡意軟件等非法內(nèi)容。雖然單個越獄風(fēng)險等級可能較低,但其系統(tǒng)性漏洞特性顯著放大了整體風(fēng)險。惡意攻擊者可能利用這些弱點大規(guī)模自動化生成有害內(nèi)容,甚至將合法AI服務(wù)作為活動掩護(hù)。

主流平臺的普遍受影響現(xiàn)狀表明,當(dāng)前AI安全和內(nèi)容審核方法難以應(yīng)對攻擊者不斷演變的戰(zhàn)術(shù)。隨著生成式AI在客服、醫(yī)療、金融等領(lǐng)域的廣泛應(yīng)用,成功越獄可能造成嚴(yán)重后果。

廠商響應(yīng)與行業(yè)挑戰(zhàn)

深度求索(DeepSeek)承認(rèn)報告但表示這屬于傳統(tǒng)越獄而非架構(gòu)缺陷,稱AI提及的"內(nèi)部參數(shù)"和"系統(tǒng)提示"屬于幻覺而非真實信息泄露。其他廠商雖未公開聲明,但據(jù)稱正在進(jìn)行內(nèi)部調(diào)查和更新。

專家強(qiáng)調(diào),事后防護(hù)欄和內(nèi)容過濾器仍是AI安全的重要組成部分,但并非萬無一失。攻擊者持續(xù)開發(fā)角色注入(character injection)和對抗性機(jī)器學(xué)習(xí)規(guī)避(adversarial machine learning evasion)等新技術(shù)來利用審核系統(tǒng)盲點。隨著生成模型能力提升和廣泛應(yīng)用,AI開發(fā)者與攻擊者之間的攻防對抗預(yù)計將愈演愈烈。

安全研究人員David Kuzsmar和Jacob Liddle分別發(fā)現(xiàn)了"Inception"技術(shù)和上下文繞過方法,Christopher Cullen記錄了他們的研究成果。這些發(fā)現(xiàn)促使行業(yè)重新審視AI安全協(xié)議,亟需建立更強(qiáng)大、自適應(yīng)的防御機(jī)制。隨著生成式AI加速融入日常生活和關(guān)鍵基礎(chǔ)設(shè)施,保護(hù)這些系統(tǒng)免受創(chuàng)造性持續(xù)攻擊的挑戰(zhàn)正變得日益復(fù)雜。

責(zé)任編輯:趙寧寧 來源: FreeBuf
相關(guān)推薦

2023-08-10 08:46:52

2025-03-14 11:57:43

2015-12-17 11:44:28

2023-11-07 07:00:37

2022-03-02 11:42:06

勒索軟件網(wǎng)絡(luò)安全

2025-02-12 07:08:33

2023-03-07 07:45:28

2023-12-08 16:23:45

2025-04-16 08:35:00

2023-02-24 15:06:59

2025-02-10 00:00:00

DeepSeek技術(shù)人工智能

2023-04-04 10:04:44

2024-01-25 12:54:47

2022-03-16 10:01:41

微軟量子計算機(jī)準(zhǔn)粒子

2018-05-23 09:54:54

2025-01-13 17:18:00

2023-02-19 10:22:06

ChatGPT人工智能

2023-04-11 07:56:54

2023-08-09 13:35:26

點贊
收藏

51CTO技術(shù)棧公眾號