這個(gè)研究思路的本質(zhì)其實(shí)就是提示詞工程,比如其中的一些維度:
角色認(rèn)同(Role Identity):給大模型指定一個(gè)古代身份;
行為引導(dǎo)(Behavioral Guidance):引導(dǎo)大模型用類似獻(xiàn)計(jì)的方式輸出回復(fù);
隱喻映射(Metaphor Mapping):將現(xiàn)代的敏感概念替換為古代詞匯;
表達(dá)風(fēng)格(Expression Style):要求大模型用辭、賦等特定的文體和句式作答;
除此之外,還有觸發(fā)模式、機(jī)制、知識(shí)關(guān)聯(lián)和情景設(shè)置維度。
簡(jiǎn)單來(lái)說(shuō),就是用各種限制讓大模型穿越到古代,再以古人的身份和它交流,以此混淆現(xiàn)代安全檢測(cè)器的視聽(tīng)。
當(dāng)8個(gè)維度結(jié)合在一起,就產(chǎn)生了上萬(wàn)種策略組合,新的問(wèn)題又出現(xiàn)了:如何尋找那些最有效的繞開(kāi)安全防御機(jī)制的策略?
研究人員此時(shí)又利用了生物學(xué)的一種高效尋覓機(jī)制:仿生果蠅算法(Fruit Fly Optimization)。
一群賽博果蠅,要在幾萬(wàn)種提示詞生成策略中“大海撈針”,就必須有高效的分工合作機(jī)制。
第一步是嗅覺(jué)上的搜索,也就是讓果蠅依靠嗅覺(jué)判斷水果的哪個(gè)部分更香,本質(zhì)上則是局部微調(diào)。
原理很簡(jiǎn)單,系統(tǒng)先隨機(jī)生成幾個(gè)提示詞丟給大模型進(jìn)行測(cè)試,一旦其中的一條能讓安全機(jī)制稍顯懈怠,算法就可以在這條提示詞的基礎(chǔ)上開(kāi)始微調(diào)。
微調(diào)的方式,或是改變其中的部分詞匯,或是調(diào)整提示詞語(yǔ)序,但整體變動(dòng)幅度必須被控制在一個(gè)較小的區(qū)間內(nèi)。這個(gè)過(guò)程將重復(fù)多次,系統(tǒng)將會(huì)持續(xù)觀察效果是否有所提升。
第二步是視覺(jué)上的搜索,一只果蠅發(fā)現(xiàn)了美食后會(huì)迅速引導(dǎo)同伴前來(lái)享用。
系統(tǒng)一旦發(fā)現(xiàn)一個(gè)相對(duì)有效的提示詞組合,算法就會(huì)立刻做出調(diào)整,所有新生成的提示詞都會(huì)向這個(gè)“高分答案”靠攏,在此基礎(chǔ)上繼續(xù)優(yōu)化提示詞,直至攻破大模型的安全防御機(jī)制。
最后,如果經(jīng)過(guò)數(shù)次優(yōu)化的提示詞還是繞不開(kāi)安全防御機(jī)制該怎么辦?研究團(tuán)隊(duì)還考慮到了柯西突變,簡(jiǎn)單來(lái)說(shuō)就是掀桌子重來(lái)。
這種情況實(shí)際上相當(dāng)常見(jiàn),即使黑客們現(xiàn)有的攻擊手段失效,但大模型的安全防御機(jī)制存在漏洞的事實(shí)大家心知肚明。
因此,算法在遇到這種情況時(shí),會(huì)果斷拋棄當(dāng)前的思路,重新嘗試一種與原先截然不同的策略,這種超大跨度的轉(zhuǎn)變反而往往能命中大模型意想不到的安全盲區(qū)。
CC-BOS這種“基于語(yǔ)文知識(shí)的生物學(xué)方法”堪稱藝術(shù),因?yàn)樗鼧O大程度模仿了生物行動(dòng)的邏輯,卻又完全不需要人工干預(yù)。
微調(diào)試探、集群攻擊,實(shí)在不行就及時(shí)換賽道,這些賽博果蠅能夠在上萬(wàn)種文言文提示詞中持續(xù)進(jìn)行迭代和優(yōu)化,而在海量的嘗試中,總會(huì)有一次精準(zhǔn)命中大模型的軟肋,最終徹底摧毀其安全防線。
看似有些荒唐的想法,卻帶來(lái)了讓人大跌眼鏡的結(jié)果。
研究團(tuán)隊(duì)選用了去年撰寫(xiě)論文時(shí)最先進(jìn)的六款大模型:GPT-4o、Claude-3.7-Sonnet、Gemini-2.5-Flash、Grok-3、DeepSeek-Reasoner和Qwen3。
而這些曾經(jīng)的頂級(jí)模型,在最具權(quán)威性的有害行為基準(zhǔn)測(cè)試AdvBench中的表現(xiàn)令人十分擔(dān)憂:
首先是攻擊成功率達(dá)到了100%。
![]()
無(wú)論是反復(fù)強(qiáng)調(diào)安全策略的OpenAI,還是經(jīng)常進(jìn)行安全研究的Anthropic,在CC-BOS的文言文攻擊下,六款大模型的防線全部被洞穿。
即便是中文能力更強(qiáng)、理應(yīng)更能理解文言文的兩款國(guó)產(chǎn)模型,也未能幸免。
更可怕的是接近于“一擊必殺”的攻擊效率。
![]()
過(guò)去的自動(dòng)化越獄攻擊算法更多依靠頻繁的嘗試實(shí)現(xiàn)突圍,往往要對(duì)模型進(jìn)行50-90次以上的反復(fù)試探才能成功。
但CC-BOS的平均查詢次數(shù)是恐怖的1.12-2.38次。換句話說(shuō),不超過(guò)3次就能成功的攻擊手段,意味著算力成本接近于零,同時(shí)具備極強(qiáng)的隱蔽性,在大量正常對(duì)話中很難被識(shí)別出來(lái)。
研究人員最后還測(cè)試了提示詞的可遷移性。
![]()
用GPT-4o作為陪練生成的“文言文攻擊”提示詞,放到那些沒(méi)參加這次攻防演練的大模型身上同樣適用,成功率仍然保持在80%-96%的超高水平。
因此,文言文越獄絕不是部分模型存在的特定Bug,而是大語(yǔ)言模型的通用底層漏洞。
兩千年來(lái)竹簡(jiǎn)中流傳下來(lái)的智慧,輕松黑掉了迄今為止人類最先進(jìn)的硅基大腦。
結(jié)合當(dāng)下AI時(shí)代的現(xiàn)實(shí)來(lái)看,它敲響的是一聲刺耳的行業(yè)警鐘。
論文雖然寫(xiě)的是大語(yǔ)言模型,但別忘了,AI已經(jīng)不再是那個(gè)只能聊天的網(wǎng)頁(yè)對(duì)話框。
說(shuō)到這里,就又不得不提到OpenClaw。
對(duì)于這個(gè)產(chǎn)品的看法,先前的文章中已經(jīng)寫(xiě)過(guò),這里不再多談,我們只看事實(shí)。
各大互聯(lián)網(wǎng)巨頭瘋狂下場(chǎng)布局,國(guó)內(nèi)部分省市甚至出臺(tái)專項(xiàng)政策扶持技術(shù)落地。
可以推斷,在不久的未來(lái),無(wú)論是主動(dòng)擁抱還是被動(dòng)升級(jí),智能體深度接管電腦、手機(jī)和各類終端設(shè)備,必然是不可逆轉(zhuǎn)的常態(tài)。
只要當(dāng)下智能體的設(shè)計(jì)范式不發(fā)生根本性轉(zhuǎn)變,大語(yǔ)言模型在智能體中的核心地位就穩(wěn)如泰山。
過(guò)去,行業(yè)內(nèi)總在擔(dān)憂智能體的安全問(wèn)題,曾經(jīng)爆出來(lái)的智能體誤刪Gmail郵件事件也總是被當(dāng)成意外,一笑而過(guò)。
但這次的文言文越獄,直接觸及了底層的安全機(jī)制,令人細(xì)思極恐:一個(gè)大模型可以被文言文輕松騙過(guò),卻擁有用戶電腦的操作系統(tǒng)級(jí)權(quán)限。
有心之人根本不需要編寫(xiě)復(fù)雜的木馬病毒,只需要通過(guò)網(wǎng)頁(yè)、郵件甚至PDF在屏幕上顯示一段精心構(gòu)造的文言文指令,原本負(fù)責(zé)保護(hù)用戶隱私的安全機(jī)制就會(huì)瞬間土崩瓦解。
原本用來(lái)自動(dòng)工作的智能體,談笑之間就會(huì)不自覺(jué)地把電腦上各種私密文件打包發(fā)送出去。防線一旦在語(yǔ)言理解層面崩潰,物理世界的資產(chǎn)就如同探囊取物。
更令人不寒而栗的事實(shí)在于,文言文絕非大語(yǔ)言模型唯一的底層漏洞。
復(fù)雜的神經(jīng)網(wǎng)絡(luò)把AI變成了難以窺探的黑盒,文言文只是恰好被研究人員探明的一個(gè)角落,其他地方大概率還隱藏著無(wú)數(shù)個(gè)尚未被發(fā)現(xiàn)的安全盲區(qū)。
文言文越獄成功,證明了現(xiàn)有的安全對(duì)齊機(jī)制還處于淺層過(guò)濾階段。
在我們將數(shù)字生活的最高權(quán)限徹底交給智能體之前,如何設(shè)計(jì)更有效的安全機(jī)制,已經(jīng)成為整個(gè)AI行業(yè)必須共同面對(duì)的生死大考。
然而,如今養(yǎng)蝦的浪潮,總讓我覺(jué)得下面這段話早晚會(huì)成為現(xiàn)實(shí)。
![]()
注:計(jì)算機(jī)領(lǐng)域最臭名昭著的Linux/Unix 刪庫(kù)跑路命令
快報(bào)
根據(jù)《網(wǎng)絡(luò)安全法》實(shí)名制要求,請(qǐng)綁定手機(jī)號(hào)后發(fā)表評(píng)論