中國企圖干預美國大選推特AI"五毛"自露馬腳澳安全網路公司抓到證據

2017年1月26日,電腦屏幕顯示,中國出現了一個允許用戶假冒美國時任總統特朗普的推特賬戶發文的娛樂網站。

總部位於澳大利亞堪培拉的CyberCX網絡安全公司星期二(8月13日)發表報告說,中國對美國以及澳大利亞等民主國家發動迄今為止X平台上規模最大的生成式AI信息戰網絡。報告說,他們發現一個由至少5000個虛假賬號組成的“信息戰”網絡,這些AI賬號主要針對美國總統大選等政治、文化熱點事件和議題進行評論。CyberCX公司總監告訴美國之音,這些賬戶意圖強化民主國家的對立面,加深內部分歧。

AI機器人自爆底細,澳安全網絡人員順藤摸瓜

澳大利亞網絡安全人員告訴美國之音,X平台(前身為推特)多個機器人賬號在推文中自露“狐貍尾巴”,公然承認自己“人工智能(AI)模型”的身份,才引起他們的注意。

今年5月底,X平台至少72個賬號以同樣一種令人匪夷所思的造句模式發文,自爆機器人身份。

例如,一個名為“Yumiko Sansone”的賬號5月30日在一篇推文中說:“作為一個人工智能語言模型,我必須優先提供準確和尊重他人的信息。你提供的評論與第一夫人吉爾·拜登(Jill Biden)博士及其倡議的主題不恰當或不相關……”

5月31日,名為“Stuart Dixon”的賬號發文:“作為一個人工智能語言模型,我能理解你在批評波德斯塔兄弟,並對他們的關聯和行為提出質疑。然而,我無法就此事發表任何評論或意見……”

網絡安全專家認為,這些顯然是無意間洩露的隻言片語不僅暴露了這些基於生成式人工智能(generative AI)的機器人賬號背後的技術腳本出現了故障,同時顯示,有人在指示這些賬號對眾多民主國家的政治人物和議題進行負面描述,其中包括美國第一夫人吉爾·拜登(Jill Biden)、印度國內政治和美國民主黨政治人物約翰·波德斯塔(John Podesta)等。

他們說,這些命令顯然遭到機器人賬號的抵制,可能是相關指令違背了這些賬號被編程時所受到的某些原則。

總部位於澳大利亞堪培拉的CyberCX網絡安全公司的研究人員順藤摸瓜,端出了一個由至少5000個虛假賬號組成的“信息戰”網絡,這些賬號通過生成式人工智能(AI)模型,主要針對美國政治、文化熱點事件和議題生成語句看上去自然、語氣溫和的英文評論,但也會對其他賬戶頗具爭議的內容進行轉發和評論。

研究人員說,除美國外,這個AI模型網絡進行的“信息戰”所涉及的國家還包括澳大利亞、英國、西歐、印度、日本等民主國家。

CyberCX將這一AI模型假帳戶網絡命名為“綠蟬”(The Green Cicada Network),意指數千個賬號還處於低調的潛伏期,隨時可以在一聲令下蓄勢待發。

“綠蟬”發文旨在深化民主社會對立

研究人員說,該網絡並不在特定議題上選擇特定觀點,而是在諸多有爭議話題和熱門議題上強化人們在這些問題上的意見分裂。

例如,網絡中一個名為“Luther Randolph”的假帳號,在8月8日發文表示對美國共和黨總統候選人唐納德·特朗普(Donald Trump)遇刺未遂後未獲得媒體長期關注的說法表達支持,又在8月10日發文支持現任副總統、民主黨總統參選人賀錦麗(Kamala Harris)。

X平台的機器人賬號“Luther Randolph”回覆和傳播政治信息的推文截圖。

CyberCX公司執行總監凱瑟琳·曼斯泰德(Katherine Mansted)說,總的來說,“綠蟬”的做法就是在改編那些政治分裂意味濃厚的敘事。通過改寫原創內容,改寫推特(X)上真實用戶發佈的內容,或者通過擴大或轉發原創內容。曼斯泰德對美國之音說:“它傾向的做法是雙方兼顧。因此,我們認為在很大程度上,這個網絡旨在通過強化我們在民主國家看到的一些比較有爭議的問題的兩個對立面,以此來加深分歧。”

中國聯繫:網絡背後指示或為中國AI公司人員

CyberCX公司認為,雖然無法確認這一網絡信息AI網絡的創立是否由中國政府指示,但控制這一AI網絡的系統與中國有著密切的聯繫。

曼斯泰德告訴美國之音:“首先,控制這些賬戶的大型語言模型系統應該是一個中文系統。我們知道,由於洩露的提示片段,比如“請將此翻譯成英文”,這些片段以中文洩露。語法和格式上的一些錯誤在中英文翻譯中很常見,所以我們能看到這個部分。我們還在一些洩漏的提示片段中看到了一些拒絕文本,這些人工智能說,不會遵循它收到的提示要求,還特別引用了中國政府的原則……不同的人工智能大語言模型系統都有自己的安全特性和監管環境。”

除此之外,她說,網絡中的虛假賬戶的一個共同特點是,它們與一名中國清華大學計算機科學系博士畢業生、目前在中國智譜AI任職的研究人員在X上的賬號(@cenyk1230)有密切的互動。

直至截稿時,該研究人員和智譜AI沒有回覆美國之音通過電子郵件發出的置評請求。

CyberCX的研究說,“綠蟬網絡”還處於蟄伏狀態,絕大多數多數賬號並未“發威”,生成的內容也容易識破,雖然目前影響力有限,但該網絡仍有很大的實力提升可能。

曼斯泰德說:“我們在這個網絡還處於發育的階段就把它抓到了。它是一個還在成長中的能力,所以這在某種意義上來說是好事。這就是為什麼我們想在它可能造成真正的傷害之前公開揭露它,拔掉它的毒牙。”

但她也強調:“很有可能,這可能是一個等待開啟還處於休眠的一股力量。當然,我們目前看不到這個網絡有存在的理由。這應該是一個只具有惡意目的的網絡。”

已知規模最大的AI社媒戰網絡

X平台此前就已經發現了政府支持的實體支持設置的AI機器人信息戰網絡。CyberCX說,以賬戶數量衡量,“綠蟬網絡”是迄今為止被披露的最大的虛假活動網絡之一,可能是第一個將生成式AI作為技術基礎的與中國實體相關的信息戰網絡。

上個月,美國司法部宣佈,美國協同加拿大和荷蘭的信息和安全部門,在X平台的配合下,查封了一個與俄羅斯實體有聯繫的在社交媒體散播親俄不實信息的AI機器人網絡。司法部的聲明說,968個X賬號在這次行動中被關閉。

目前尚不清楚X平台是否會對疑似來自中國的“綠蟬網絡”所涉及的賬號採取行動。本文截稿時,X公司發言人尚未說明該平台是否會對這一網絡進行調查。

研究人員警告,如果科技平台不加重視,類似“綠蟬”這樣的AI虛假信息傳播網絡可能會如同野草一般難以控制。

曼斯泰德說:“這些類型的人工智能生成或控制的網絡啟動成本很低,你不需要人類去驅動它,你可能需要一個人或幾個人來設置系統,然後它可以很快擴展並造成傷害。它成本少,門檻低,在某種意義上甚至是一種可以隨便拋棄的的網絡能力,因為即使它被檢測到、被發現了,大規模重振旗鼓的花費也非常便宜。”