跳至主要內容
科技 分析

把性命交給聊天機器人:AI 識菇中毒事件揭示的信任盲區與技術濫用

一家三口聽信 AI 辨識結果誤食野菇導致四歲女童送進加護病房,這起真實意外凸顯了大型語言模型在給予高風險建議時的信任盲區。

Techroomage 編輯部 閱讀約 8 分鐘
把性命交給聊天機器人:AI 識菇中毒事件揭示的信任盲區與技術濫用

當一名家長決定將採集到的野生菇類放進鍋裡煮湯時,他們依賴的判斷基礎,不再是長輩傳承的經驗或專業植物學家的鑑定,而是一部安裝了 AI 聊天機器人的智慧型手機。這不是假設性的科技倫理辯論,而是近期在中國發生的真實社會事件。一家三口在戶外活動時採摘了野生菇類,並透過手機上的 AI 圖像辨識功能確認這些菇類「可食用」。基於這項來自人工智慧的建議,他們全家食用了這些菇類,隨後引發嚴重的食物中毒。在這起意外中,一名四歲的女童病情最為嚴重,肝臟等器官受到損害,必須送進加護病房接受治療,家屬甚至面臨可能需要進行肝臟移植的絕境。

這起事件在社羣媒體上引發了大量關注。公眾輿論的第一反應,多半是震驚於家長的輕信與大意。但如果僅僅將這起悲劇歸咎於「使用者缺乏常識」,我們就錯失了審視當前科技產品設計缺陷的重要機會。這起「AI 識菇中毒」事件,是一個極端但精確的切片,揭示了當大型語言模型與圖像辨識技術被包裝成全知全能的「AI 助理」並滲透進日常應用程式時,科技公司在風險控管與使用者認知之間,存在著多麼巨大的鴻溝。

技術的運作原理與誤判邏輯

要理解這起意外為何會發生,必須先釐清 AI 辨識物體的技術本質。目前市面上標榜能辨識動植物的 AI 工具,大多結合了電腦視覺模型與大型語言模型。運作方式是使用者拍攝一張照片,系統將圖像轉化為向量數據,與後端的圖像資料庫進行比對,找出機率最高的結果,再透過自然語言生成功能,用極度自信的口吻回答使用者的提問。

這套技術在面對貓狗品種或著名地標時運作良好,因為這些物體的特徵固定且資料庫樣本充足。然而,真菌界的生物分類學極度複雜。有毒與無毒的菇類在外觀上往往具有極高的相似度,也就是生物學所稱的「擬態」。例如劇毒的「假褐雲斑鵝膏菌」與常見的「洋菇」,在幼年期或特定生長階段的微觀特徵極為相似。一朵菇是否含有劇毒,往往取決於菌環的有無、菌柄基部的菌託形態,甚至是生長的基質環境。一張隨手拍攝、缺乏微距細節與多角度參照的手機照片,根本不足以提供 AI 模型做出準確判斷的資訊量。

在資訊不足的情況下,AI 模型的預設行為並不是承認「我不知道」。大型語言模型的設計邏輯是根據機率分佈生成文字。當它在缺乏足夠特徵的圖像中強行尋找答案時,它會傾向於輸出資料庫中最常見、最符合一般描述的菇類名稱。更危險的是,這些標榜「智慧助理」的應用程式,其對話介面往往經過擬人化設計。AI 在回答末尾通常不會附帶強烈的死亡警告,而是用禮貌、肯定的語氣給出「這是一種可食用的菇類」的結論。這種由技術生成的盲目自信,直接排除了使用者的最後一道防線。

列舉人工智慧在辨識野生菇類時面臨的四個主要技術盲點與高風險因素

從資訊檢索到「數位神諭」的信任轉移

這起事件最深層的問題,在於現代人獲取知識的行為模式已經發生了本質上的轉移。過去十年間,使用者習慣透過搜尋引擎尋找答案。搜尋引擎提供的是「連結」,使用者在點擊連結後,會進入部落格、論壇或官方衛生機構的網頁。在這個過程中,使用者會閱讀不同來源的資訊,看到其他網友的慘痛經驗,或是看到防毒單位提供的強烈警告標語。這個「瀏覽與比對」的過程,本身就是一種風險評估的教育。

生成式 AI 的普及,將「搜尋」轉變為「問答」。使用者不再面對繁雜的網頁連結,而是直接得到一個整理好的單一答案。這種介面大幅降低了認知負荷,卻也同時剝奪了使用者的批判性思考空間。當科技巨頭將 AI 包裝成無所不知的「萬能助理」,並在各類應用程式中預裝這項功能時,他們實際上是在向大眾販售一種「絕對權威」的錯覺。這與我們曾經探討過的向科技論壇求助私密病痛現象有著相似的心理機制,人們越來越傾向將數位工具視為絕對安全且隱密的權威來源。

在這起中毒事件中,AI 應用程式取代了過去專家或老人的角色。但它取代的方式是畸形的。人類專家在給出食安建議時,必然帶有強烈的保守傾向,會反覆告誡「不認識的菇類絕對不要喫」。相反地,AI 模型沒有生存本能,沒有對死亡的法律恐懼。它只是一個機率機器,用最流暢的修辭包裝一個未經科學驗證的猜測。當家長將手機螢幕上的「可食用」三個字視為真理時,傳統知識體系中的防禦機制就徹底瓦解了。

利益結構與免責條款的保護傘

當意外發生,責任該由誰來承擔?法律上,這將是一個極度模糊的灰色地帶。目前提供 AI 辨識服務的應用程式,無論是獨立的 AI 新創公司,還是將 AI 助理內建於作業系統的手機大廠,都在冗長的使用者條款中為自己套上了厚厚的保護傘。這些條款通常會聲明「AI 產生的內容僅供參考,不構成專業建議」,並將核實資訊準確性的責任完全轉嫁給使用者。

這裡出現了一個巨大的商業矛盾。科技公司在產品發表會上,用最先進的簡報技術展示 AI 如何幫助人類解決生活難題,暗示其無所不能,藉此拉抬股價與銷售量。但在實際應用的微觀層面,當使用者真的依照這些暗示去行動並遭受損失時,科技公司卻能瞬間退回到「這只是一個對話機器人」的防線內。

引述編輯室對於人工智慧模型缺乏風險意識與生存本能的觀點

這種行銷宣傳與免責條款之間的落差,構成了當前 AI 產業的利益結構。科技公司享受了 AI 帶來的流量、付費訂閱與硬體銷售紅利,卻不需要為 AI 實際產出的高風險建議負擔實質的連帶賠償責任。只要這種權利與義務不對等的結構繼續存在,類似誤導使用者的事件就會以不同的形式在醫療、法律、財務等各個領域不斷重演。

防線重構:從系統設計到媒介素養

要避免下一個家庭因為 AI 的錯誤建議而進加護病房,單純呼籲使用者「不要相信 AI」是消極且無效的。生成式 AI 已經成為現代數位生活的基礎設施,問題的 core 在於如何為這項基礎設施建立安全規範。

在系統設計層面,開發者必須引入「風險分類與熔斷機制」。當語言模型在處理涉及生命安全、健康醫療或法律合規的特定關鍵字與圖像辨識請求時,模型的生成邏輯必須被強制覆蓋。它不應該再給出基於機率的猜測答案,而是應該直接中斷對話,並在介面上跳出強烈且不容忽視的警告,引導使用者聯繫官方防毒機構或急診室。科技公司在訓練模型時,必須將「拒絕回答高風險問題」視為一種比「提供流暢回答」更高的優先級指標。

在數位素養教育層面,社會需要重新建立對「答案」的認知。過去的電腦素養教育教導人們如何辨別網路資訊的真偽;現在的媒介素養教育,必須教導大眾理解大型語言模型的運作原理。使用者需要明白,AI 螢幕上吐出的每一個字,都不是經過人類大腦思考的真理,而是數學公式運算出來的詞彙組合。不帶懷疑地將這些組合應用於高風險的實體決策,等於是將自己的生命安全交給了一個未經實證的演算法。這起野菇中毒事件,正是數位信任遭到濫用的最沉痛代價。