跳至主要內容
星帆 — Vela
科技前線生醫突破政策解讀成長思維焦點追蹤
設定興趣偏好EN
生醫突破

AI 工具引發信任危機:ChatGPT 存取銀行帳戶與醫療筆記造假爭議

Jason
Jason
· 2 分鐘閱讀
更新於 2026年5月15日
A conceptual visual showing a futuristic medical tablet and a banking application screen with distor

AI 應用的信任門檻正在升高

隨著生成式 AI 迅速嵌入金融與醫療等關鍵領域,相關的技術信任問題正浮上檯面。本週兩項關鍵事件引發了對 AI 工具安全性與準確性的高度關切:一是 OpenAI 允許 ChatGPT 透過 Plaid 連結用戶銀行帳戶的擴展計畫;二是加拿大安大略省的審計報告揭露,AI 醫療筆記工具竟會虛構診斷與治療轉診紀錄。

這些事件凸顯了一個嚴峻的現實:在追求功能自動化的過程中, AI 產品在保護用戶隱私與提供準確臨床數據方面,依然面臨巨大的技術鴻溝與監管考驗。

醫療筆記工具的虛構風險

安大略省的審計報告顯示,某些醫療診所使用的 AI 筆記系統,在處理醫師與病人的對話紀錄時,不僅未能精確傳達資訊,甚至編造了醫師未曾提及的治療轉診建議與藥物處方。這對醫療品質與病人安全造成了直接威脅。

從法律責任的角度來看,這不僅引發了關於「專業職責」(Duty of Care)的疑問,還可能讓醫療服務提供者在違反隱私條例(如加拿大 PIPEDA 或美國 HIPAA)時面臨嚴重的賠償責任。AI 軟體廠商目前急需解決如何保證 AI 輸出的臨床正確性,而非僅僅是「聽起來很合理」。

金融整合的隱私焦慮

與此同時,OpenAI 宣佈 ChatGPT 將與 Plaid 深度整合,讓用戶能直接在對話中存取銀行帳戶資訊。雖然 OpenAI 強調其安全性設計,但對於將敏感金融數據授權給一個擁有 AI 模型訓練能力的平台,消費者與安全專家抱持高度懷疑。

整合銀行帳戶的便利性雖然顯而易見,但這也大幅擴大了攻擊面。如果模型遭受提示注入(Prompt Injection)攻擊,或者是後端的 API 權限管理出現漏洞,後果將不堪設想。這對 OpenAI 而言是一場關於「用戶信任」的賭局,若處理不慎,可能導致大規模的用戶數據外洩隱憂。

法規監管與行業未來

面對日益嚴重的 trust gap,監管機構的立場正在轉強。在醫療領域,自動化工具的責任歸屬將成為未來立法重點;在金融科技領域,監管機構將更嚴格檢視 AI 模型對於第三方 API 的權限存取行為。

對於企業而言,未來的重點在於:

  • 透明化與審計:開發過程需更具透明度,並通過第三方資安審計。
  • 人工監督機制(Human-in-the-Loop):在涉及重大決策的場景中,AI 必須僅作為輔助工具,而非決策者。
  • 法律賠償防護:強化軟體廠商與專業人員之間的合約保障。

總結來說,儘管 AI 技術發展迅速,但「信任」仍是產品落地時最脆弱的一環。若 AI 廠商不能在安全性與準確性上取得實質突破,大規模的行業應用將會面臨沈重的放緩壓力。

常見問題

為什麼醫療 AI 筆記會出現虛構情況?

這是因為大型語言模型依賴機率預測下一個字,當輸入訊息不足或處理邏輯混亂時,它可能會為了填補資訊空白而「編造」內容,這在臨床場景極度危險。

OpenAI 與 Plaid 合作的潛在風險為何?

主要的風險在於提示注入攻擊(Prompt Injection),如果駭客能操控 AI 模型執行未授權的金融轉帳或竊取帳戶資訊,將造成嚴重損害。

企業如何降低 AI 帶來的這些安全風險?

採用「人工在迴路」(Human-in-the-Loop)機制,在所有 AI 產生內容進行臨床或財務決策前,必須經過人類專業人員的審核。