進一步了解班尼·查尼(Benny Czarny)所著的《顛覆性的網路安全》一書

瞭解更多資訊
我們利用人工智慧進行網站翻譯,雖然我們力求準確性,但它們可能並不總是 100% 精確。感謝您的理解。

由人工智慧生成的詐騙正耗盡理賠金,以下是偵測方法

OPSWAT其 AI 內容檢查器能在虛假主張與文件影響付款或決策之前,率先將其攔截Drive
作者: Alin Besnea
分享此文章


AI 生成內容詐欺,是指利用生成式 AI 偽造或篡改作為商業決策依據而提交的圖像、文件或文字。AI Content Inspector 是OPSWAT 旗下由 AI 驅動的內容真實性與文件詐欺偵測引擎,旨在於此類內容影響付款或照護決策之前,即予以標記。

關鍵要點

  • 一處價值 600 美元的天花板污漬,因生成式人工智慧在提交的照片中誇大了損壞程度,最終導致房屋保險理賠金額飆升至 18,400 美元,且全程未安排理賠專員實地勘查
  • 當人工智慧在同一張照片中加入凹痕和破裂的保險桿後,原本價值 150 美元的保險桿刮痕,竟演變成了一筆 3,850 美元的汽車理賠案
  • 醫療支付方面臨一項相關風險:合成醫療影像與偽造的臨床文件,可能導致錯誤的給付決策或錯誤的醫療決策
  • 目前可能已有 20% 至 30% 的保險理賠申請中,包含經人工智慧修改過的媒體檔案
  • AI Content Inspector將元資料與來源驗證、鑑識與壓縮分析的 AI 模型分類器,以及浮水印偵測功能整合為單一判定結果,並附有信心分數,而非單純的「通過」或「未通過」標記

我們先前關於人工智慧生成發票詐騙的貼文指出,一張偽造的發票即使包含詐騙性的付款指示,仍能通過所有惡意軟體掃描。凡是將照片、文件或掃描表單作為證明接受的地方,都會出現同樣的漏洞。無論是房產照片、事故現場照片,還是醫療紀錄,即使不含惡意程式碼,仍可能歪曲實際發生的情況。

在本篇部落格中,我們將介紹三種理賠類型——住宅保險、汽車保險及醫療費用報銷——以說明此類風險的觸及範圍已有多廣。詐欺分析師、特別調查單位、理賠營運主管以及醫療支付完整性團隊,正是承擔這項風險的關鍵角色,因為他們是理賠款項支付或醫療照護決策通過前的最後一道把關關卡。

AI 生成詐騙已對理賠造成衝擊

生成式人工智慧使得虛假理賠證據的製作變得快速、廉價,且難以憑肉眼辨識。根據Shift Technology 的數據,20% 至 30% 的保險理賠案件可能包含經人工智慧篡改的媒體檔案。根據金融專業人員協會(Association for Financial Professionals)的統計,2025 年有 76% 的組織曾遭遇支付詐欺的企圖或實際案例;而Medius Financial Census最近發布的一份報告顯示,每起發票詐欺事件造成的平均損失高達 133,000 美元。

理賠、付款及報銷的工作流程,全都取決於所提交的內容,而生成式人工智慧如今已能逼真地偽造這些內容。每個工作流程都會根據該內容做出「核准」、「標記」、「阻擋」或「轉交審核」的決策,而一張偽造的圖片或文件,便可能在任何人質疑相關證據真偽之前,就促使該決策獲得通過。

資料來源:Shift Technology、財務專業人員協會、Medius 財務普查

人工智慧生成的財產損失照片如何導致房屋保險理賠金額被誇大

情境

一名屋主拍攝了一處輕微的天花板污漬,維修費用約為 600 美元。生成式人工智慧對該照片進行編輯,使其呈現出風暴損害正蔓延至天花板和屋頂的景象。這張經人工智慧增強的照片透過遠端財產理賠分流工具提交後,自動觸發了 18,400 美元的理賠金支付,且全程無需任何查勘員親赴現場。

經 AI 增強的照片可推動自動付款

AI Content Inspector 如何在內容接收階段偵測 AI 偽造內容

AI 內容檢查器會同時運用多種訊號來檢查提交的圖片,包括感測器指紋分析、像素一致性檢查,以及編輯過程留下的壓縮痕跡。 結果並非由單一偵測器決定。這種組合使引擎即使面對連人類審查員都難以辨別的逼真 AI 偽造圖片,仍能成功標記。最終的判定結果與信心分數會回傳至提交該檔案的理賠平台,因此可將可疑照片在核准理賠付款前轉交人工審查,而非等到款項已撥出後才進行處理。

AI 內容檢查器會運用多種指標來評估內容是否值得信賴

經人工智慧修圖的照片能否讓汽車保險理賠申請獲得核准?

情境

一名保單持有人拍攝了一處輕微的保險桿刮痕,維修費用為 150 美元。生成式人工智慧在同一張照片中添加了凹痕、破碎的車燈以及裂開的保險桿。這張經竄改的圖片上傳至基於照片的理賠平台後,自動觸發了 3,850 美元的理賠金支付,而理賠專員從未親眼見過這輛車。

由人工智慧產生的損壞,其視覺效果往往足夠逼真,以致在初步審查時不易被察覺

為何以照片為基礎的理賠平台會暴露漏洞

基於照片的理賠平台旨在加速核准流程,而非質疑所提交影像的真實性。AI 內容檢測器在影像進入工作流程的同一接收點,即會提供內容真實性的判定結果。此判定結果無需啟動新的採購週期,也無需在理賠平台上加裝獨立的檢測工具,且當可疑理賠案需要進一步審查時,能讓專責調查單位更早獲得線索以展開調查。

AI 內容檢查器會針對內容真實性提供判定結果,並附上信心分數

醫療保健領域面臨的合成醫療文件風險

醫療保險支付方面臨著源自同一根本問題的兩項相關風險。若理賠申請中附有偽造的臨床影像或合成文件,可能會導致錯誤的理賠決策;而若這些偽造內容進入醫療服務提供者的病歷系統,而非支付方的待處理清單,則可能導致錯誤的臨床決策。

AI 內容檢測器會分析視覺鑑識訊號、文字模式及文件結構,以辨識由 AI 生成或經篡改的內容

為何僅靠人工審閱文件不足以察覺這兩種風險

醫療保險支付方與支付完整性團隊需要在維持受監管工作流程完整性的同時,識別出偽造的醫療影像及合成文件;然而,由於其處理的理賠量龐大,要對每張影像和每份文件進行逐行人工審查實屬不切實際。AI Content Inspector 會在提交的醫療影像與文件進入理賠工作流程或照護路徑之前,分析其中是否存在 AI 生成內容及詐欺跡象,且無需針對每份檔案增加額外的審查步驟。

AI 內容檢測工具如何偵測虛構內容

在任何檢測流程開始之前,「AI 內容檢查器」會先對每個提交的檔案進行驗證與標準化處理,包括處理受支援圖像格式的元資料及 EXIF 資訊。之後,並非僅憑單一檢測結果來判定檔案是否為偽造。「AI 內容檢查器」整合了涵蓋圖像、文字及 PDF 檔案的四大類檢測功能:

  1. 元資料與來源分析。檢查檔案聲稱的來源,並將相機資料與 AI 生成憑證進行比對。
  2. 鑑識與壓縮分析。旨在偵測編輯痕跡、感測器指紋缺口,以及因重新儲存或人為操作而留下的壓縮痕跡。
  3. AI 模型分類器。執行經過訓練的深度學習模型,用以區分真實內容與 AI 生成的圖像和文字。
  4. 浮水印偵測。檢查受支援的影像內容中是否嵌有 Google SynthID 等簽名。

每個訊號都會回傳其自身的結果。AI Content Inspector 會將這些結果整合成單一的判定結果,並附上信心分數,而非僅標示「通過」或「未通過」的標記;如此一來,不確定的結果便可轉交給人工審查,而非直接進行自動封鎖或核准。

提交的影像會同時針對八個獨立訊號進行檢查

AI 內容檢查器在 MetaDefender™ 平台中的定位

AI Content Inspector 作為獨立引擎,運行於 MetaDefender™Core 及 MetaDefender™Cloud 之中。它與 Metascan™Multiscanning 、Deep CDR™ 技術以及 Proactive DLP™ 技術並行運作。在現有處理流程中加入內容真實性判定功能,意味著理賠、付款及醫療收案系統無需額外的深度偽造檢測工具或新的整合方案,即可開始驗證所提交內容的可信度。

與需要獨立工作流程和採購週期的獨立深偽檢測工具不同,「AI Content Inspector」專為在這些組織現有的檔案檢查流程中運作而設計,將「OPSWAT 」的檔案安全檢測方法從「檔案是否安全可開啟」延伸至「其內容是否值得信賴」。「AI Content Inspector」為貴組織現有的檔案檢查流程增添了內容真實性判定功能。了解它如何融入您的理賠、支付或醫療服務接案工作流程。

常見問題

AI Content Inspector 支援哪些檔案類型?

AI 內容檢查器支援常見的圖像格式,包括 JPG、PNG、WebP 和 BMP,以及包含文字的格式,例如 TXT、Markdown 和 PDF。PDF 檢查功能涵蓋同一份文件中由 AI 生成的文字與圖像的偵測。

若無法連線至雲端,AI Content Inspector 是否仍可運作?

是的。AI Content Inspector 除了可透過MetaDefender Cloud 在 Windows 和 Linux 系統上部署外,亦可透過MetaDefender Core 在本地端部署。無法將索賠、付款或醫療文件傳送至外部服務的組織,可完全在自身環境內執行檢測作業。

AI 內容檢查工具與惡意軟體掃描有何不同?

惡意軟體掃描會檢查檔案是否安全,可放心開啟。AI 內容檢查器則會驗證該檔案內的內容是否真實,並在惡意軟體掃描的結果旁,額外提供關於詐騙及 AI 生成內容的判定結果,而非取代原有的掃描功能。

AI Content Inspector 會顯示「通過」或「未通過」的結果嗎?

不。它會根據多項偵測訊號,同時回傳判定結果與信心分數。不確定的結果可轉交人工審查,且審查門檻可自行設定。

隨時瞭解OPSWAT 的最新資訊!

立即註冊,即可收到公司的最新消息、 故事、活動資訊等。