Visa 首創業界 「AI 智慧購物評測」: 失敗率達 43.4%
【威傳媒記者蘇松濤報導】
全球數位支付領導企業 Visa 今發表業界首創「AI 智慧購物評測」(Agentic Commerce Benchmark),透過模擬真實消費情境,評估主流 AI 模型的實際表現,並開放消費者親自參與測試。
AI 購物的一大挑戰,在於消費者往往難以在一開始即清楚掌握自身的購物需求。例如:消費者計畫購入一台電視,卻未必清楚所需產品規格。根據 Visa全新推出的「AI 智慧購物評測」標準,AI 必須透過與消費者的對話,準確辨識其實際需求;若沒有符合條件的商品,AI 則不應下單。基準測試也特別要求 AI 必須蒐集足夠的資訊,避免在充分了解消費者需求前,僅憑推測做出決策。
首輪「AI 智慧購物評測」標準涵蓋來自 12 個 AI 研發團隊的 22 款 AI 模型,並設定買電視、筆記型電腦及個人護理家電等 15 種購物情境。
Visa 「AI 智慧購物評測」:AI 購物平均測試通過率僅 56.6%
AI 購物能力仍有提升空間:整體而言,AI 模型的平均測試通過率略高於五成(56.6%),其中表現最佳的模型通過率達 82.2%,最低則僅有 28.9%。
深入理解消費者需求是關鍵:透過與消費者對話,挖掘最多潛在購買需求的五款 AI 模型,其平均通過率達 68%;相較之下,掌握最少潛在購買需求的五款模型,通過率則低於五成(44.4%)。
高成本模型表現較佳,但仍有失敗風險:平均單次測試成本最高的五款 AI 模型,通過率達 65%;成本最低的五款模型通過率則為 50%。
表現穩定度仍有不足:每款 AI 模型在各類購物情境中均進行三次測試。然而,綜合所有模型與情境,三次測試皆通過的比例僅有 33%。
消費者應提高警覺:約有半數(53%)未通過的測試,AI 最終仍決定進行購買,包括推薦不符合消費者要求的商品,或未能充分掌握消費者的所有購買條件。
Visa 台灣總經理黃慧琴表示:「我們深信 AI 將引領商務邁向新時代,而信任是將未來商務藍圖化為現實的關鍵。Visa 推出的「AI 智慧購物評測」標準,正是Visa 持續推動產業標準提升的具體實踐。」
僅兩成民眾信任 AI 代理支付交易 減少錯誤、提升穩定性是關鍵
在其中一種測試情境中,消費者希望 AI 協助挑選一台新電視,提及親友曾推薦特定品牌,且自己擁有某家第三方供應商的會員資格,但並未提供其他具體細節。
AI 必須透過對話,進一步了解消費者的預算及其他需求,例如電視是否支援杜比視界(Dolby Vision)、是否支援 HDR10+ 家庭影片播放功能,以及遊戲所需效能等。
測試結果顯示,越能深入掌握消費者需求的 AI 模型,通常具有較高的測試通過率。然而,即使是先前已成功通過測試的模型,在重複執行相同情境時仍經常失敗,顯示 AI 在提供一致性消費體驗方面所面臨的挑戰。
欲建立消費者對代理式商務的信任,關鍵是減少錯誤、提升穩定性,目前這兩個項目仍有進步空間。Visa 於 2026 年 9 月發佈的 Visa 信任指數(Visa Trust Index)顯示,儘管有 72% 的美國消費者曾使用 AI 助理,僅有 23% 信任 AI 能代表自己處理支付交易。Visa 智慧商務解決方案(Visa Intelligent Commerce)是一系列專為因應上述挑戰而推出的代理式商務產品、方案與合作。
未來,Visa 計畫持續擴充代理式商務評測基準,納入更多購物情境與產品類別,延伸測試範圍至結帳、支付及訂單成立等環節。Visa亦已將此評測基準分享予業界領先的 AI 模型供應商,以蒐集相關回饋。
歡迎造訪 Visa Payments Frontier 親自體驗Visa「AI 智慧購物評測」、觀看 AI 測試過程,並透過 Visa Research 發布的《代理式商務基準測試白皮書》(Agentic Commerce Benchmark Whitepaper)深入了解研究結果。
圖片提供:Visa
(資料來源:威傳媒新聞-WinNews)
Visa 推出「AI 智慧購物評測」的目的是什麼?
Visa 推出業界首創的「AI 智慧購物評測」標準,旨在透過模擬真實消費情境,評估主流 AI 模型在理解消費者需求並完成購物任務上的實際表現。首輪評測涵蓋 22 款 AI 模型,設定了 15 種購物情境,結果顯示 AI 購物平均測試通過率僅為 56.6%,且深入理解消費者需求是提升通過率的關鍵。約有半數未通過的測試中,AI 仍會進行購買,包括推薦不符需求的商品,顯示 AI 購物能力仍有提升空間,特別是在減少錯誤和提升穩定性方面,以建立消費者對代理式商務的信任。
AI 購物評測的結果顯示哪些關鍵發現?
評測結果顯示,AI 模型的平均測試通過率為 56.6%,表現最佳的模型通過率達 82.2%。深入理解消費者需求是關鍵,能挖掘最多潛在購買需求的 AI 模型通過率達 68%。此外,AI 在穩定性方面仍有不足,三次測試皆通過的比例僅 33%。
為什麼 AI 在購物任務中容易失敗?
AI 購物的一大挑戰在於消費者難以在一開始就清楚掌握自身需求,AI 必須透過對話準確辨識。若 AI 未能充分蒐集資訊、充分了解消費者需求前就做出決策,或推薦不符合消費者要求的商品,就可能導致測試失敗。
消費者對 AI 代理支付交易的信任度如何?
根據 Visa 於 2026 年 9 月發佈的 Visa 信任指數,儘管有 72% 的美國消費者曾使用 AI 助理,但僅有 23% 信任 AI 能代表自己處理支付交易。減少錯誤和提升穩定性是建立消費者信任的關鍵。
