42.8%of Visa shopping-agent test runs failed (company figures)
Visaは11月5日、Agentic commerce Shopping where an AI assistant talks to you, searches products and may decide to buy—or refuse to buy—on your behalf. Benchmark A standard test used to compare AI models, like an exam everyone takes so scores can be compared.を公開しました。12の研究所から22のAIモデルが、テレビやノートPCの購入など15の買い物課題に取り組み、通過は約57.2%、失敗は約42.8%でした。当方はVisaの報道発表に基づいています。
ポイント
- モデルは会話で買い物客の条件を引き出し、合う商品があるときだけ購入し、なければ見送る必要がありました。偶然の正解は認められず、判断を正当化できるだけの情報収集が求められました。
- 隠れた条件をより多く引き出した上位5モデルの通過率は約70.2%、少ない下位5モデルは約44.4%。最良は試行の82.2%、最悪は28.9%。同じ課題を3回とも通過したのは全体の34.2%にとどまりました。
- 失敗した実行の約54%は、それでも購入に至りました。要件を満たさない商品か、条件を十分に確認しないままの購入です。同発表が引用する2026年9月のVisa Trust Indexでは、米消費者の72%がAIアシスタントを使ったことがある一方、支払いに任せる信頼は23%でした。
なぜ重要か： AIに買い物を任せる場合は、カートを下書きとみなし、支払前に予算・仕様・返品条件を自分で確認しましょう。マレーシアの買い物客も、現地版の試験を待たず同じ確認ができます。
情報源（2）
この記事は役に立ちましたか？
タップで投票。長押し・右クリック・Shift+Enterで、理由やひとことを添えて投票できます。
