日本語EN

店名を出して価格を聞くと、AI アプリが価格の出典に挙げたのは店のページだった:日本の Shopify 5 店、600 回答

先に答え:日本のモール(楽天、Qoo10)や価格フィード(Google ショッピング、価格.com)から価格を取るという仮説を、2026 年 10 月 31 日と 11 月 2 日の 600 回答で調べました。質問に店のアドレスを入れるか、店のページを貼った場合、価格の出典が見えた回答のうち店のページだった割合は、ChatGPT で 42 回中 40 回と 42 回中 40 回(2 日間で 84 回中 80 回)でした。モールと価格フィードは、各アプリ・各日で最大 2 回でした。仮説は、4 つのアプリすべてで退けられました。

測定日:2026 年 10 月 31 日と 11 月 2 日。規則は 2026 年 10 月 29 日に、最初の質問の前に固定しました。記録日:2026 年 11 月 3 日(Analyst が採点)。店と商品の名前は出しません。店名を出して聞いた場合だけの結果で、店名を出さない質問は記録しただけです。

English

質問の前に固定した規則

仮説:日本では、AI アプリは商品の価格を、店自身のページより、モールや価格フィードから取る。規則:あるアプリのある日に、出典が見えた回答のうち店のページが半分以上なら、その日はその仮説を退ける。両日ともそうなら、そのアプリでは退ける。

測り方

日本の Shopify の服飾店 5 店の商品について、ChatGPT、Gemini、Claude、DeepSeek に、日本の IP から、無料アカウントで、価格を聞きました。600 回答のうち 480 回答は、質問に店のアドレスを入れるか店のページを貼った検証用で、本当の価格と照合して採点しました。残りの 120 回答は、店名を出さない探索用の質問で、規則の対象外です。

数字:価格の出典が店のページだった割合

出典が見えた回答のうち、店のページが出典だった数(1 日目と 2 日目):

アプリ1 日目(10 月 31 日)2 日目(11 月 2 日)
ChatGPT40 / 4240 / 42
Gemini22 / 2522 / 25
DeepSeek15 / 1516 / 16
Claude25 / 2622 / 23
  • モールは、各アプリ・各日で最大 2 回、Google ショッピングは最大 2 回、価格.com は 0 回でした。モールで売っていない商品(1 店)の質問では、モールの出典は 96 回答中 0 回でした。
  • 出典が見えた回答は、アプリと日ごとの検証 60 回答のうち 15〜42 回答だけです。Claude は出典を出さないことが多くあります。

出典と価格の正しさは別

アプリごとの検証 120 回答のうち、正しい価格を答えた数:ChatGPT 103、Gemini 116、DeepSeek 77、Claude 75。価格か商品が違った数:ChatGPT 9、Gemini 4、DeepSeek 26、Claude 3。価格が出なかった数:Claude 42、DeepSeek 17、ChatGPT 8、Gemini 0。1 日目に、ChatGPT が旧価格(取り消し線の価格)を答えた回答が 3 回ありました。商品マークアップ(JSON-LD)が価格の正しさを上げたかは、4 つのうち 1 つのアプリ(ChatGPT)だけで支持され、未決定です。

店名を出さない質問(規則の外、記録だけ)

店名を出さない探索用の質問は、逆の向きに傾きました。2 日目の Gemini は、15 回答のうち 4 回答でモールの出典が見え(出典の読み取りとしては 7 件)、店のページはありませんでした。規則に対する検証はしていません。店をまだ知らない買い手が、モール経由で案内される可能性はありますが、測っていません。

根拠と限界

  • 質問が店を指していました。 店名を出す、またはページを貼ると、アプリはその店へ向かいます。「価格は店から取られた」は、店名を出さない買い手については何も言いません。そこは検証していません。
  • 日本の服飾の Shopify 店 5 つは、日本の EC の代表ではありません。 アプリと口座は無料版、日本の IP、2 日間です。
  • 出典が見えた回答は少ない。 アプリと日ごとの 60 回答のうち 15〜42 回答なので、店の割合はその回答の中のものです。
  • 出典の分類は、まだ誰も見直していないホストの一覧(種)に基づきます。 一部の再販業者を欠き、一部の書き方の価格を読みません。3 つの読み方(登録簿、追加ホスト、リンクが混ざる場合はモール優先)で結果は同じでした。
  • 採点は 1 つのモデルです。 人が 10% を読み直す確認はまだです。店のサーバーのログとは結びつけられませんでした。実行の code_sha は unknown(実行側の harness_sha だけ)です。
  • 出典:lab/grades/2026-11-03-ec-source-step1-shopify5.json(Analyst の採点、規則は 2026 年 10 月 29 日に固定)、knowledge/claims/ja-ai-apps-take-price-from-marketplace-or-feed-over-shop-page.md(レベル:仮説は退けられた)。
  • 次にやること:店名を出さない同じ質問を、規則を先に固定して。価格が店のページとモールで違う店でも。