- 最近、大規模言語モデル(LLM)とAIチャットボットが顧客ジャーニーに与える影響を検証するため、LLMの推薦トラフィックと**Organic(オーガニック/自然検索)**のコンバージョン率を比較する分析を実施
- 研究は6か月間の54サイトのデータに基づいており、デモ依頼・購入などのマクロコンバージョンのみを含めて結果の信頼性を高めた
- 結果として、LLMトラフィックの平均コンバージョン率(4.87%)は自然検索(4.60%)よりわずかに高かったが、統計的に有意ではないことが確認された
- B2BとB2C、業種別に分けても一貫した優位性は見られず、LLMトラフィックの比率はほとんどのサイトで1%未満だった
- 全体として、LLMが新たな機会を提供する可能性はあるものの、現時点ではオーガニック検索が依然として中核チャネルであることを示す結果となった
研究の目的
- LLMトラフィックがオーガニック検索より高いコンバージョン率を示すかを検証するための分析
- 業界では、LLMがより「質の高いトラフィック」を提供するという仮説があったが、これを一次データに基づいて検証することが目的
方法論とデータ
- さまざまな業界のWebサイトを調査したが、測定可能なマクロコンバージョンがあるサイトのみを対象に含めた
- B2B: デモ依頼、フォーム送信
- e-commerce: 購入
- 合計54サイトが最終サンプルに選定された
- データソースはGA4、期間は直近6か月
- セッションベースのコンバージョン率を使用してB2BとB2Cの差を最小化
- データ収集の過程では、イベントマッピングとトラッキング検証を手作業で行い、信頼性を確保した
統計的アプローチ
- 平均・中央値の比較、標準偏差・四分位範囲の測定
- サイト別の自然検索 vs. LLMコンバージョン率の差を検証するため、paired t-testを実施
- B2B vs B2Cの比較にはWelch’s testを使用
主な結果
- 平均コンバージョン率: オーガニック 4.60% vs. LLM 4.87%
- サイト別の平均差は+0.27pp、中央値差は+0.09pp
- p-value 0.794 → 統計的に有意ではない
- 56%のサイトではLLMコンバージョン率の方が高かったが、41%は低かった → 一貫した優位性はない
高トラフィックサイト分析
- 条件: ≥10万セッション、≥50 LLMセッション、≥5 LLMコンバージョン
- サンプルは54件から33件に減少
- 平均差は+1.24ppに増加したが、依然として統計的に有意ではない(p=0.376)
B2B vs. B2Cの結果
- 全体データ:
- B2B → LLM(2.17%) > オーガニック(1.16%)
- B2C → LLM(6.58%) < オーガニック(6.78%)
- トラフィック条件を適用した後も差は統計的に有意ではない
- Welch’s testの結果でも差はない(p=0.546)
LLMトラフィック規模
- 90%以上のサイトで全体トラフィックの0.6%未満がLLM由来
- 平均すると**セッションの0.24%、コンバージョンの0.42%**のみを占める
- 一方、オーガニック検索は全セッションの約32%、コンバージョンの34%を占め、圧倒的な比重を示した
業種別分析
- 金融、旅行・観光業界ではLLMの方が高いコンバージョン率を示した
- e-commerce、消費者サービスではオーガニック検索が優勢だった
- サンプル数が少ないため、解釈には限界がある
結論と示唆
- 現在のデータ基準では、LLMトラフィックがオーガニック検索より高いコンバージョン率を提供するという証拠はない
- むしろLLMトラフィックは規模が非常に小さい → オーガニック検索と比べた影響力はごく小さい
- 顧客ジャーニーは複雑化しており、検索とLLMを併用するケースが増加する傾向にある
- 最近のレポートによると、46%は従来の検索のみを使用、44%は検索+AIを併用、2%のみがAI中心
- したがって企業は、LLM最適化の追跡・モニタリングを並行して行いつつ、依然としてオーガニック検索を最優先チャネルとすべきである
まだコメントはありません。