SEO A/Bテストのやり方｜その順位の上がり、「たまたま」と区別できてますか

SEOのA/Bテストとは

SEOのA/Bテストとは、ページのタイトル・見出し・内部リンク・本文などを変更し、変更の前後（または変更したページと変更していないページ）で検索パフォーマンスを比べて、その変更が効いたかを確かめることです。広告のA/Bテストのように同時に2案を出し分けるのが難しいため、SEOでは「同じページの前後」や「似たページとの比較」で代用します。

なぜ「前後比較だけ」では足りないのか

順位やクリックは、施策をしなくても動きます。Googleのコアアップデート、検索需要の季節変動、サイト全体のトレンド、そして単なる日々のブレ。これらが施策の効果と混ざるため、「変更後に上がった＝変更のおかげ」とは言い切れません。実際、変更後に+20%でも、同じ期間にサイト全体が+15%動いていたら、施策の純効果は+5%程度かもしれません。

正しく見分ける3つの要素

一つ目は対照を引くこと（差分の差分・DiD）。変更したページの変化から、変更していない似たページや全体の変化を引きます。共通して効いた外部要因を相殺し、施策固有の効果だけを残せます。二つ目は信頼区間で偶然を除くこと。出た数字が偶然のブレかを区間で見て、区間が0をまたぐなら「効いたとは言えない（判定保留）」と扱います。三つ目はコアアップデート期間との重なりを確認すること。変更の前後がコアアップデートの展開と重なっていたら、その効果は施策と切り分けられません。

Search Consoleで自分でやる手順

まず、変更したページの「変更前28日」と「変更後28日」で、クリックと平均掲載順位を出します。次に、サイト全体で同じ前後28日を出します。そのうえで「変更ページの変化率 − 全体の変化率」を計算すると、大まかな純効果が見えます。最後に、その期間にコアアップデートが無かったかをGoogleの公式告知で確認します。重なっていたら判定は保留します。

手作業の限界とRankProofでの検証

前後比較・対照の差し引き・信頼区間・コアアップデートの突合を、複数ページ・複数施策で毎回手で回すのは現実的ではありません。RankProofは、Search Consoleの公式APIでこの判定（差分の差分＋信頼区間＋コアアップデート期間の考慮）を自動で行い、効いていなければ効いていないと正直に示します。無料枠で１サイトから試せます（読み取り専用・クレジットカード不要）。

よくある質問

参考

• Google 検索セントラル：Google 検索のコア アップデート

関連記事

• GRC・GMO順位チェッカー終了の理由と、壊れない計測への移行（&num=100廃止）
• コアアップデートの影響か、自分の施策か。Search Consoleで順位変動の原因を切り分ける方法
• 月次SEOレポートの「で、結局効いたの？」に、季節要因を差し引いて答える方法