A/Bテストとは

A/Bテストとはページのデザインや文言を2つのパターンに分けて訪れた人に表示し、どちらがより成果につながるかを実際のデータで比べる方法のことです。

A/Bテストでは今のページ（A）と一部を変えたページ（B）を用意し、訪れた人をランダムに振り分けて表示します。一定の期間が過ぎたあと、それぞれのCVRやクリック率を比べて、成果のよいほうを採用します。実際に訪れた人の反応をもとに判断できるため、社内で意見が分かれたときの決め手にもなります。

何を比べるのか

ファーストビューのキャッチコピーや画像、CTAボタンの文言や色、置き場所、フォームの項目数などがよく比べられます。1回のテストで変える場所は1つに絞るのが基本です。複数の場所を同時に変えると、どの変更が結果に影響したのかが分からなくなります。比べる前に「この変更でCVRが上がるはずだ」という仮説と、その理由を書き出しておくと、結果から学べることが増えます。

正しく判断するために

訪問数が少ないうちに結論を出すと、たまたま生じた差を本当の差だと思い込んでしまうことがあります。十分な訪問数が集まるまで待ち、統計的に意味のある差かどうかを確かめます。曜日や季節によって訪れる人の行動が変わることもあるため、AとBは同じ期間に並行して表示します。結果が出たら記録を残し、次の仮説につなげていきます。訪問数が少ないサイトでは結論が出るまでに時間がかかるため、変える場所の大きさも考えて選ぶとよいでしょう。