目的は明確ですか?
まず、A/Bテストを行う際は、目的と仮説を明確にすることが大切です。検証項目をしっかりと設定した上で、テスト対象を1つの要素に絞り、無駄な混乱を避けます。
期間は統一ですか?
また、A/Bテストは必ず同じ期間内で同時に実施する必要があります。異なる期間で行ってしまうと、テスト以外の環境要因が影響し、正確な検証が困難になるためです。
仮説の幅広げる工夫は?
キャンペーンメールの場合も、基本として要素を一つに絞り、同一期間での同時実施を心がけています。しかし、仮説を明確にするのが難しく、有意差が出にくい状況もあるため、フレームワークを活用して仮説の幅を広げる工夫を行っています。
最適仮説は何ですか?
その上で、自分が実施したいキャンペーンにおいては、コンバージョン獲得のため検証すべき仮説を、フレームワークを用いて整理し書き出します。そして、どの仮説が最も効果的なのかを考慮しながらキャンペーンを実行し、結果をもとに検証と改善のサイクルを繰り返すことで成果を追求しています。