測定、測定、そしてさらに測定。マーケターにとって、データの測定は各キャンペーンにとって重要です。データをテストすることで、何が効果的で、何が効果的でないのか、何を微調整すれば効果的なのかを知ることができます。
A/Bテストは、マーケティングキャンペーンには欠かせません。しかし、スプリットテストで得られた結果が統計的に有意であるかどうかは、どうすればわかるのでしょうか？最後に統計学の授業を受けてからしばらく経っている方は思い出してみてください。統計的有意性とは、結果が特定の要因によって生じたものなのか、それとも単なる偶然の産物なのかを判断するものです。
その一つの方法は、2つのマーケティングキャンペーンの結果の違いを示す統計的有意性計算機を使うことです。
統計的有意性計算機とは？
統計的有意性計算機は、マーケティングキャンペーンへの変更が結果に統計的に有意な差をもたらしたかどうかを判断するのに役立つように設計された、シンプルまたは複雑なツールです。その差は正の場合も負の場合もあります。
例えば、2つのバージョンを作成したとしましょう。 ランディングページ あなたのサービスの一つです。ページAとページBは、更新された以外は同じです。 コールトゥアクション Aページには2000人の訪問者と90人のコンバージョンがあり、Bページには1500人の訪問者と120人のコンバージョンがありました。
この情報を電卓に入力すると、ページAのコンバージョン率が5％であるのに対し、ページBのコンバージョン率は8％であり、ページBの方が78％も優れていることがわかります。電卓は、この結果に基づいて、ページBがページAよりもパフォーマンスが良いことを100％確信できると記しています。
の2つの異なるバージョンで同じ分析を行うことができます。 ソーシャルメディア広告また、ブログ記事のタイトルの異なる2つのバージョンなど、マーケティングキャンペーンのあらゆる要素を組み合わせて、完全に最適化されたキャンペーンを実現しています。もし、あなたが Googleアナリティクスができます。 A/Bテストの実施 のプラットフォームでは、2つ以上のバリエーションのWebページを比較・分析して ウェブサイトの最適化.
統計的有意性計算機の使い方
統計的有意性の計算方法はそれぞれ少しずつ異なりますが、ほとんどの場合は比較的簡単です。A/Bテストの統計的有意性を計算するには、有料広告やランディングページのように、テスト対象の2つのバージョンで異なる1つの指標に注目する必要があります。
上記のランディングページの例では、ページAとページBのどちらのコールトゥアクションがより良いコンバージョンを獲得しているかを判断しようとしています。このテストを正確に行うために、他の指標はすべて同じにします。
また、各バージョンで同じサンプルサイズまたは期間を使用しているかどうかを確認する必要があります。例えば、正確なサンプルを得るために、各ページのデータを同じ1週間の期間で測定するといった具合です。
最高の統計的有意性計算機
統計的有意性を自分で計算することもできますが、電卓を使った方がはるかに早くて簡単です。幸いなことに、オンラインでは、数秒で結果を表示できる無料の計算機がいくつかあります。
最もシンプルな電卓です。 ニール・パテルのA/Bテスト有意性計算機
シンプルさを優先するのであれば、ニール・パテルの電卓は優れた選択肢です。2つのバージョン間でデータを比較したり、電卓のバリエーションを増やすことができます。この電卓は、ページトラフィックと全体のコンバージョンを尋ねて、結果のパーセンテージと信頼度を示します。
初心者に最適です。 Convertize社のA/Bテスト有意性計算機
Convertize社のこの計算機は、たくさんの追加指標を必要とせず、基本的なことだけに集中したい場合に使用できるシンプルなものです。ニール・パテル氏の計算機と似ていますが、信頼度を追加することで、90％から99％の間の異なる信頼度に基づいて、結果がどの程度統計的に有意であるかを示すことができます。
一番わかりやすい電卓。 Act-On Softwareの統計的有意性計算機
アクトオンの統計的有意性計算機は、「たまたまの可能性が高い」（赤）、「大まかな感覚で良い」（黄）、「これは確実だ」（緑）という信号機を思わせる色で、結果の信頼度をわかりやすく表示します。結果の算出には、カイ二乗統計学的仮説検定を使用しています。
収益への影響を計算するのに最適です。 BlastのRevenue per Visitor Statistical Significance Calculator
変更による訪問者一人当たりの収益への影響に注目している場合は、ブラスト社のこの計算機が役立ちます。データを含むCSVファイルをアップロードすることで、計算結果を共有することができます。アップロードする前に、まずサンプルデータセットをダウンロードして遊んでみて、データの見え方のイメージをつかむことをお勧めします。
ベストビジュアルズ ベイズ型A/Bテスト計算機
Bayesian A/B Testing Calculatorは、テキストよりもグラフの方が理解しやすい視覚学習者のために、他の製品よりも優れた製品です。使いやすい計算機にデータを入力すると、コンバージョン率、予想損失、最適なバリエーションの確率などのグラフが表示されます。
最高のExcelベースの電卓。 HubSpotの完全なA/Bテストキット
HubSpotでは、電子メールアドレスを入力してサインアップすると、無料のA/Bテストキットを提供しています。このキットには、Microsoft Excelを使った統計的有意性計算機が含まれています。データを入力すると、リアルタイムで結果が変化するのがわかります。
統計的有意性計算機は、A/Bテストの結果が正しいことをどれだけ確信できるかを判断するのに役立ちます。自分に合った計算機をマーケティング戦略全体に織り込んで、結果を微調整するのに役立ててください。
ウェブサイトのパフォーマンスをより良く把握したいですか？私たちの Googleアナリティクス ダッシュボード WordPressプラグイン WordPressのダッシュボードにいながらにして、訪問者の傾向、最も閲覧された10ページ、上位5つのトラフィックソースなど、ウェブサイトのパフォーマンスに関する貴重なデータを取得できるプラグインです。
