PageFlyでA/Bテストページを作成する方法

概要

このガイドでは、PageFlyを使用してA/Bテストを設定、実行、分析し、Shopifyストアのパフォーマンスを最適化する完全なプロセスを概説します。

要件

• 公開済みテーマ: 選択したShopifyテーマは公開されている必要があります。未公開のテーマでは、PageFlyページがA/Bテストで正しく表示されません。公開することで表示を確保してください。

• 明確な目標: テストを開始する前に、何をテストしたいか、どのメトリックが最も重要か（コンバージョン率、カート追加率など）を定義してください。

重要事項: A/Bテストは、Pay-as-you-go料金モデル（スロットプラン）でのみご利用いただけます。

PageFly A/Bテストとは？

PageFly A/Bテストは、お客様が同じページの2つのバージョンを作成し、異なる訪問者にそれぞれのバージョンを表示し、コンバージョン率などの選択したメトリックに基づいてどちらのバージョンがより高いパフォーマンスを示すかを測定できる機能です。これは、実際のユーザー行動で代替案を直接比較することにより、ウェブページデザインに関するデータに基づいた意思決定を行うためのツールです。

PageFly A/Bテストの運用フローは次のとおりです。

• PageFlyは現在のページ（Control）をVariantバージョンとして複製します

• 必要に応じてVariantバージョンのデザイン変更を行います

• ControlとVariantの間でパフォーマンスを比較するテストを実行します

• テスト結果または主要なメトリックに基づいて、より成果の高いバージョンを公開します

PageFlyでA/Bテストを作成する方法

効果的なA/Bテストを設定および実行するには、以下の手順に従ってください。

ステップ1：A/Bテストを作成する

主な方法は2つあります。

オプションA：A/Bテストリストから

1. A/Bテストリストに移動します（CRO Center > Manage A/B testing）

2. 「Create A/B test」をクリックします

3. モーダルでページを選択します 注: • パスワード保護されたページはA/Bテストに使用できません • 既にアクティブなA/Bテストがあるページは選択できません

4. ページはエディターで開き、A/Bテストドロワーが表示され、テストが既に作成されています

   

オプションB：エディターのA/Bテストドロワーから

1. PageFlyエディターでページを開きます

2. サイドメニューのA/Bテストボタンをクリックします

3. A/Bテストドロワーが開きます

4. 「Create」をクリックしてA/Bテストを作成します

   

ステップ2：テスト設定を構成する

テスト設定ドロワーで、以下の設定を構成します。

テスト情報

テストタイトル: テストのわかりやすい名前を入力します

テストの可視性

• 「Active」を選択します - このオプションを選択して公開すると、ページ（Control）とテスト（Variant）の両方が一緒に公開されます

  • Activeを選択すると、テストを将来の日付にスケジュールすることもできます

    • Activeを選択すると、公開ボタンは「Publish and start test」または「Publish and schedule test」に変わります

• 「Inactive」を選択します - このオプションを選択して公開すると、ページ（Control）のみがテスト（Variant）なしで公開されます

  • Inactiveを選択すると、公開ボタンは単に「Publish」と表示されます

    • この場合、Controlバージョンのみが公開されます

• 勝者が検出されたらテストを一時停止する: テストを自動的に一時停止するためのオプション設定です

  • 有効にすると、いずれかのバージョンが希望する勝率に達した場合にテストは自動的に一時停止されます - 無効にすると、手動で一時停止するまでテストは実行され続けます

  

トラフィックの割り当て

テスト対象のページトラフィック: テストの一部となる訪問者の割合を割り当てます

• スライダーを使用して、全ページ訪問者のうちテストに参加する割合を決定します

• 100%のトラフィックでテストすることも、希望に応じてより小さい割合でテストすることもできます

ページバージョン:

• Control: 元のページバージョン（「A」とマークされています）

  • Controlバージョンのトラフィックスプリット率を設定します

• Variant: 変更されたページバージョン（「B」とマークされています）

  • Variantバージョンのトラフィックスプリット率を設定します

• 標準的なA/Bテストと最速のサンプル収集のためには、ControlとVariantの間で50/50のスプリットが推奨されます

テスト値

• 目標メトリック: 成功を判断するために測定したい主要なメトリックを選択します

  • オプションには、カート追加率、商品表示率、およびPageFlyイベントのコンバージョン率が含まれます

    • システムはこのメトリックを追跡し、どちらのバージョンがより高いパフォーマンスを示すかを判断します

• 希望する勝率: 勝者を宣言するために必要な統計的な信頼レベルを設定します

  • 推奨設定は95%であり、これは結果が偶然によるものではない確率が95%であることを意味します - より高いパーセンテージはより高い統計的信頼性を提供しますが、より多くのデータと時間を必要とします

  

ステップ3：Variantをデザインする

テスト設定を構成したら、以下を行います。

1. ブレッドクラムのバージョンセレクターを使用して、ControlバージョンとVariantバージョンの間で切り替えます

2. Variantバージョンに必要なデザイン変更を行います

ステップ4：テストを実行する

可視性設定に応じて、異なる公開オプションが表示されます。

Activeテストの場合:

• 「Publish and start test」をクリックします

• 確認して両方のバージョンを公開し、データの収集を開始します

Scheduledテストの場合:

• 「Publish and schedule test」をクリックします

• 両方のバージョンが公開されますが、テストはスケジュールされた時間に開始されます

Inactiveテストの場合:

• 「Publish」をクリックします

• Controlバージョンのみが公開されます

ステップ5：テストの進捗を監視する

テストが実行されたら、そのステータスを監視できます。

Live: テストがアクティブで、両方のバージョンが公開されています

• 両方のバージョンが公開され、トラフィックスプリットに基づいて訪問者に表示されます

• 十分なデータが収集されるまでは、「Gathering data...」と表示されます

• 結論が出ると、勝者のバージョンが表示されますが、アクションを起こすまでテストはLiveのままです

Paused: テストが一時的にデータの収集を停止しています

• Variantバージョンは一時停止時に非公開になります

• ここから、テストを続行したり、リセットしたり、新しいテストを作成したりできます

ステップ6：テストを分析して完了する

テストで十分なデータが収集されると、以下のいずれかの結果が表示されます。

Variantの勝利: Variantが指定された信頼レベルでControlを上回っています

• 「Variant is the winner, outperforming Control by x%(±y%)」と表示されます

Variantの敗北: ControlがVariantよりも高いパフォーマンスを示しています

• 「Variant underperforms compared to Control by x%(±y%)」と表示されます

結論が出ない: どちらのバージョンもパフォーマンスに有意な差を示さない場合。これは3つのメッセージのいずれかで示されます。

• 「Variant isn't showing significant difference in performance」

• 「Variant is underperforming compared to Control by x% (±y%)」

• 「Variant is likely outperforming Control by x% but not yet a winner.

データ不足: さらに時間と訪問者が必要です

• 「Gathering data...」と表示され、最小要件が表示されます

ステップ7：結果に基づいてアクションを起こす

テストが一時停止している場合、主に3つのオプションがあります。

バージョンを公開する:

• ControlまたはVariantのいずれかを最終デザインとして選択します

• 選択したバージョンが公開され、もう一方のバージョンは削除されるか、新しいページとして保存されます

• テストはCompleteとしてマークされます

テストをリセットする:

• すべての設定を維持して、テストをDraftステータスに戻します

• 以前に収集されたすべてのデータは削除されます

新しいテストを作成する:

• 新しいテストを開始します。Controlバージョンがデフォルトで公開され、Variantバージョンは削除されるか、新しいページとして保存されます

• 現在のテストはCompleteとしてマークされます

A/Bテスト分析の表示

PageFlyは、A/Bテスト専用の分析を提供します。

1. PageFly AnalyticsからA/Bテスト分析にアクセスします

2. Live、Paused、Scheduled、Completeなど、すべてのテストをステータスとともに表示します

3. 特定のテストをクリックして、詳細な結果を表示します。これには以下が含まれます。

• テストの結論と勝率

• テスト構成情報

• 両バージョンのメトリック統計

• パフォーマンスを比較する視覚的なチャート

ライブ表示に関する重要事項

ストアオーナー様へ:

• ControlまたはVariantを選択し、エディターで「View live」をクリックすることで各バージョンを表示できます

• この方法で表示する場合、URLには「pf_prevent_redirecting」パラメーターが含まれます

• このプレビューモードで行われたアクションは、テスト結果には影響しません

• これらのURLはテストメカニズムをバイパスするため、マーケティングキャンペーンで使用しないでください

お客様へ:

• 単一のデバイスまたはブラウザセッションでは、ユーザーはControlまたはVariantバージョンのいずれかのみが表示されます

• 割り当てはトラフィックスプリット設定に基づいたランダムです

• Cookieがクリアされた場合、ランダムな割り当てが再度行われます

• データイベントは両方のURLから分析に送信されます

ユースケース

• 商品ページ最適化: レイアウト、コピー、コールトゥアクションボタンなどをテストして、カート追加率を向上させます。

• ランディングページコンバージョン: 異なるヒーローセクション、メッセージング、またはオファーを比較して、どちらがより多くのリードまたは売上を生み出すかを確認します。

• ナビゲーション改善: ページ構成のバリエーションをテストして、ユーザーフローを改善し、離脱率を減らします。

よくある質問

1. A/Bテストはどのくらいの期間実施すべきですか？

結論を出すには、テストは少なくとも7日間実行され、各バージョンあたり最低500人の訪問者と10回のコンバージョンが必要です。ただし、より信頼性の高い結果を得るには、2〜4週間のテスト期間が推奨されます。最も重要なのは十分なトラフィックを得ることです。テストが受けるトラフィックが多いほど、結果の統計的有意性は高くなります。固定された期間に厳密に従うのではなく、訪問者数を最大化することに焦点を当ててください。

2. 適切な勝率のパーセンテージはどのくらいですか？

95%は業界標準であり、結果が偶然によるものではないという強い統計的信頼性を提供します。

3. 一度に2つ以上のバージョンをテストできますか？

現在、PageFly A/Bテストは、1つのControlに対して1つのVariantバージョンを比較することをサポートしています。