アプリストアのページをA/Bテストする7つの方法

App Store の製品詳細ページのグラフィック要素を変更するだけで、アプリのコンバージョン率を66% 向上できると誰かが言ったら、おそらくためらうことなくそれを実行するでしょう。

残念ながら、そのような専門家は存在しませんが、この例は単に説明するためのものです。A /B テストは、市場でのアプリケーションのパフォーマンスにとって非常に重要です。コンバージョン率が1% 増加するごとに、収益も 1% 増加します。これが現実だ！

この時点で、次の質問が考えられます。「私たちは長年 A/B テストについて話してきましたが、特定のテスト プロセスはあるのでしょうか?」

本日の記事では、A/Bテストの方法について詳しく説明します。これを読めば、A/Bテストをやらない言い訳はなくなるでしょう！準備はできたか？ドライブ！

Google Play には独自の A/B テスト機能があります。このプラットフォームで製品をリリースする場合、A/B テストを実行するのに非常に便利です。しかし、アプリが iOS プラットフォームでリリースされる場合は、さらに面倒になります。

どのようなコンテンツをテストする必要がありますか?

この質問に対する答えは、さまざまな状況によって異なります。要約すると、 App Store の製品詳細ページを観察するときに、最も見落とされやすいコンテンツは、最もテストが必要なコンテンツです。アイコンが精巧でユニークなデザインで、それに比べてスクリーンショットが地味でつまらない場合は、まずスクリーンショットから始めて、同じように目を引く効果のあるスクリーンショットに変更し、どちらがより効果的かを確認します。

StoreMaven のデータによると、動画、スクリーンショット、アイコンがコンバージョン率に最も影響を与える要素です。 StoreMaven はさまざまな要因の影響分析を行いました。下の図を参照してください。

コンバージョン率はどこで確認できますか?

アプリがGoogle Play で公開されている場合は、[獲得レポート] タブでオーガニック ダウンロードのコンバージョン データを表示できます。 Google Play ではベンチマーク データを表示できるため、類似アプリと比較してアプリのパフォーマンスを確認できます。

ご覧のとおり、アプリのコンバージョンがカテゴリの平均を下回っている場合、達成する必要があるダウンロード数を Google が通知します。

iOS ストアのコンバージョン率を表示するには、「分析」ページを開いて「コンバージョン率」をタップします。 このオプションを選択すると、グラフに各日のコンバージョン率が表示されます。

iOS ダッシュボードでオーガニックユーザーのデータのみを表示する場合は、次のように「App Store の閲覧」または「App Store の検索」のフィルターを設定します。

1. 視覚的観察

この方法は A/B テストとはほとんど言えませんが、どのクリエイティブのパフォーマンスが優れているかを理解するのに役立ちます。コンバージョンの大幅な増加を期待している場合は、このアプローチに頼らないことをお勧めします。

アドバンテージ

• 無料
• 始めるのは簡単です。新しいクリエイティブをアップロードして数週間待って、前後のコンバージョン率を比較するだけです。

欠点

• 効果は正確ではなく、リバウンドは深刻です
• テストを行わなくても、コンバージョン率は 1 か月あたり最大 50% 変動する可能性があり、テストの想定が誤っている可能性があります。

発売前のテストなし

このテスト方法を使用するには、製品をリリースしておく必要があります。すでに安定している製品に適しています。

長いテストサイクル

目立った結果を得るには、少なくとも 2 ～ 3 週間、長くても 1 ～ 2 か月など、十分な時間をかけてデータを収集する必要があります。

このアプローチはどのような状況に適していますか?

• アプリはiOSプラットフォームでのみリリースされています
• 有料広告の予算がない
• テストを実行するためのウェブサイトのログインページはありません
• 新しい変更によりコンバージョンが増加すると100%確信している

2. Google PlayでのA/Bテスト

アプリが Google Play に公開されている場合は、この方法を使用できます。

Google Backend では、アイコン、説明、フィーチャー グラフィック、スクリーンショット、プロモーション ビデオなどに対して A/B テストを実行できます。

Google Test の設定は簡単です。 Google Play ダッシュボードを開き、ここをクリックしてください。

テストには 2 種類あります。

グローバル スコープ: グローバル テストでは、テスト マテリアルが世界中のすべてのユーザーに表示されます。テキストを含まず、言語の壁による理解の問題が発生しない要素 (アイコンなど) に適しています。

ローカル テスト: ターゲット言語のユーザーにのみローカライズされたテストを表示します。テキストを含む要素（タイトルなど）をテストするのに適しており、テスト対象集団の精度が向上します。

テストを設定して実行すると、次のようになります。

テストが始まったら、あとは待つだけです。テストの信頼度が 90% に達するとテストは終了し、データが使用可能になります。参考までに、ストア リストで A/B テストを実行する方法については、Google のドキュメントをご覧ください。

https://support.google.com/googleplay/android-developer/answer/6227309?hl=ja

アドバンテージ

• 無料
• データは正確です。 Google の公式データの信頼性は依然として非常に高いです。もちろん、統計的有意性と「90% 信頼区間」では、ある程度の誤差が許容されます。
• 操作が簡単です。テストに必要なコンテンツを送信するだけです。

欠点

• Google Play でのみ利用可能です。 Appleが独自のA/Bテストツールをリリースしてくれることを期待したいが、今のところそれは単なる夢だ。
• Google Play ストアと iOS ストアの両方にアプリがある場合は、Google Play ストアのストア一覧を使用してテストし、最良の結果を iOS ストアに適用できます。

発売前のテストなし

まずアプリを公開し、その後テストする必要があります。

どのような状況に適していますか?

アプリがGoogle Playに公開されました

3. サードパーティのテストソフトウェア

予算に余裕がある場合は、SplitMetrics、Storemaven、Test Nest などのサードパーティのテスト サービスを使用して、アプリ ストアのページを A/B テスト用にシミュレートすることをお勧めします。私たちの経験によれば、彼らが提供する分析レポートは比較的プロフェッショナルです。

テスト キャンペーンを作成し、変数を設定して、効果を観察するだけです。

たとえば、それぞれ異なるアイコンを持つ 2 つのモック アプリ ページを作成できます。 Facebook 広告やその他のトラフィックソースを通じて、どの広告が最もコンバージョン率が高いかを確認します。ユーザーがシミュレートされたアプリケーション ページで [インストール] をクリックすると、製品のログイン ページに移動します。ユーザーが興味を持っている場合は、ここで登録してアカウント情報を残します。

以下は、Illusion Labs が 3 つの異なるアイコンのパフォーマンスをテストした実験です。

ご覧のとおり、最初のバージョンのアイコンが最もコンバージョン率が高く、最終的にそれが採用されました。

アドバンテージ

• リリース前のテストを行うことができます。アプリが正式にリリースされる前にいくつかの要素をテストすることができます
• 一度に多くの変数をテストできる
• ユーザーの行動を追跡するために、AppsFlyer のようなアトリビューション リンクをサポートします。例えば、ダウンロード後のユーザーの購入行動など。

たとえば、バリエーション A のコンバージョン率はバリエーション B より 10% 高いかもしれませんが、AppsFlyer のデータによると、バリエーション B を見たユーザーはバリエーション A より 20% 多く支出しています。どの変数を選択しますか?もちろん変数Bです！

欠点

• 安くはありません。テストを実行するために必要なソフトウェアは月額 149 ドルから始まります (TestNest)
• テストプロセス中にユーザーが失われることがあります。ユーザーがシミュレートされたアプリページで「インストール」をクリックすると、実際のアプリのダウンロードインターフェースに直接リダイレクトされず、2回以上のクリックとジャンプが必要になりました。このプロセスでは、一部のユーザーが失われます。

このアプローチはどのような状況に適していますか?

• iOSプラットフォーム向けの多くのアプリケーション
• リリース前のA/Bテスト
• テスト予算を持ち、同時に有料広告キャンペーンを実施する

4. 有料クリエイティブテスト

有料広告とは、Facebook 広告やその他の広告提携によって提供されるプロモーションサービスを指します。広告を掲載する必要がある場合は、広告クリエイティブを A/B テストする必要があります。

動作モードでは、複数のクリエイティブ セットを同時に実行し、Facebook 広告を使用してクリエイティブを直接テストします。次のようになります:

Facebook 以外の広告ネットワークでも、広告内のアイコン、説明、スクリーンショットをテストできます。

たとえば、Chartboost を使用している場合は、以下をテストできます。

Chartboost からの追加リンクをいくつか紹介します。ソーシャルメタデータを使用してモバイル広告のコンバージョンを最大 15% 向上させます。

アドバンテージ

• サードパーティのテストソフトウェアよりも安価
• リリース前のテストをサポート
• 複数の変数を一度にテストできます。

欠点

• 結果は偏ったものになります。この方法は最適な変換方法を理解するのに役立ちますが、データは依然として専門的なテスト ソフトウェアほど正確ではありません。これは、広告の表示効果がアプリストアのページと異なり、ユーザーが見るコンテンツも異なるためです。

このアプローチはどのような状況に適していますか?

• iOSプラットフォーム向けの多くのアプリケーション
• リリース前のテストが必要なアプリ
• 広告予算のあるアプリ

5. ランディングページでのA/Bテスト

アプリに別のログイン ページがある場合は、これを使用してさまざまなグラフィカル要素をテストすることもできます。

Optimizely や Google Optimize などのサービスを使用して、アイコン、スクリーンショット、説明、タイトル、さらには価格をランディング ページで直接テストできます。たとえば、次の図:

アドバンテージ

• リリース前のテストをサポート
• すでに Web サイトが稼働している場合は、A/B テスト ツールをインストールしてテストを実行するだけです。

欠点

• ウェブサイト上のコンテキストは実際のアプリストアのページとは異なるため、結果が歪む可能性があります。
• 費用がかかり、時間がかかります。少なくとも、使いやすいランディング ページが存在し、Web サイトのトラフィックが大量に発生している必要があります。

このアプローチはどのような状況に適用できますか?

• iOSプラットフォーム向けの多くのアプリケーション
• リリース前のA/Bテストが必要
• ランディングページを用意し、A/Bテストを実行するのに十分なトラフィックを確保します。

6. アプリケーション壁テスト

ブランドの下に複数のアプリがある場合は、別のアプリに App Wall を設定して、さまざまなアプリを相互にプロモーションすることができます。ちなみに、ここでテストを行うこともできます。

アドバンテージ

• 無料。アプリ ウォールを設定すると、現在のすべてのユーザーが無料で A/B テストを実行できるようになります。

欠点

• 実際のアプリストアのページとは環境が異なるため、結果が歪んでいる可能性があります
• ユーザー数に応じて、テスト サイクルが延長されます。

このアプローチはどのような状況に適用できますか?

少なくとも1つの類似アプリがあり、かなりの数のユーザーがいる必要があります。

7.ソーシャルメディア投票テスト

Facebook グループやサブレディットなどの場所でテスト投票を実行したり、友人や家族に変数を見せたりすることもできます。例えば：

投票を開始できるプラットフォームをいくつか紹介します。

• Facebook – アプリ起業家とマーケティンググループ
• Reddit – フィードバックリクエストの例
• Pickfu（有料） - 変数の比較結果を提供します。たった20ドルで50票獲得

アドバンテージ

• 安価で操作も簡単。アンケートをグループに送信するだけです。投票にお金を払ったとしても、非常に費用対効果の高い投票結果が得られます
• 有権者からのフィードバックを得る

欠点

• 精度は高くありません。多くの場合、最も美しいアイコンや目を引くアイコンが選択されますが、それが必ずしも最も高いコンバージョン率をもたらすアイコンであるとは限りません。

このアプローチはどのような状況に適していますか?

• iOSプラットフォーム向けの多くのアプリケーション
• ユーザーからのフィードバックを収集する必要がある

結論は

現在、製品がどのプラットフォームでリリースされるかに関係なく、A/B テストを行わない理由はありません。

最後のヒントは、正しい方向に進んでいるかどうかを確認するために、定性的な方法（投票など）でテストを開始することをおすすめします。

アプリがまだリリースされていない場合は、アイコンやスクリーンショットにどのバージョンを使用すればよいか迷うでしょう。みんなの選択が何なのか、テストしてみましょう。