あるオンラインサービスでは, 新たに作成したデザインと従来のデザインの Web サイトを実験的に並行稼働し, どちらの Web サイトの利用者がより有料サービスの申込みに至りやすいかを比較, 検証した。このとき用いた手法として, 最も適切なものはどれか。
令和4年度 ITパスポート試験 問34
ストラテジ系経営戦略マネジメント › マーケティング
この問題の解説と、これまでの解答の記録です。
問34
頻出度★★★
解説
問 34
- ア
正解 ア「A/Bテスト」が正解。A/Bテストとは、新デザイン (A 案) と従来デザイン (B 案) のように 2 つ以上の案を同時に並行稼働させ、利用者を各案に振り分けて、成果指標 (ここでは有料サービスの申込み率=コンバージョン率) がどちらで高いかを実データで比較・検証する手法。設問の「新旧デザインを実験的に並行稼働し、どちらの利用者がより申込みに至りやすいかを比較・検証した」という記述は、この A/Bテストの定義に完全に一致する。Web サイトやアプリの改善で、感覚ではなく実測データに基づいて優れた案を選ぶために使われる。
不正解イ
「ABC 分析」は、在庫品目や商品・顧客などを売上や金額の大きい順に並べ、累計構成比で A・B・C の 3 グループに分類し、重要度の高い A グループを重点管理する手法 (パレート分析の応用)。重点管理の対象を絞り込む分析であり、2 つのデザイン案を並行稼働して優劣を比較する手法ではない。
不正解ウ
「クラスタ分析」は、多数のデータを類似性の高いもの同士でいくつかのグループ (クラスタ) に自動的にまとめる多変量解析の手法。顧客のセグメント分けなどに使うが、あらかじめ用意した 2 案の成果を比較・検証するものではない。
不正解エ
「リグレッションテスト (回帰テスト)」は、ソフトウェアの修正・変更後に、既存の機能が以前どおり正しく動くか、思わぬ不具合 (デグレード) が生じていないかを確認するテスト。ソフトウェア品質を保つための検証であって、デザイン案の優劣を利用者の反応で比較するものではない。
ここがポイント
- A/Bテスト: 2 つ以上の案を同時に並行稼働させ、利用者をランダムに振り分けて、コンバージョン率などの成果指標を実データで比較し、優れた案を選ぶ検証手法。
- 紛らわしい語との区別: ABC 分析=重点管理のための分類、クラスタ分析=類似データのグループ化、リグレッションテスト=変更後の不具合確認、と目的が異なる。
用語