Playcode School / 何を測るか
訪問ではなく、作業の完了を測る。

ページビューや登録数で分かるのは、人が来たということです。来た目的を果たせた人がいるかどうかは、分かりません。
まずは3つのイベントから始めましょう。作業の完了、再利用、支払いです。それぞれについて、誰を数えるのか、どの期間で数えるのかを書き出してください。
作業が終わった瞬間を数える。
プロダクトの目的である作業をひとつ挙げ、それが終わる瞬間を決めましょう。その瞬間が、最初のイベントです。訪問は、数えるのは簡単でも、読み解くのが難しい数字です。ページビューが増えたのは、機能が気に入られたからかもしれませんし、その中で迷っているからかもしれません。
Kerry Rodden、Hilary Hutchinson、Xin Fuは、論文「Measuring the User Experience on a Large Scale」(2010年)でこの点を指摘しています。考え方は、ゴールからシグナルへ、シグナルから指標へと進むものです。ゴールは作業、シグナルはその作業が終わる瞬間、指標はその瞬間を数えたものです。
例:ゴールは、リクルーターが採用担当者に送れる、確認済みの要約です。シグナルは、リクルーターがそれを保存することです。指標は、新規アカウントのうち、最初の1週間で要約を保存した割合です。
3つのイベントを追う。
作業を1回終えただけなら、好奇心かもしれません。また戻ってくることと、お金を払うことのほうが、多くを語ります。どの数字を見るよりも前に、3つのイベントをすべて決めておきましょう。
- 作業の完了
- やるべきことが終わった瞬間。例:リクルーターが確認済みの要約を保存する。
- 再利用
- 別の日に、同じ作業をもう一度すること。例:最初の要約から1か月以内に、2件目の要約を保存する。
- 支払い
- 実際に完了した支払いから、返金を差し引いたもの。料金ページのクリックが示すのは関心で、支払いではありません。例:要約を保存したことのあるアカウントで、最初の支払いが完了する。
誰を、いつまで数えるかを決める。
イベントごとに、誰を数えるのか、どの期間で数えるのかを書き出しましょう。たとえば、ある1週間に作られたアカウントと、最初の作業から1か月以内の再利用です。毎回同じグループと期間で数えれば、ある週と次の週を公平に比べられます。
記録するのは、何かが起きたという事実で、人が書いた内容ではありません。イベントが伝えるのは要約が保存されたことだけで、要約そのものはお客様のものです。
イベント計画を書く。
ご自身のプロダクトで書くことも、下の例を書き換えることもできます。回答は、プロジェクトを始めると決めるまで、このブラウザの中にだけ保存されます。計画はコピーもダウンロードもでき、そこからPlaycodeのプロジェクトを始めることもできます。
これは編集できる記入例で、実在するプロダクトのデータではありません。イベント計画は記録するものを決めるだけで、アクセス解析やプライバシーポリシーを用意してくれるものではありません。
数字に驚いたら、理由を聞く。
イベントで分かるのは、人がどこで止まるかです。なぜ止まるのかは分かりません。誰かが作業を試す様子を見るか、最後に試したときのことを聞いてみましょう。