metrics-tracking

メトリクス追跡スキル

あなたは、プロダクトメトリクスの定義、追跡、分析、活用に精通しています。プロダクトマネージャーがメトリクスフレームワークを構築し、目標を設定し、レビューを実施し、意思決定につながるダッシュボードを設計するのを支援します。

プロダクトメトリクスの階層

ノーススターメトリクス

プロダクトがユーザーにもたらす中核的な価値を最もよく表す、単一のメトリクスです。次の条件を満たす必要があります。

• 価値との整合性：ユーザーがプロダクトからより多くの価値を得ると、数値が変化します
• 先行指標であること：長期的なビジネスの成功（収益、維持率）を予測します
• 実行可能性：プロダクトチームが取り組みを通じて数値に影響を与えられます
• 理解しやすさ：社内の誰もが、その意味と重要性を理解できます

プロダクトタイプ別の例：

• コラボレーションツール：3 人以上が貢献している週間アクティブチーム数
• マーケットプレイス：週間完了取引数
• SaaS プラットフォーム：中核的なワークフローを完了した週間アクティブユーザー数
• コンテンツプラットフォーム：週間のエンゲージメント対象となった読書・視聴時間
• 開発者向けツール：そのツールを使った週間デプロイ数

L1 メトリクス（健全性指標）

プロダクトの健全性を包括的に示す、5〜7 個のメトリクスです。これらはユーザーライフサイクルの主要な段階に対応します。

獲得：新規ユーザーはプロダクトを見つけていますか？

• 新規登録数またはトライアル開始数（件数と推移）
• 登録コンバージョン率（訪問者から登録者への転換率）
• チャネル構成（新規ユーザーはどこから来ているか）
• 顧客獲得単価（有料チャネルの場合）

アクティベーション：新規ユーザーは価値を実感する瞬間に到達していますか？

• アクティベーション率：維持率を予測する重要なアクションを完了した新規ユーザーの割合
• アクティベーションまでの時間：登録からアクティベーションまでの所要時間
• セットアップ完了率：オンボーディングのステップを完了したユーザーの割合
• 初回の価値実感：ユーザーが初めてプロダクトの中核的な価値を体験するタイミング

エンゲージメント：アクティブユーザーは価値を得ていますか？

• DAU／WAU／MAU：各期間におけるアクティブユーザー数
• DAU／MAU 比率（定着度）：月間ユーザーのうち毎日戻ってくるユーザーの割合
• 中核アクションの頻度：最も重要なアクションをユーザーが実行する頻度
• セッションの深さ：ユーザーが 1 回のセッションで行う操作の量
• 機能の利用率：主要機能を利用しているユーザーの割合

維持：ユーザーは戻ってきていますか？

• D1、D7、D30 維持率：1 日後、7 日後、30 日後に戻ってきたユーザーの割合
• コホート維持曲線：登録コホートごとの維持率の推移
• 解約率：期間ごとに失われたユーザー数または収益の割合
• 復帰率：解約したユーザーのうち戻ってきたユーザーの割合

収益化：価値は収益につながっていますか？

• コンバージョン率：無料から有料への転換率（フリーミアムの場合）
• MRR／ARR：月間または年間の経常収益
• ARPU／ARPA：ユーザーまたはアカウントあたりの平均収益
• 拡張収益：既存顧客からの収益増加
• 純収益維持率：拡張と縮小を含めた収益維持率

満足度：ユーザーはプロダクトをどう感じていますか？

• NPS：ネットプロモータースコア
• CSAT：顧客満足度スコア
• サポートチケット数と解決時間
• アプリストアの評価とレビューの傾向

L2 メトリクス（診断指標）

L1 メトリクスの変化を調査するために使う詳細なメトリクスです。

• ファネルの各ステップにおけるコンバージョン率
• 機能レベルの利用状況と利用率
• セグメント別の内訳（プラン、企業規模、地域、ユーザーの役割別）
• パフォーマンス指標（ページ読み込み時間、エラー率、API レイテンシ）
• コンテンツ別のエンゲージメント（エンゲージメントを促す機能、ページ、コンテンツタイプ）

一般的なプロダクトメトリクス

DAU / WAU / MAU

測定対象：1 日、1 週間、または 1 か月の間に、対象となるアクションを実行したユニークユーザー数です。

主な検討事項：

• 何を「アクティブ」と見なしますか？ ログインですか？ ページビューですか？ 主要なアクションですか？ 慎重に定義してください。定義によって、見えてくる状況は異なります。
• どの期間が最も重要ですか？ メッセージングやメールなど、毎日使う製品には DAU が適しています。プロジェクト管理など、週に 1 度使う製品には WAU が適しています。税務ソフトウェアや旅行予約など、利用頻度が低い製品には MAU が適しています。

活用方法：

• DAU/MAU 比率（定着度）：0.5 を超える値は、毎日利用する習慣があることを示します。0.2 未満の場合は、利用頻度が低いことを示唆します。
• 絶対数よりも推移が重要です。アクティブユーザーは増加していますか、横ばいですか、それとも減少していますか？
• ユーザーの種類ごとにセグメント化します。ヘビーユーザーとライトユーザーでは、行動が大きく異なります。

リテンション

測定対象：期間 X に利用を開始したユーザーのうち、期間 Y にもアクティブなユーザーの割合です。

一般的なリテンションの期間：

• D1（翌日）：最初の利用体験は、また使いたいと思えるものでしたか？
• D7（1 週間後）：ユーザーは習慣を確立しましたか？
• D30（1 か月後）：ユーザーは長期的に定着していますか？
• D90（3 か月後）：ユーザーは継続的に利用していますか？

リテンションの活用方法：

• コホートごとにリテンション曲線を描きます。初期の離脱（アクティベーションの問題）、継続的な減少（エンゲージメントの問題）、または横ばい（良好です。安定した定着ユーザー層が確立されています）に注目します。
• コホートの推移を比較します。新しいコホートは、以前のコホートより定着率が高くなっていますか？ そうであれば、製品の改善が効果を上げています。
• アクティベーション時の行動ごとにリテンションをセグメント化します。オンボーディングを完了したユーザーと、完了しなかったユーザー。機能 X を使ったユーザーと、使わなかったユーザーを比較します。

コンバージョン

測定対象：ある段階から次の段階へ進んだユーザーの割合です。

一般的なコンバージョンファネル：

• 訪問者から登録へ
• 登録からアクティベーションへ（重要な価値を実感する瞬間）
• 無料プランから有料プランへ（トライアルからのコンバージョン）
• トライアルから有料サブスクリプションへ
• 月額プランから年額プランへ

コンバージョンの活用方法：

• ファネル全体を可視化し、各ステップでのコンバージョンを測定します
• 離脱が最も多いポイントを特定します。ここが、改善による効果が最も大きい機会です
• 流入元、プラン、ユーザーの種類ごとにコンバージョンをセグメント化します。セグメントによってコンバージョン率は大きく異なります。
• コンバージョンの推移を追跡します。利用体験を改善するにつれて、コンバージョン率は上がっていますか？

アクティベーション

測定対象：製品の中核的な価値を初めて体験する瞬間に到達した新規ユーザーの割合です。

アクティベーションの定義：

• 定着したユーザーと離脱したユーザーを比較します。定着したユーザーが行い、離脱したユーザーが行わなかったアクションは何ですか？
• アクティベーションイベントは、長期的なリテンションを強く予測できるものである必要があります
• 最初のセッション、または最初の数日以内に達成できるものである必要があります
• 例：最初のプロジェクトを作成した、チームメイトを招待した、最初のワークフローを完了した、インテグレーションに接続した

アクティベーションの活用方法：

• 登録したすべてのコホートについてアクティベーション率を追跡します
• アクティベーションまでの時間を測定します。ほとんどの場合、短いほど良いです
• ユーザーをアクティベーションの瞬間へ導くオンボーディングフローを構築します
• アクティベーションフローを A/B テストし、アクティベーション率だけでなく、リテンションへの影響も測定します

目標設定のフレームワーク

OKR（目標と主要な成果）

目標：達成したいことを示す、定性的で意欲的な目標です。

• 人を鼓舞し、記憶に残るもの
• 期限が定められている（四半期または年次）
• 方向性を示すものであり、特定の指標を定めるものではない

主要な成果：目標を達成したかどうかを示す、定量的な指標です。

• 具体的で測定可能
• 明確な目標値と期限がある
• アウトプットではなく、成果に基づく
• 目標ごとに 2～4 個の主要な成果を設定する

例：

Objective: Make our product indispensable for daily workflows

Key Results:
- Increase DAU/MAU ratio from 0.35 to 0.50
- Increase D30 retention for new users from 40% to 55%
- 3 core workflows with >80% task completion rate

OKR のベストプラクティス

• 野心的でありながら達成可能な OKR を設定します。ストレッチ目標の OKR では、達成率 70% が目標です。
• 主な結果（KR）では、アウトプット（リリースした機能、完了したタスク）ではなく、成果（ユーザーの行動、ビジネスの結果）を測定します。
• OKR を増やしすぎないようにします。各目標に 2～4 件の KR を設定し、目標は 2～3 件で十分です。
• OKR は挑戦的なものであるべきです。すべて達成できると確信しているなら、目標が十分に野心的ではありません。
• 期間の中間時点で OKR を見直します。一部の KR が明らかに計画から遅れている場合は、取り組みの配分を調整します。
• 期間終了時に OKR を正直に評価します。0.0～0.3＝未達、0.4～0.6＝進捗あり、0.7～1.0＝達成。

指標目標の設定

• ベースライン：現在の値はいくつですか？目標を設定する前に、信頼できるベースラインが必要です。
• ベンチマーク：類似製品はどの程度の成果を上げていますか？業界のベンチマークは状況を把握するのに役立ちます。
• 推移：現在の傾向はどうなっていますか？指標がすでに月 5% のペースで改善しているなら、目標 6% では野心的とは言えません。
• 取り組み：どの程度の投資を行いますか？より大きな賭けには、より野心的な目標が適しています。
• 確信度：目標を達成できる確信はどの程度ありますか？「コミット」（確信度が高い目標）と「ストレッチ」（野心的な目標）を設定します。

指標レビューの頻度

毎週の指標チェック

目的：問題をすばやく発見し、実験を監視し、製品の健全性を把握します。 所要時間：15～30 分。 参加者：プロダクトマネージャー、必要に応じてエンジニアリングリード。

確認する項目：

• North Star 指標：現在値、前週比
• 主な L1 指標：注目すべき変動の有無
• 実施中の実験：結果と統計的有意性
• 異常：予期しない急増や急減の有無
• アラート：監視アラートが発生した項目

アクション：異常が見られる場合は調査します。それ以外は記録して次に進みます。

毎月の指標レビュー

目的：傾向や目標に対する進捗、戦略的な影響をより深く分析します。 所要時間：30～60 分。 参加者：プロダクトチーム、主要なステークホルダー。

確認する項目：

• 月ごとの傾向を含む、L1 指標の全体的なスコアカード
• 四半期 OKR 目標に対する進捗
• コホート分析：新しいコホートのパフォーマンスは向上しているか
• 機能の採用状況：最近リリースした機能のパフォーマンスはどうか
• セグメント分析：ユーザーセグメント間に差が生じているか

アクション：調査または投資を行う領域を 1～3 件特定します。指標から新たな情報が得られた場合は、優先順位を更新します。

四半期ビジネスレビュー

目的：製品のパフォーマンスを戦略的に評価し、次の四半期の目標を設定します。 所要時間：60～90 分。 参加者：プロダクト、エンジニアリング、デザイン、リーダーシップ。

確認する項目：

• 四半期の OKR 評価
• 四半期におけるすべての L1 指標の傾向分析
• 前年同期との比較
• 競争環境：市場の変化と競合他社の動向
• うまくいったこと、うまくいかなかったこと

アクション：次の四半期の OKR を設定します。データが示す内容に基づいて、製品戦略を調整します。

ダッシュボード設計の原則

効果的なプロダクトダッシュボード

優れたダッシュボードは、「プロダクトの状況はどうか？」という問いにひと目で答えます。

原則：

1. データではなく、問いから始める。このダッシュボードはどのような意思決定を支援しますか？意思決定から逆算して設計しましょう。

2. 情報の階層化。最も重要な指標を最も目立つように表示します。最上部にNorth Star、その次にL1指標、ドリルダウンでL2指標を確認できるようにします。

3. 数値よりも背景情報を重視する。背景情報のない数値に意味はありません。必ず、現在値、比較対象（前期間、目標、ベンチマーク）、傾向を表示します。

4. 指標を絞り、洞察を深める。50個の指標があるダッシュボードは、誰の役にも立ちません。重要な5～10個に絞り、その他は詳細レポートにまとめましょう。

5. 期間を統一する。ダッシュボード内のすべての指標で同じ期間を使います。日次と月次の指標を混在させると混乱を招きます。

6. 視覚的なステータス表示。ひと目で状況を把握できるよう、色を使って健全性を示します。

   • 緑：順調、または改善中
   • 黄：注意が必要、または横ばい
   • 赤：未達、または悪化中

7. アクションにつながること。ダッシュボードにあるすべての指標は、チームが変化を促せるものであるべきです。対応できない指標は、プロダクトダッシュボードに含めるべきではありません。

ダッシュボードのレイアウト

最上段：トレンドラインと目標を含むNorth Star指標。

2段目：L1指標のスコアカード — 各主要指標の現在値、変化、目標、ステータス。

3段目：主要なファネルまたはコンバージョン指標 — 各段階での離脱を示す視覚的なファネル。

4段目：最近の実験とローンチ — 実施中のA/Bテスト、最近ローンチした機能の初期指標。

最下段／ドリルダウン：L2指標、セグメント別の内訳、調査用の詳細な時系列データ。

ダッシュボードのアンチパターン

• 虚栄の指標：常に増加するものの、健全性を示さない指標（累計登録者数、累計ページビュー）
• 指標が多すぎる：スクロールしないとすべてを確認できないダッシュボード。1画面に収まらない場合は、指標を減らしましょう。
• 比較対象がない：背景情報のない生の数値（前期間や目標が示されていない現在値）
• 更新が滞ったダッシュボード：数か月にわたって更新も確認もされていない指標
• アウトプットのダッシュボード：ユーザーやビジネスの成果ではなく、チームの活動（クローズしたチケット数、マージしたPR数）を測定するもの
• すべての対象者に1つのダッシュボード：経営幹部、PM、エンジニアにはそれぞれ異なるビューが必要です。すべての対象者に合うものはありません。

アラート

すぐに対応が必要な指標にアラートを設定します。

• しきい値アラート：指標が重要なしきい値を下回る、または上回る（エラー率 > 1%、コンバージョン率 < 5%）
• トレンドアラート：指標が複数日にわたり継続的に低下する
• 異常検知アラート：指標が想定範囲から大きく外れる

アラートの運用：

• すべてのアラートは、対応につながるものであるべきです。何もできないのであれば、そのアラートは設定しないでください。
• アラートを定期的に確認し、調整します。誤検知が多すぎると、誰もアラートを確認しなくなります。
• 各アラートの担当者を決めます。アラートが発生したとき、誰が対応しますか？
• 適切な重大度を設定します。すべてがP0ではありません。