今日の問い
何が改善すれば成功で、何が悪化したら立ち止まりますか。
30秒でつかむ
成功指標は、狙ったユーザー成果や事業成果へ近づいたかを示します。ガードレール指標は、改善の代わりに悪化させてはいけない品質を見張ります。
実装後に都合のよい数字を選ばないよう、指標、対象、期間、判断基準を先に決めます。
30秒図解 · LESSON 12
中心モデル
伸ばす指標と守る指標を対で置く
主指標だけでなく、悪化させてはいけない条件も測ります。
持続可能な成功
- 成果指標
- 先行指標
- 品質ガード
- 倫理・安全ガード
CLUE · 見抜く手掛かり
数値が上がっても失敗になる条件は何か
TRAP · ありがちな罠
クリック数を成功とみなす
原則
クリック数だけを増やす設計は簡単です。ボタンを大きくしたり、確認を減らしたりすれば反応は増えるかもしれません。しかし誤操作、離脱、表示速度の悪化まで含めると、良い体験とは限りません。
Microsoft Researchは、実験の指標を全体目標、機能・診断、データ品質、ガードレールなどに分けています。ガードレールは、必ずしも改善を狙わないものの、悪化させたくない側面を測ります。例として表示時間、クラッシュ率、離脱率が挙げられています。
前のレッスンで決めたユーザー目標から、成功を示す行動を一つ選びます。事業目標との接続も確認してください。安全、信頼、アクセシビリティ、性能、不要な行動の増加のうち、今回壊れやすいものをガードレールにします。
「予約完了率を上げる」なら、分母、対象者、計測期間を決めます。ガードレールには、誤予約の取消率やエラー率を置けます。数値の閾値に根拠がなければ、勝手に精密化せず、初期値を取ってから決める項目と明記します。
一つの数字で出荷判断をしません。成果と副作用を同じ表で見ます。
成功に近い指標だけでなく、性能や離脱など悪化させたくない側面をガードレールとして併せて測る原則を支える。
良い例と惜しい例
成果と副作用を同時に見る
AIへの指示例
目的: MVPの価値仮説を判定する成功指標と、体験の悪化を検知するガードレールを定義する
制約: 分母のない件数だけを成功指標にしない。根拠のない閾値を生成しない
参照: ux-strategy.md、success-criteria.md、in-out-scope.md、現在取得できるイベント一覧
受入条件: 各指標に定義、対象、期間、データ源、期待方向を示し、成功指標1つ以上とガードレール2つ以上を含める
確認問題
セルフチェック
1. 予約導線の改善で、成功指標とガードレールの組み合わせとして最も適切なのはどれですか。
最終制作へ反映する
success-criteria.mdに計測と停止条件を加える
主要タスクについて、成功指標、ガードレール、計測条件、判断の保留条件を一つの表へ追加する。
Acceptance criteria
- 成功指標とガードレールに、対象、期間、データ源、期待方向がある
- 数値根拠がない項目は、初期値取得後に決めると明記されている
今日のまとめ
- 成功指標は狙う成果、ガードレールは悪化させたくない側面を測る
- 両方を先に決めると、都合のよい数字だけで成功を判断しにくくなる
- 次は、決めた価値と範囲をもとにコンテンツを棚卸しする