What is EBM? Goals and Experimentation

Level: Advanced Module: Evidence-Based Management 3 min read Lesson 40 of 52

Overview

  • What you’ll learn: The definition and purpose of Evidence-Based Management (EBM), the EBM loop (goals → experiments → measurements → learning), four Key Value Areas, and how EBM differs from traditional management approaches.
  • Prerequisites: Modules 1–5 (Scrum and Kanban fundamentals).
  • Estimated reading time: 15 minutes

Introduction

Most organizations make decisions based on opinion, hierarchy, or inertia. The highest-paid person’s opinion (HiPPO) wins, regardless of evidence. Budgets are set annually based on last year’s numbers plus a percentage. “That’s how we’ve always done it” is treated as a valid argument.

Evidence-Based Management (EBM) offers an alternative: make decisions based on evidence gathered through experimentation, not on assumptions, opinions, or gut feelings. The EBM Guide (2024) by Scrum.org provides a framework for using empiricism at the organizational level — the same principles of transparency, inspection, and adaptation that Scrum uses at the team level.

The EBM Loop

EBM follows a continuous improvement cycle:

  1. Set Goals — Define strategic, intermediate, and tactical goals (more on this in Lesson 41).
  2. Form Hypotheses — “We believe that [action] will result in [outcome].”
  3. Run Experiments — Implement the smallest possible change to test the hypothesis.
  4. Gather Evidence — Measure the outcome using the four Key Value Areas.
  5. Inspect and Adapt — Did the experiment confirm or disprove the hypothesis? What did we learn? What should we try next?

The Four Key Value Areas (KVAs)

EBM organizes evidence into four areas:

  1. Current Value (CV) — How happy are our stakeholders and users right now?
  2. Unrealized Value (UV) — How much potential value are we NOT capturing?
  3. Ability to Innovate (A2I) — How effectively can we deliver new capabilities?
  4. Time to Market (T2M) — How quickly can we deliver new value?

These four areas will be explored in detail in Lessons 42–45. For now, understand that they provide a balanced view: CV and UV look at value (what we deliver), while A2I and T2M look at capability (how we deliver).

EBM vs. Traditional Management

Traditional Evidence-Based
Annual planning Continuous experimentation
Output metrics (features shipped) Outcome metrics (value delivered)
HiPPO decides Data informs, team decides
“We think this will work” “Let’s test whether this works”
Large bets Small experiments

Key Takeaways

  • EBM uses empiricism (experiments + data) for organizational decision-making.
  • The EBM loop: Goals → Hypotheses → Experiments → Evidence → Adapt.
  • Four Key Value Areas: CV, UV, A2I, T2M — balanced view of value and capability.
  • EBM replaces opinion-based management with evidence-based management.
本課中文版

概述

大多數組織根據意見、階層或慣性做決策。薪水最高的人的意見（HiPPO）獲勝，不管有沒有證據。預算根據去年加個百分比來定。「我們一直都是這樣做的」被當成有效的論點。

循證管理（EBM）提供了替代方案：根據實驗收集的證據做決策，而非假設、意見或直覺。EBM 指南（2024）提供了在組織層面使用經驗主義的框架——與 Scrum 在團隊層面使用的透明、檢視、調適原則相同。

EBM 循環

  1. 設定目標——定義戰略、中間和戰術目標。
  2. 形成假設——「我們相信 [行動] 會產生 [結果]。」
  3. 執行實驗——實施最小的改變來測試假設。
  4. 收集證據——使用四大關鍵價值領域量測結果。
  5. 檢視與調適——實驗確認還是推翻了假設？

四大關鍵價值領域（KVA）

  1. 當前價值（CV）——利害關係人和使用者現在有多滿意？
  2. 未實現價值（UV）——我們沒有捕獲的潛在價值有多少？
  3. 創新能力（A2I）——我們能多有效地交付新功能？
  4. 上市時間（T2M）——我們能多快交付新價值？

重點整理

  • EBM 用經驗主義（實驗 + 數據）做組織決策。
  • EBM 循環：目標 → 假設 → 實驗 → 證據 → 調適。
  • 四大 KVA 提供價值和能力的平衡觀點。
日本語版

概要

ほとんどの組織は意見、階層、惰性に基づいて意思決定を行う。最も給料の高い人の意見（HiPPO）が、証拠に関係なく勝つ。予算は昨年の数字にパーセンテージを加えて設定される。

エビデンスベースドマネジメント（EBM）は代替案を提供する：仮定や直感ではなく、実験で収集した証拠に基づいて意思決定する。EBMガイド（2024）は、スクラムがチームレベルで使う透明性・検査・適応の原則と同じものを、組織レベルで使うフレームワークを提供する。

EBMループ

  1. 目標設定——戦略的、中間的、戦術的目標を定義。
  2. 仮説形成——「[行動]が[結果]をもたらすと信じる。」
  3. 実験実行——仮説をテストするための最小限の変更を実施。
  4. 証拠収集——4つの主要価値領域を使って結果を測定。
  5. 検査と適応——実験は仮説を確認したか、否定したか？

4つの主要価値領域（KVA）

  1. 現在の価値（CV）——ステークホルダーとユーザーは今どれくらい満足しているか？
  2. 未実現の価値（UV）——捕捉していない潜在的価値はどれくらいか？
  3. イノベーション能力（A2I）——新しい機能をどれくらい効果的に提供できるか？
  4. 市場投入時間（T2M）——新しい価値をどれくらい速く提供できるか？

重要ポイント

  • EBMは経験主義（実験＋データ）で組織の意思決定を行う。
  • EBMループ：目標→仮説→実験→証拠→適応。
  • 4つのKVAが価値と能力のバランスの取れた視点を提供。

You Missed