反証条件は「後から自分に甘く解釈できない構造」で設計する — 未実験と棄却の区別・下限閾値・凍結・縮退先の事前定義
プロダクト設計
指標設計
事業検証
判断
運用
需要検証や仮説検証で事前に合否閾値を決めても、基準の構造が甘いと結果を見た後の解釈で骨抜きになる。閾値を「何にするか」(需要側の行動変化で測る等)とは別に、基準を「どう構造化すれば検証者自身のバイアスに耐えるか」という設計層があり、次の要素で固める。
判断基準
- 検証者側の行動コミット(記事を何本出す・何人に提示する等、実験を成立させる入力)を合否条件と分けて先に定義し、未達の場合は「棄却」ではなく「未実験」として第三の状態に分離する。宣伝せずに登録ゼロでも仮説の生死については何も語らない。この区別がないと「実験しなかった」が「需要がなかった」として誤って結論される(逆に、実験不成立を理由に検証自体を無期限延期する言い訳にもなる)。
- 観測機会を作れない仮説(チャネルが存在しない・依頼できる関係がない)は、期限付きの合否条件に置かない。棄却されようがない仮説を期限付きで置くのは設計ミス。代わりに「先行仮説の合格」を発動条件とした明示的凍結にし、解凍時に期限を切り直すことを文書に書く。曖昧に「後で検証する」と残すと、先行仮説合格後の高揚の中で雲散霧消する。
- 閾値は成功目標ではなく「これを下回ったら仮説に張り続ける言い訳ができない」下限として置き、かつコミットした実験入力で現実的に到達可能な水準にする。到達不能な高い閾値は「チャネルが弱くて検証にならなかった」という逃げ道を作る。
- 棄却時の転換先・縮退先を事前に定義する。転換先が書いてあると棄却が「敗北」ではなく「分岐」になり、基準を守る心理的コストが下がる。縮退先自体に価値が残る構造(例: 個人ツールとしては使い続けられる)なら、最悪ケースが全損でないことを明記して基準遵守をさらに安くする。
- 期日レビューは結果に関わらず実施する。「まだ判断材料が足りない」と感じる瞬間こそ基準が働く場面。延長は「理由を追記して1回まで」のように延長自体にルールを課す。
- 検証中の学びで仮説自体を書き換えるのは合法(文書を更新し期限も引き直す)。結果を見た後で閾値だけを下げるのは違法。この線引きを明文化しておくと、学習と自己欺瞞を区別できる。
適用条件
単独または少人数で検証を回す場面で特に効く。外部の締切や利害関係者が基準を守らせてくれる組織では一部が冗長になる。作り込み自体が報酬になるタイプの開発者(検証の不安を開発で紛らわすパターン)に最も効くため、検証期間中の新機能凍結(例外は計測装置のみ)を行動コミットに含めると良い。
検証方法
書いた反証条件を第三者(またはAI)に読ませ、「この基準で『続行』と結論するために使える言い訳を列挙して」と問う。挙がった言い訳のうち、未実験/棄却の区別・閾値の下限性・凍結の発動条件・延長ルールのどれでも塞げないものが残るなら、基準に穴がある。