KPIはなぜ壊れるのか：Goodhartの法則を運用に落とす

HolmströmとMilgromのマルチタスク理論は、複数の仕事のうち一部だけが測りやすい場合、その指標へ強い報酬を結ぶと、努力が測定対象へ偏ることを示します。[1] 顧客対応件数を強く追えば、記録しにくい相談や後進育成が後回しになるように、局所的な合理性が組織目的を損ないます。

指標設計では、望ましい成果を列挙するだけでなく、測定しにくいが失うと困る仕事を書き出します。その仕事を直接測れないなら、主指標への報酬を弱める、専門職の裁量を残す、質的レビューを入れる、役割を分離する選択があります。精密な数値がない領域を、価値がない領域と取り違えないことが出発点です。

強い報酬を結ぶ前に、主指標を影運用し、現場の努力配分がどう変わるかを観察します。測定対象が改善しても、記録されにくい相談、育成、予防作業が減るなら、能力向上ではなく努力の置換が代替説明です。[1] 対抗指標を観測できない仕事では、数値目標の強度を上げず、裁量レビューを残す判断をします。

BevanとHoodは、英国の公的医療で強い目標と制裁を用いた統治を分析し、測定指標がサービス全体を代表するという仮定と、待機者の再分類などのゲーミングを検討しました。[2] 数字の操作だけでなく、目標対象へ資源を寄せ、対象外の品質を見えなくすることも歪みに含まれます。

現場が指標へ適応した時、それを直ちに不正と呼ぶと情報が隠れます。どの行動が顧客価値を改善し、どれが定義の穴を突き、どれが別の集団へ負担を移したかを分けます。例外申請、再分類、締切直前の急変、分布の端での滞留を監査し、数値の急改善を成功だけでなく調査の起点として扱います。

異常検知では、急改善を直ちに不正と判定せず、実改善、定義変更、再分類、対象外への移転へ分解します。公開値と内部記録、期限前後、対象群と非対象群を比べ、顧客価値を伴わない改善が集中するなら制度要因を疑います。[2] 異議を出した現場を評価対象から守ることも、抜け道を早く見つける測定条件です。

Propperらは、強い待機時間目標を導入したイングランドと、同様の制裁を採らなかったスコットランドを比較しました。6か月、9か月、12か月を超える長期待機の割合を分析し、イングランドで相対的な減少を報告しました。[3] Goodhartの法則は、目標が必ず無効という意味ではありません。

重要なのは、主指標の改善を目的全体の成功と同一視しないことです。待機時間が減っても、症例の選別、臨床品質、職員負荷、短期待機者の悪化がないかを別に確認します。政策評価と同じく、導入前の傾向、比較対象、同時期の変更、公開値と内部値の差を見て、成果と置換を切り分けます。

目標導入の効果を判断するときは、導入前の傾向と比較対象を固定し、同時期の人員、需要、制度変更を代替説明として残します。主指標が改善し対抗指標が維持された範囲だけを成功とします。医療の待機時間で観測された結果を別業界へ移す場合も、強制力と測定可能性が似ているかを確認し、効果量は引き継ぎません。[3]

英国公的医療の事例分析は再分類などのゲーミングを検討しましたが、特定制度の観察から、他のKPIでも分母操作が起きると断定することはできません。[2] ここでは、達成率の変化が対象者の入替えで説明できるかを確認する、限定的で一般的な監査仮説として扱います。分母の定義変更も独立に監査します。

推奨する分母ブリッジ表では、期首対象、期間中の新規流入、除外、完了、期末残を同じ定義で接続します。仮想例として達成率が上がっても、難しい案件が対象外へ移ったなら、処理能力の改善とは別に表示します。除外理由は自由記述だけでなく、適用した規則の正確な版へ結びます。

分母が変わること自体を不正とは扱いません。需要構成や制度が正当に変わる場合もあるため、変更理由、承認者、対象外へ移った案件の結果を確認します。主指標の改善が固定集団でも見えるか、入替えを戻すと判断が変わるかを示し、なお説明できない差だけを追加監査へ送ります。流入側の変化も同じ表へ置きます。

異議申立ては全案件を代表する無作為標本ではありません。それでも、定義の端、記録漏れ、対象外への負担が集中する場所を見つける仮説生成には限定して使えます。以下は運用上の提案として、申立て案件と同条件の非申立て案件を対にし、指標計算と実際の価値を再確認します。申立てを知らない層も別に標本化します。

ケース監査では、申立て理由を正当・不当で先に分類せず、元記録、適用定義、計算値、現場判断、顧客または業務上の結果を、指標値を伏せた独立した確認者へ渡します。非申立て対照でも同じ誤作動が見つかれば、声を上げた人の例外ではなく、定義または運用の候補問題として扱います。

変更判断は申立て件数の多さだけで決めません。再計算で順位や報酬が変わるか、同じ条件へ誤作動が広がるか、修正後に別の抜け道が生じないかを確認します。定義を直す場合は旧版との十分な併走期間を置き、改善という一続きの系列へ無条件には接続しないようにします。併走中は両版で同じ案件を再計算し、切替日も明示します。

• DENOMINATOR BRIDGE：期首、流入、除外、完了、期末残を規則版とともに接続する
• APPEAL PAIR：申立て案件と同条件の非申立て案件を組にして抽出する
• BLIND RECALCULATION：指標値を伏せ、元記録から定義適用と結果を再計算する
• CHANGE DECISION：局所例外、広い誤作動、定義改訂、報酬停止の別で処置を残す

一つのKPIへ目的を背負わせず、結果指標、過程指標、品質のガードレール、分布指標、長期指標を小さな集合にします。すべてを報酬へ直結させる必要はありません。診断のための指標と評価のための指標を分け、個人査定へ使うものほど、定義変更、操作可能性、異議申立ての手順を厳しくします。

運用会議では達成率の説明だけでなく、指標を上げる最も安い行動と、顧客価値を上げる行動が一致しているかを問い続けます。現場が見つけた抜け道は処罰材料ではなく設計テストです。指標の有効期限、廃止条件、対抗指標、抜き打ち監査を事前に持てば、KPIが目的へ戻るための学習回路になります。

各KPIには目的所有者、定義管理者、監査者、廃止承認者を置きます。対抗指標の悪化、再分類の集中、目的との相関消失のいずれかが続く場合は、報酬との連結を先に外して診断指標へ戻します。定義を修正したら過去との連続性を装わず版を分け、改善が確認できるまで個人査定へ再接続しません。

• 目的：指標で代用する成果と、代用できない価値を分けて書く
• 対抗：速度には品質、平均には分布、短期には長期を組み合わせる
• 監査：急変、再分類、対象外への移転、内部値との差を調べる
• 改廃：有効期限、変更責任者、異議申立て、廃止条件を決める