品質改善研修の投資対効果：管理業務改善プロジェクトによるコスト削減効果を定量化する方法

ある病院のチームが請求処理のワークフローを再設計しました。事務スタッフに新しいプロセスに関する研修を実施したところ、6か月後には請求1件あたりのコストが低下しました。経理部はこれに満足し、具体的な金額を尋ねました。研修によってどれだけのコスト削減が実現したのか、ということです。

正直に答えるのは、質問するよりも難しい。同じ半年間で、人員配置が変わり、請求件数も変動し、支払機関の規則も変更された。節約できた費用の一部は再設計によるもので、一部は研修によるもので、残りは上記のいずれにも起因しない。品質改善研修の投資対効果（ROI）とは、これらの要素を分離し、残った部分を一定の信頼度で報告する作業である。

これはあくまで例示であり、具体的な事例ではありません。このガイドは、病院の産科・開発部門の責任者、および彼らと連携する情報システム担当者やコンプライアンス担当者を対象としています。比較対象の定義方法、実際の業務の測定方法、その証拠を運用データに結び付ける方法、他の説明を排除する方法、そして誇張することなく結果を報告する方法について解説しています。

品質改善研修の投資対効果（ROI）とは何ですか？

品質改善研修のROI（投資対効果）は、研修に関連した改善プロジェクトのメリットとコストを比較する指標です。研修を実施しなければ得られなかったメリットは何か、そしてそのメリットが研修とプロジェクトのコストに見合うものだったのかを問います。最も一般的な形式はシンプルで、純利益（メリットからコストを差し引いたもの）をコストで割った値をパーセンテージで表したものです。

計算は簡単な部分です。難しいのは、どのメリットがトレーニングに属するかを決定することです。5段階の評価フレームワークを推進するROI Instituteは、データ分析の際に「プロジェクト効果の分離」を独自のステップとして挙げています（ROIインスティテュートその5つのレベルは、反応、学習、応用、影響、ROIです。満足度と完了は最初のレベルに位置します。これらは有用な成果指標ですが、コスト削減の証拠ではありません。

クイック事実

1. 結果と比較を定義する

データ収集を始める前に、介入内容、影響を受ける役割、そして分析によって裏付けられるべき意思決定の3点を書き留めておきましょう。「研修によって費用が節約できたか？」という問いは漠然としすぎています。「請求処理ワークフロープログラムを2番目の拠点にも拡大すべきか？」という問いは意思決定であり、どのような証拠があれば十分かを明確に示しています。

次に、2種類のコストを分けます。 配送費用 設計時間、ファシリテーターまたはコーチの時間、学習者の時間、教材、およびソフトウェア費用が含まれます。 運用コスト プロセス自体の変更点（新しいツール、改訂された手順、スタッフが新しい方法を習得するまでの暫定的な二重実行など）を網羅してください。研修の投資対効果（ROI）を、実施コストのみで評価すると、プログラムの価値を過大評価することになります。あらゆる要素を考慮したROIは、改善プロジェクトには適切な指標かもしれませんが、研修自体を評価するには不公平です。どの質問に答えるのかを明確にし、報告書に明記してください。

従業員の時間は大切に扱うべきです。研修に費やした時間は、たとえ請求書が送られてこなくても、れっきとしたコストです。そのため、財務担当者が合意したレートで記録しておきましょう。

2. 実際の作業を測定する

ここでの課題は「プログラムに参加すること」ではありません。学習者が職場で行う作業、例えば新しいチェックリストに基づいて請求内容を修正したり、拒否理由をコード化したり、例外を記録したりすることです。それを、観察可能な証拠を用いて測定してください。

1. ベースラインを設定する トレーニング前：合意された基準に基づいて採点された、実際または現実的なタスクのサンプル。
2. 同等の評価を実施する 訓練後、学習者が練習した課題ではなく、同程度の難易度の新しい課題を使用する。
3. 完了と満足を維持する 配送指標として、別途報告される。

ここでタスク証拠が重要な役割を果たします。スタッフが未知のケースでタスクをより正確に実行できるようになった場合、トレーニングと業務変更との関連性が説得力を持つようになります。そうでない場合、コスト削減はトレーニングによるものではない可能性が高いです。タスクに関連するライティング練習とフィードバックの詳細については、ガイドを参照してください。 有益なフィードバックを伴うインタラクティブな実践を設計する.

3. タスクの証拠と運用データを関連付ける

次に、業務に関する証拠を運用データの横に配置します。各指標について、対象者（含まれる人）、分母（請求件数、従業員数、月数）、期間、および情報源の4つの項目を記録します。

管理業務改善プロジェクトにおける一般的な指標には、手戻り率、回避可能な理由で却下された請求の割合、タスク完了までの時間、取引あたりのコストなどがあります。各変更点を、財務担当者が承認した単位コストのみを使用して金額に換算してください。そして、重要な数値を算出してください。

• 推定される利益： 測定値の変化に、合意された単位コストを乗じた値。
• トレーニングに起因するシェア: 推測ではなく、根拠に基づいたパーセンテージを、その理由を明記して示すこと。
• 正味推定値: 計上された便益から、含めることにした研修費用とプロジェクト費用を差し引いた額。

もっともらしい関連性は、もっともらしい関連性として扱うべきです。研修後に手戻りが減少したことは、研修が効果を発揮したことを示唆するものではありますが、研修が効果を発揮したことを証明するものではありません。

4．代替的な説明を考慮する

比較期間中に他に何が変わったのかを洗い出しましょう。簡単なチェックリストが役立ちます。

1. ワークロード。 取引量は増加したのか、減少したのか？取引量の少ない四半期は、エラーが少ないことを意味することが多い。
2. 人員配置。 経験豊富な人材が辞めたのか、それとも研修を受けていない新人が入社したのか？
3. 顧客または支払者の構成比。 請求の種類は変わりましたか？
4. プロセスまたはシステムの変更。 同時に、ワークフローに関して他に何か変更はありましたか？

可能な限り、比較表現を使用してください。 一致した比較 まだ訓練を受けていない同様のチームを例​​に挙げる。 段階的な展開 ほぼ無料でその比較が可能になります。後からトレーニングを受けたチームが、最初にトレーニングを受けたチームの対照群として機能するからです。しかし、病院ではどちらの方法も常に可能とは限りません。病院では、すべてのチームが同時に変更を必要とする場合があり、その場合は正直に低い信頼度を報告する必要があります。

大規模な医療の質改善に対する投資収益率に関する、BMC Health Services Research の 2022 年の調査報告が参考になる。著者らは、投資収益率を、質改善から得られる金銭的または非金銭的な価値全般と広く定義し、成果は相互に関連しており、観察が難しいと指摘している。直接的な帰属を主張するのではなく、成果への貢献を評価することを提案し、従来の ROI を「QI の価値を示す遠回しで不完全な指標」と呼んでいる。Thusini et al., BMC Health Services Research, 2022これは管理プロジェクトにも当てはまります。虚偽の精度を持つ単一の数値ではなく、貢献の証拠とそれに対する確信を報告してください。

5. 結果を報告し、次の行動を選択する

財務委員会が検討できる報告書は1ページに収まるように作成されています。このサンプルレイアウトでは、結果欄は意図的に空欄になっています。結果欄には必ずご自身のデータを入力してください。決して他人のデータから効果量を引用しないでください。

各行動を正当化する基準を事前に決定しておきましょう。未知のケースにおけるタスクスコアが向上し、運用指標が予想通りの方向に動き、他の説明も検証され、慎重な仮定の下で純推定値がプラスのままであれば、プログラムを拡大するかもしれません。タスクスコアは向上したが運用指標は向上しなかった場合は、トレーニング以外の制約を示唆するため、プログラムを修正するかもしれません。どちらも変化しなかった場合は、プログラムを中止するかもしれません。数値を見る前に、これらのルールをスポンサーと合意しておきましょう。そうすれば、結果によって基準が左右されることはありません。

現実的な例題に取り組んでみましょう

例示です。使用前に、財務担当者と情報システム担当者またはコンプライアンス担当者が、事例と回答基準を検証する必要があります。

ケース。 チームは請求処理のワークフローを再設計し、同時に人員配置と処理量も変更した。研修後6か月間で手戻りが減少した。同時期に経験豊富なコーダー2名が退職し、第2四半期の処理量はわずかに減少した。

その任務。 学習者は、研修によって合理的に得られるであろう節約額を見積もり、その決定理由を説明し、証拠を挙げ、まだ不足している情報を挙げる。

最初の試み。 「手戻りが減少したので、研修によってその差額をすべて節約できました。減少額に手戻り1件あたりのコストを掛けて、それを投資対効果（ROI）として報告しました。」これは研修の効果をすべて計上し、他の変化を無視しています。

フィードバックと再試行。 コーチは、他に何が変わったのか、訓練を受けたスタッフと訓練を受けていないスタッフに違いはあるのか、単位コストはどこから来たのかを尋ねます。学習者は、利益を分配するように求められます。

より強力な試み。 「手戻りは減少しましたが、経験豊富なコーダー2名が退職し、処理量も減少したため、すべてを研修の成果と断定することはできません。未経験のケースにおけるタスクスコアは上昇しており、これは研修の貢献を裏付けています。私は、観測された節約額、正当化できる削減された割合、および低～中程度の信頼度評価を報告します。信頼度を高めるには、研修を受けたスタッフと研修を受けていないスタッフによる手戻りと、財務部門からの単位コストが必要です。」これは、観測された節約額と原因による節約額を区別し、不足している証拠を示しています。

シンプルな評価基準で能力を評価する

各評価項目を0～2点で採点してください。

アンカー: 0 は欠落または裏付けなし、1 は関連する省略を含む部分的、2 は合意された基準に対して完全かつ正当化されている。重大なエラーは、他の原因を確認せずに変更全体をトレーニングに起因するものとみなすなど、個別に定義し、総合スコアで隠蔽できないようにします。このルーブリックは提案であり、検証済みの準備基準ではありません。実践者と調整し、試験的に使用してください。各アクティビティを、それが要求する思考と一致させるには、ガイドを参照してください。 学習活動をブルームの分類法に合わせる.

インタラクティブな配信が役立つ場面

インタラクティブな形式は、回答を聞く前に参加者が判断を下す必要がある場合に役立ちます。ライブセッションでは、ファシリテーターがクレーム事例を示し、各参加者にトレーニングによる節約額の割合を入力させ、その後、見積もりの​​ばらつきを示して、なぜ見積もりが異なるのかを議論することができます。同じ事例を、準備のために各自のペースで実行することもできます。AhaSlidesは、インタラクティブな学習と、ライブ配信と自主配信の切り替えをサポートしています。使用する予定の特定のオーサリング、フィードバック、またはレポート機能は、独自のワークフローと照らし合わせて確認し、AI、シミュレーター、およびシステム統合は、実際に動作するのを確認するまでは、外部または未確認のものとして扱ってください。形式の選択に関するガイダンスについては、次の記事を参照してください。 適応型学習、インタラクティブ学習、ライブ学習をいつ活用するか.

残る可能性のある制約

• 帰属 比較対象グループがなければ、寄与度を推定することはできても、原因を証明することはできない。
• タイムラグ。 貯金の中には、反映されるまでに数秒かかるものもあり、短い期間だと見逃してしまう可能性があります。
• データの品質。 運用データは不完全な場合があり、また、その定義が期間の途中で変更される可能性があります。
• その他の変更点。 人員配置、業務量、支払者側の規則などが、わずかな研修効果を覆い隠してしまう可能性がある。
• 転送。 訓練事例におけるパフォーマンスは、日常的なプレッシャー下でのパフォーマンスとは異なる。

これらの点を早めにスポンサーに伝えてください。研修は人々の能力を向上させるものであり、職場を取り巻く環境を変えるものではありません。

よくある質問

品質改善研修の投資対効果（ROI）とは何ですか？

これは、研修に関連した改善プロジェクトの便益を費用と比較するもので、通常は純便益を費用で割った値として表されます。重要なステップは、研修がどれだけの便益を正当に計上できるかを明確にすることです。

研修がコスト削減につながったことを証明できますか？

まれなケースです。比較対象を揃えた比較試験や段階的な導入はより強力な証拠となりますが、ほとんどの病院環境では、証明ではなく、妥当な貢献度と信頼度を報告することになります。

配送費用と運営費用は合算して計上すべきでしょうか？

それぞれ別々に報告してください。研修費用は研修そのものにかかる費用、運用費用はより広範な改善プロジェクトにかかる費用です。投資対効果（ROI）の算出にはどちらの費用が使われているかを明記してください。

顧客満足度調査は、コスト削減の証拠となるのか？

いいえ。満足度と完了率は成果指標です。コスト削減には、業務の証拠と運用データが必要です。

どこから始めれば

既にベースラインが設定されている改善プロジェクトを1つ選びます。分析で裏付けるべき決定事項を記述し、含める費用を一覧にし、分母を含む運用指標を1つ選択し、財務担当者に単位コストを承認してもらいます。結果欄を空欄にした1ページのレポートを作成し、データが届く前に、スケール、修正ルール、停止ルールについて合意します。

このようなケースを自社のチームで実際に実行し、その後は各自のペースで再利用する方法を知りたい場合は、AhaSlides をご覧ください。