生成AI研修の効果はどう測る？受講前後と30日後で比べる4指標

生成AI研修を実施しても、修了率と満足度だけでは「仕事で安全に使えるようになったか」は分かりません。

結論は、同じ低リスクの実務課題を研修前・直後・30日後に行い、安全判断、課題完了、出力検証、再現性の4指標を分けて比較することです。 受講直後の点数が高くても、30日後に手順を再現できないなら、教材、職場ルール、フォローのどこを直すか確認します。

受講完了と学習成果を分ける

IPAのDXリテラシー標準は、全ビジネスパーソン向けの能力をWhy、What、How、マインド・スタンスで整理し、生成AIを問い・仮説・検証と組み合わせる姿勢や、権利・情報漏えい・倫理への注意を示しています。またIPAは、各社が事業特性や育成方針に合わせて学習項目を選び、独自の評価指標を作ることを案内しています。

ここから言えるのは、全社共通の正解点を借りるのではなく、自社で「何を安全にできれば研修の目的を満たすか」を先に定義する必要があることです。

一方、次は別の記録です。

記事内の確認表

記録	分かること	それだけでは分からないこと
受講完了率	誰が教材を最後まで見たか	実務課題を完了できるか
満足度	内容の受け止め方	安全判断や検証ができるか
知識小テスト	用語・ルールを覚えたか	実務で手順を再現できるか
実務課題	指定条件で行動できるか	別業務でも成果が続くか

満足度を捨てる必要はありません。ただし、技能や業務成果と同じ列で合算しないことが重要です。

測る4指標

WORK EDITでは、初回の研修評価を次の4指標に分けます。0〜2点は公式資料が定めた基準ではなく、比較を簡単にするための提案です。

記事内の確認表

指標	0点	1点	2点
安全判断	禁止・不明情報を入力する	助言があれば止まれる	自分で止め、確認先を言える
課題完了	必須成果物が欠ける	修正を受けて完了	条件どおり自力で完了
出力検証	読みやすさだけで採用	一部の事実を確認	根拠・欠落・推測を確認
再現性	手順を説明できない	メモを見て再実行	別の架空例でも再現

高リスクの判断を平均点で相殺しません。機密・個人情報を入力する、根拠のない出力をそのまま使う、判断権限を越えるといった停止条件が出た場合は、合計点に関係なく実務移行を保留します。

AI出力自体の採点項目は、生成AIの出力をどう採点するかで詳しく分けています。本記事は、その採点を使える学習者の行動まで含めて評価します。

3時点で同じ課題を使う

1. 研修前

受講前に20分の診断を行います。教材で答えを教える前の基準値を取るためです。課題は、実在の顧客・社員・取引に由来しない架空データに限定します。

安全・指示・検証の20分チェックで、3技能の診断票を作れます。

2. 研修直後

研修前と難易度・項目数・合格条件が同じ課題を、内容だけ変えて実行します。事前課題の答えを覚えた効果と、技能の変化を混ぜないためです。

変えるのは架空の文面や数字だけにし、必要な判断は揃えます。たとえば、どちらも「入力可否を判定する」「200字で要約する」「出力の根拠と欠落を確認する」という構造にします。

3. 30日後

受講直後と同じ説明を再掲せず、職場の承認済み環境または架空教材で再実行します。30日後に点が落ちたら、本人の努力不足と決めつけず、利用機会、相談先、テンプレート、上司の支援、ツール変更を確認します。

7日・14日・30日の確認方法は、生成AI研修の30日定着確認へ進んでください。

測定票を作る手順

改善したい低リスク業務を一つ選ぶ。
入力、期待する成果物、人の確認項目を定義する。
安全判断、課題完了、出力検証、再現性の採点例を書く。
停止条件を合計点とは別に置く。
研修前・直後・30日後で課題構造を揃える。
個人順位ではなく、どの技能で支援が必要かを集計する。

研修課題そのものに会社データを使わない作り方は、会社の資料を使わずに生成AIを練習する方法を参照できます。

数字を読み違えない

同じ課題の点数が上がっても、会社全体の生産性が上がったとは限りません。処理時間の短縮、誤りの減少、手戻り、顧客影響などは、研修テストとは別の業務指標です。

また、研修を受けた人だけが選ばれている場合、受講者と未受講者の単純比較から研修の因果効果を断定できません。最初の運用では、次のように控えめに判断します。

4指標が改善した: 対象課題で技能変化が見られた
直後だけ改善した: 定着支援を追加する
安全判断が未達: 実データ利用へ進めない
全員が同じ項目で未達: 教材か説明方法を修正する

次にすること

まず一つの低リスク課題を選び、4指標と停止条件を1枚に書いてください。次に受講前の20分診断を行い、同じ構造の課題を直後と30日後にも使います。

「研修を実施した」という記録から、「どの技能が変わり、どこに支援が必要か」という判断へ進めれば、次回研修を具体的に改善できます。