MSCAI利用時のアセスメント結果への影響/AIを活用した採点・評価の可能性

株式会社マネジメントサービスセンター(本社:東京都千代田区、代表取締役社長:脇田幸子、以下「MSC」)は、東京大学松尾研発スタートアップ(R)であり、人事領域のAI研究開発に特化したBAKUTAN株式会社(本社:東京都文京区、代表取締役CEO:小森谷周大、以下「BAKUTAN」)と協働し、生成AI(以下、AI)の利用が管理職向けインバスケット演習(以下「IB演習」)に及ぼす影響を検証したレポートを公開しました。
同レポートでは、
- 受検者がAIを用いて回答した場合のアセスメント結果への影響
- AIによる採点・評価支援の可能性
の2つの観点から検証しました。
レポートの詳細はこちら!※同業他社ならびに個人の方からのお申込みは、原則としてお断りしております。あらかじめご了承ください。
管理職向けインバスケット演習でAI利用の影響を検証した結果、一律の得点上昇ではなく、
順位変動が確認された。 AI利用の効果が大きなディメンション(以下Dim)も確認された一方、
対人面などではその影響は限定的であり、
人間によるAI出力内容レビューの質にも左右されることが明らかになった。
AIは評価支援には有効だが、単独での完全代替にはなお課題がある。演習の特性や評価基準に応じた設計とチューニングが不可欠である。
1. AI利用がIB演習の結果に与える影響MSCのコンサルタントおよびセールスプランナー32名を対象に、第1回:自力で回答、第2回: AI(Microsoft 365 Copilot)を活用して回答という条件でIB演習を実施し、結果を比較した。
2. AIの評価(採点)能力の検証MSCが保有する評価基準をもとに、AI採点に適した汎用採点ルール、演習固有の採点マニュアルを作成し、AIによる採点結果と熟練アセッサーの評価結果の一致度を比較した。
1. AI利用による得点・順位への影響- 平均点(各Dim得点の合計)はやや上昇。AIを用いない場合の変化に比べ、
やや得点が上昇する傾向が見られた。
- 個人別の内訳からは、
AI利用が一律に成果向上につながるわけではないことも明らかになった。

図:参加者得点平均値の変化
- 第1回目と第2回目の順位比較から、
AI利用により自力回答時とは異なる結果が生じ得る可能性が示唆された。選抜・選考目的のアセスメントにおいてAIを利用する場合には、留意が必要である。
- Dim別の得点変化からは、
AIが得意とする領域であり底上げにつながりやすい領域と、段取りや育成的観点を含めて人をどう活かすかといった
底上げが生じにくい領域の存在が確認された。
- 対象者のAI活用実態に関するアンケートとのクロス集計からは、
プロンプトそのものならびにAI出力結果を受けた検証・再修正行動の重要性が確認された。
2. AIの評価能力の検証- AIに対して
演習固有の特性や評価基準に応じたチューニングを行うことで、
評価支援としての活用可能性をさらに高めていく余地があることが示された。
- 評価目的に応じて、アセスメント回答時のAI利用範囲を精緻に設計する必要がある
- With AI時代の職場におけるマネジメントやリーダーシップ行動の拡張の方向性が示唆された
- これからのマネジメントやリーダーシップに即したアセスメントが求められる
レポートの詳細はこちら!※同業他社ならびに個人の方からのお申込みは、原則としてお断りしております。あらかじめご了承ください。
私たちは、本検証を起点にWith AI時代に求められるマネジメントやリーダーシップに対応したアセスメントのあり方を探求してまいります。
株式会社マネジメントサービスセンター(MSC)は、1966年の設立以来、お客様の経営戦略と人材戦略を踏まえたうえで、科学的な知見に基づく手法を活用し、新任リーダーから経営幹部までの採用、診断、行動変容の促進、育成を支援しています。
米国DDI社との50年以上のパートナーシップを通じ、世界90カ国以上でグローバル共通のサービスを提供しています。
株式会社マネジメントサービスセンター ストラテジックマーケティング部
Tel 03-6266-5950 Email: msc_mktg@msc-net.co.jp
お問い合わせフォームは
こちら!
企業プレスリリース詳細へPR TIMESトップへ