社員にAIを配ったのに手応えがない。そういう経営者に向けて書きました。
先日、個人がAIで速くなっても会社の生産性は動かなかった、という数字を出しました。今日はその一段手前です。そもそも研修のあと、社員の使い方は変わったのか。社員が打ち込んだプロンプトを1件ずつ覗いた研究が今週出ました。
結論を先に書きます。変わったのは、研修を受けたその月だけでした。ただし、練習すれば確実に上手くなる仕事もあります。その線引きが今日の持ち帰りです。
71万件のプロンプトを、社内から覗いた
テキサス大学オースティン校の研究チームとKPMG米国法人が、同社の間接部門を対象に共同で調べた研究です。2026年8月27日公開、査読前のプレプリントです。
- 対象:間接部門の従業員5,191人。うち3,925人(75.6%)が社内チャットAIを実際に使用
- 期間:2025年の8か月間
- 量:会話158,496件、社員が打ち込んだプロンプト713,564件
- 職種:IT、マーケティング、経理・財務など、顧客と直接向き合わない15の部門
社員1人の1か月を1件と数えると、その83.9%で社内AIかCopilotのどちらかが使われていました。別の全国調査の32.1%と比べても、かなり使い込まれている職場です。
そのうえで、使い方の中身を見た数字がこれでした。
打ち込まれた会話のうち
- 条件や制約を書いていた:24.3%
- 出力の形式を指定していた:2.9%
- 何をもって合格とするかを書いていた:1.0%
- 役割を与える、例を見せるといった意図的な工夫を何か使っていた:5.2%
- あいさつやお礼を添えていた:30.2%
丁寧に話しかけている人は3割いて、合格の基準を書いている人は100人に1人でした。
使う量も偏っていて、社内チャットAIを使った社員のうち上位1割が全会話の51%を占めていました。
職位が上がるほど、使い方が上手かった
指示の明確さ、意図的な工夫の使用、用途の幅。この3つとも、スタッフより課長級、課長級より部長級以上のほうが高くなっていました。研究チームは、仕事の中身を分かっていることがAIの力と補い合っている、という読み方を挙げています。
部署差も大きく、上位は戦略、デジタル改革、プロジェクト管理の3つ。逆に経理・財務は、使用量のどの指標でも平均を下回った唯一の部署でした。表計算が中心で手順の固まった仕事には、チャット形式の道具がそもそも合いにくかった可能性が挙げられています。
そして、研修の話
8か月を通して、上手さは上がっていませんでした。
研修については、社員ごとの変化を追うと、研修を完了した月には上手さが上がります。ところが、その翌月以降には上がっていませんでした。
著者らは慎重です。これは研修が無効だったことを示すものではない、と本文にはっきり書いています。分かったのは、研修の完了が持続的な行動の変化につながった証拠は乏しい、というところまでです。
逆に、人が確実に上手くなっていた実験もある
一方で、人はちゃんと適応して上手くなる、と示した実験があります。MIT、コロンビア大学、マイクロソフトリサーチなどの共同研究。3,750人が参加した事前登録つきのオンライン実験で、2024年7月公開、2026年1月改訂、こちらも査読前です。
課題は2種類。どちらも画像生成AIを使い、参加者は最低10回プロンプトを打ちます。
- 正解の形が決まっている課題:お手本の画像を見せ、できるだけ忠実に再現させる。1,893人、18,560プロンプト
- 正解の形が決まっていない課題:架空の団体の説明文を読ませ、ロゴを自由にデザインさせる。1,857人、18,425プロンプト
どちらの課題でも、新しいモデルに当たった人のほうが良い成果を出しました。面白いのは、その伸びの出どころです。
研究チームは、古いモデルで打たれたプロンプトをそのまま新しいモデルに流し直しました。それで説明できる分がモデルの性能、残りが人の書き方の変化による分です。
- お手本を再現する課題:伸びのおよそ半分が、人が書き方を変えたことによるもの
- ロゴを作る課題:人の書き方の変化で説明できるのは約7%。9割超はモデルの性能
同じ道具、同じ募集の仕方、同じ画面。違うのは、正解の形が決まっているかどうかだけです。
プロンプトをAIに自動で書き直させる仕組みも試されています。再現課題では伸びを大きく削り、ロゴ課題ではわずかに改善しました。目的とずれた自動化は、性能向上の足を引っ張ります。
なお、書き方を変えて得をしたのは一部の上級者だけではなく、成績の上から下まで幅広く観察されています。
分かれ目は、何を良しとするかが決まっているか
ここからは私の読み方です。論文にそう書いてあるわけではありません。
2本目が示したのは、正解の形が決まっている仕事では人は練習で上手くなるということ。決まっていない仕事では、書き方をどう変えても成果はモデル任せになるということです。
1本目が覗いたのは、間接部門の日々の相談ごとでした。何をもって合格とするかを書いていた会話は、1.0%しかありません。基準が書かれていない場所では、上手いも下手も定義されません。定義できないものは、研修でも教えられません。
研修が効かなかったというより、基準のない仕事に汎用の研修を当てていた。そう読むほうが、2本の食い違いは素直に説明できます。
会社側の動きは、まだ結論が固まっていない
3本目です。ドイツの事業所パネル調査で、AI導入後に会社が研修をどう変えたかを調べた研究があります。著者はミュンヘン大学のミューレマン。
- 2019年から2021年を対象にした作業版では、AI導入企業は既存社員向けの継続研修をむしろ減らしていました(7,027事業所・年)。同時に、新規採用に占める高スキル層の割合が上がっています
- 2023年まで年を足した査読版では、継続研修はわずかに増える、ただし配分が高スキル層に寄る、という報告です
同じ著者、同じデータで、年を足したら向きが変わりました。ここは確定した話として扱わないでください。
ただ、どちらの版にも共通する点が1つあります。AIを入れたあと、人への投資は上のほうに寄る。1本目の「職位が上ほど上手い」と同じ向きです。
中小企業の現場に翻訳すると
私はAI研修を商品として持っている側です。そのうえで書きます。研修をやめろという話ではありません。中身を、AIの操作から自社の合格基準を言葉にする作業へ替える、という話です。
- 研修を買う前に、合格基準を1枚書く。「この見積チェックは、単価と数量と工期の3点が前回と合っていればOK」。この1枚がない仕事は、教えようがありません
- 基準が書ける仕事から先に渡す。見積のチェック、議事録の要約、問い合わせの一次返信。ここは練習が効きます
- 企画やコピーのように正解の形がない仕事は、練習で伸ばそうとしない。そこはモデルを新しいものに替えるほうが早い
- 研修の翌月に、もう一度見る。上手さが上がったのは受けた月だけでした。1か月後に何が残っているかを確かめる場を作る
まとめ
- 約4,000人・71万プロンプトの実測で、合格基準を書いていた会話は1.0%だった
- 研修を完了した月は上手さが上がったが、翌月以降は上がらなかった。8か月を通しても上がっていない
- 別の実験では、人の書き方の変化が伸びの半分を作っていた。ただし正解の形が決まった課題に限る。決まっていない課題では約7%まで落ちる
- 職位が上ほど上手く、AI導入後の人への投資も上に寄りやすい
- 明日からの一歩は、研修の予定を入れる前に、1つの仕事の合格基準を1枚書くこと
どれも海外の研究で、1本目は大手会計事務所の間接部門、2本目は画像生成の実験です。数字をそのまま自社に当てはめず、読み方として使ってもらえればと思います。
出典
- Hallman, Kowaleski, Puvvada, Schmidt「Sophistication in GenAI Use: Field Evidence from a Large Firm」(arXiv:2608.27364、2026年8月27日公開。査読前のプレプリント。データはKPMG LLP提供で、著者の1人は同社の従業員)
https://arxiv.org/abs/2608.27364
- Jahani, Manning, Zhang, TuYe, Alsobay, Nicolaides, Suri, Holtz「Prompt Adaptation as a Dynamic Complement in Generative AI Systems」(arXiv:2407.14333、2024年7月公開/2026年1月8日改訂。査読前のプレプリント。事前登録あり。実験は2023年12月と2025年6月から7月)
https://arxiv.org/abs/2407.14333
- Muehlemann「Artificial intelligence adoption and workplace training」(Journal of Economic Behavior & Organization 238巻、2025年10月、査読済み。データは2019年から2023年)
https://doi.org/10.1016/j.jebo.2025.107206
- 上記の作業版(本文の7,027事業所・年と継続研修の数値は、このPDFで確認しています。対象は2019年から2021年で、査読版とは結論の向きが異なります)
https://docs.iza.org/dp17367.pdf
この記事と同じ内容を、公式noteでも公開しています。 公式note 記事一覧