評価の3つの見方

前のレッスンで、演習には過程も評価すると先に伝える工夫が要ると説明しました。では、その過程をどう見ればいいのか。今回はその評価の組み立てを扱います。

AIとの協働を評価するとき、多くの場合は最終的な成果物、つまりできあがった文章や資料だけを見て判断してしまいます。しかしそれでは、AIの出力をほぼそのまま使った参加者と、しっかり確認して直した参加者の違いが見えません。同じ完成度の成果物でも、その裏側にある取り組み方はまったく違うことがあります。

成果物だけを見て評価すると、参加者側にも歪みが生まれます。過程がどうであれ完成度だけが評価されると分かっていれば、参加者はAIの初稿をそのまま体裁だけ整えて提出するほうが得だと学んでしまいます。評価の設計は、参加者の取り組み方そのものに影響します。

3つの見方

評価には、成果物以外にも見るべき対象があります。

3つを毎回すべて使う必要はありません。演習の目的に応じて、1つか2つを選んで組み合わせます。短時間の演習なら成果物と簡単な振り返りだけ、じっくり取り組む課題ならやり取りの記録まで見る、というように使い分けます。

それぞれの見方で、何を観察するか

3つの見方は、それぞれ観察できる指標に落とし込むと使いやすくなります。抽象的に「よくできているか」を見るのではなく、具体的に何を確認するかを先に決めておきます。

やり取りの記録を全部読むのは負担が大きい作業です。負担を減らす工夫は、次のレッスンで扱います。

3つを組み合わせた簡単なルーブリック

評価の見方を決めたら、それぞれに簡単な基準を作ります。細かい点数配分より、何を見るかがはっきりしていることのほうが重要です。

具体例:部署横断研修での評価

複数の部署から参加者を集めた研修で、「顧客からの問い合わせへの返信文をAIと一緒に作る」演習をしたとします。部署ごとに顧客対応の基準が違うため、成果物だけを見て一律の合格ラインを引くのは無理があります。

そこで、成果物は「その部署の基準に照らして違和感がないか」を本人と一緒に確認する形にし、やり取りの記録は全員分ではなく抜き取りで数件だけ見て、研修全体の傾向をつかみます。振り返りは全員に「今日の演習で、AIに任せてよかった部分と、自分で書き直した部分を1つずつ」と書いてもらい、部署をまたいだ共通の学びとして共有します。3つの見方を役割分担させることで、部署ごとの基準の違いに対応しながら、評価の負担も抑えられます。

やってみよう

演習1：今の評価方法を3つの見方に当てはめる

今使っている、または使う予定の評価方法が、成果物・やり取りの記録・振り返りのどれに当たるか、あるいはどれにも当たらないかを整理してみてください。

演習2：観察する指標を1つずつ決める

演習1で選んだ見方のそれぞれについて、具体的に何を確認するかを1文で書いてみてください。「よくできているか」のような抽象的な基準ではなく、「案内メールなら、宛先の呼び方が間違っていないか」のように、確認できる形で書くのがこつです。

今日のまとめ

3行で振り返ります。

• AIとの協働を評価するには、成果物だけでなく、やり取りの記録と振り返りという3つの見方がある
• それぞれの見方に、何を観察するかの具体的な指標を先に決めておく
• 点数化より、次に何を直せばいいかが伝わるフィードバックのほうが実務では機能する

次のレッスンでは、この3つの見方をもとにした課題の種類と、採点の負担を減らす工夫を扱います。