教育効果測定のための「自由記述式アンケートの設計＆分析」コース （開催終了）

　こんにちは、堤宇一＠学習分析学会です。「教育効果測定のための自由記述式アンケートの設計と分析」セミナーを11月17日＆18日に開催いたしました。 本セミナーの企画＆講師を担当する堤が、活動報告をレポートさせていただきます。 １）教育効果測定活動の悲しき実態 本セミナーは、筆者が教育効果測定コンサルテーションで多々遭遇する問題を改善したいという思いから実施しています。 お陰さまで、様々な組織から教育効果測定に関するご相談を頂戴します。ご相談いただいた際に必ずお尋ねし、現物があればお見せいただくのが調査方法や調査ツールです。100％に近い確率で研修の満足度アンケート（レベル１）が実施されています。 しかし残念ながら、アンケートの構造や質問文、分析方法（評価基準含む）は、調査活動として満たすべき条件を備えていません。条件を満たしたツールに出会うことは殆どありません。スキルの習熟度を把握したいのに、知識確認テストを実施している組織が山ほどあります。教育効果測定の実態は、調査としての基準やクオリティを満たさない間違いだらけの方法で、いい加減なツールで、実施＆分析が行われています。筆者が教育効果測定に取り組みはじめ10年超が経ち、世間では教育効果測定という言葉が定着しているにも関わらず、悲しい実態がそこに存在します。

２）調査活動の各工程での留意点と実効のコツ掴む 調査活動の一部分（質問の作り方や分析スキルといったパーツ）を教えてくれるセミナーは、探せばあるのですが。「調査目的を明確化し、測定対象（構成概念）を定義する。そして狙いに合った質問文を作成し、データを収集する。データ分析基準を作り、データの分析＆解釈を行い、結論をまとめ、報告するまでの工程」調査活動の頭からお尻までの全体を扱ったセミナーは殆どないと感じています。本セミナーは、全ての工程を一気通貫で学ぶ設計にしています。 本セミナーは、データ収集活動やレポート作成の工程は時間の都合で扱いませんが、調査活動の各工程をケース演習で進め、何度も何度も練習していただくシミュレーション構造になっています。この仕掛けにより各工程での重要ポイントや実施上の注意点を理解できるのです。しかしこの構造は、参加者への学習負荷を大きくし、頭をフル回転させることを要求します。その様な構造ですから、講師は演習過程の要所＆要所で介入し、コメントや質問を投げかけ、参加者個々が重要点に気づくように誘導＆支援していきます。講師である筆者は細心の注意を払いながら、ヒントやコメントを提示するので、終了後は大きな疲労感を覚えます。どうしても、少人数（最大１５名）でないと実施できないのが課題です。

３）論理思考力の高い参加者が参加すると 「構成概念の定義化」「質問文の作成」「評価基準の作成＆分析活動」の３つの演習が本セミナーの山場です。この３演習で、学習所要時間の80％弱を占める設計です。演習では、何故そう考えるのか、どう組み立てていくのかといった思考訓練を繰り返し＆繰り返し行います。クタクタになり、参加者の皆さんが疲労困憊になっていく様子が、講師の目からも手に取るように分かります。

　しかし、今回の参加者の皆さんはクタクタになりながらも上手くポイントを抑え、自分たちなりの解を導いておられました。普段から量的調査を業務として実施されておられる参加者が２名、再受講制度を利用して２回目の参加者が１名、筆者がコンサル支援させていただいた組織からの派遣参加者が１名という、普段以上にスキルと意識の高い方が偶然にも今回多くご参加いただきました。それが幸いしているように感じました。

以上