2025-11-15T10:46:12.423491

Exploring Teachers' Perceptions of ChatGPT Through Prompt Engineering

Gousopoulos
Artificial Intelligence and especially Large Language Models (LLM), such as ChatGPT has revolutionized the way educators work. The results we get from LLMs depend on how we ask them to help us. The process and the technique behind an effective input is called prompt engineering. The aim of this study is to investigate whether science educators in secondary education improve their attitude toward ChatGPT as a learning assistant after appropriate training in prompt engineering. The results of the pilot study presented in this paper show an improvement in the previously mentioned teachers perceptions.
academic

ChatGPTに対する教師の認識をプロンプトエンジニアリングを通じて探索する

基本情報

  • 論文ID: 2510.08634
  • タイトル: Exploring Teachers' Perceptions of ChatGPT Through Prompt Engineering
  • 著者: Dimitrios Gousopoulos (パンテイオン大学)
  • 分類: physics.ed-ph cs.CY
  • 発表時期/会議: 具体的な会議は明記されていない
  • 論文リンク: https://arxiv.org/abs/2510.08634

要旨

人工知能、特にChatGPTのような大規模言語モデル(LLM)は、教育者の業務方法を根本的に変革してきました。LLMから得られる結果は、私たちがそれらにどのように支援を求めるかに依存しています。効果的な入力の背後にあるプロセスと技術はプロンプトエンジニアリングと呼ばれています。本研究は、適切なプロンプトエンジニアリング研修を受けた後、中等教育の科学教育者がChatGPTを学習支援ツールとして認識する態度が改善されるかどうかを調査することを目的としています。本論文で提示されたパイロット研究の結果は、前述の教師の認識が改善されたことを示しています。

研究背景と動機

問題の定義

本研究が解決しようとする中核的な問題は、中等教育の科学教師がChatGPTを教育支援ツールとしてどのように認識しているのか、そしてプロンプトエンジニアリング研修がこのような態度を改善できるかどうかです。

重要性の分析

  1. 技術変革の背景：2017年のTransformerメカニズムの導入以来、大規模言語モデルの教育分野への応用可能性は非常に大きい
  2. 教育実践の必要性：ChatGPTは個別化学習、問題解決スキルの向上、物理概念の理解を支援することができる
  3. 人間とAIの協働トレンド：最適なAI強化学習環境には効果的な人間とAIの協働が必要であり、教師の役割は情報提供者から指導者・促進者へと変化している

既存研究の限界

  1. 技術使用の障壁：教師のAIツールに対する認識と使用スキルにギャップが存在する
  2. 品質管理の問題：LLMは複雑な内容の処理に限界があり、正確性を確保するために人的介入が必要である
  3. 研修の欠如：教師を対象とした体系的なプロンプトエンジニアリング研修研究が不足している

研究の動機

プロンプトエンジニアリング研修を通じて教師のChatGPTに対する認識と使用能力を向上させることで、科学教育におけるAIの可能性をより良く発揮させることができます。

核心的貢献

  1. 理論的貢献：プロンプトエンジニアリング研修が教師のAI態度改善に有効であることを検証した
  2. 方法論的貢献：GPEI方法論(目標-プロンプト-評価-反復)および複数のプロンプト技術の研修フレームワークを提案した
  3. 実証的貢献：中等教育の科学教師のChatGPTに対する態度変化の定量的証拠を提供した
  4. 実践的貢献：教師の専門能力開発のための具体的なAIツール研修方案を提供した

方法の詳細説明

タスク定義

入力：中等教育の科学教師の初期的なAI態度 処理：3週間のプロンプトエンジニアリング研修(理論+実践) 出力：研修後の教師のChatGPTを教育支援ツールとして認識する態度の変化 制約：便宜的サンプリングに基づく小規模研究(14名の教師)

研究設計アーキテクチャ

1. 参加者の選定

  • サンプルサイズ：14名の自然科学教師
  • 出所：公立および私立の中高等学校が各々半数
  • サンプリング方法：便宜的サンプリング

2. 測定ツール

  • 質問票の基礎：Nazaretsky等(2022)の研究に基づき、ギリシャ語環境に翻訳・適応させた
  • 構造：5段階リッカート尺度の14項目
  • 次元：
    • (a) 教育環境におけるAIの利益に対する認識
    • (b) AIとの協働による教学プロセスの改善

3. 研修内容

理論研修：

  • GPEI方法論(目標-プロンプト-評価-反復)
  • プロンプトエンジニアリングの基礎理論

実践研修：

  • ペルソナパターン(The Persona Pattern)
  • インタビューパターン(The Interview Pattern)
  • 思考の連鎖(Chain-of-Thought)

研修期間：3週間、週2回、1回2時間

技術的革新点

  1. 体系的な研修フレームワーク：GPEI方法論を教師向けAI研修に初めて適用した
  2. 複数モード型プロンプト技術：複数のプロンプトモードを統合し、包括的なスキル研修を提供した
  3. 教育状況への適応：プロンプトエンジニアリング技術を科学教育実践と結合させた
  4. 態度測定：前後比較設計を採用し、研修効果を定量化した

実験設定

データ収集

  • 事前測定：研修前に態度質問票を完成させた
  • 介入：3週間のプロンプトエンジニアリング研修
  • 事後測定：研修後に同じ質問票を完成させた

評価指標

  • 主要指標：質問票平均スコアの中央値の変化
  • 統計方法：Wilcoxon符号付き順位検定(ノンパラメトリック検定)
  • 補足分析：ブートストラップ法(10,000回の再サンプリング)

比較方法

前後比較設計を採用し、参加者が自分自身の対照群となった

実装の詳細

  • 統計ソフトウェア：R言語
  • 有意水準：p < 0.001
  • 信頼区間：95%信頼区間(ブートストラップ法)

実験結果

主要な結果

統計的有意性検定

  • Wilcoxon検定の結果：Z = -3.296, p < .001
  • 結論：研修前後の教師の態度に統計的に有意な差が存在する
  • 方向性：研修後の中央値は研修前より有意に高い

ブートストラップ分析

  • 再サンプリング回数：10,000回
  • 95%信頼区間：0.682, 0.909
  • 解釈：信頼区間が0を含まないため、統計的有意性が確認された

実験の発見

  1. 態度の明らかな改善：すべての参加教師が研修後により積極的な態度を示した
  2. 効果の安定性：ブートストラップ分析が結果の堅牢性を確認した
  3. 実践的意義：教師はLLMの能力に対してより大きな信頼を示し、AI教育支援ツールに対する認可度が高まった

ケース分析

研修により教師は以下のことが可能になりました：

  • ペルソナパターンを使用して個別化学習シナリオを設計する
  • 探究ベースの物理活動を開発する
  • 学生の学習困難を特定する
  • クラスのレベルと必要性に合致した評価問題を生成する
  • 差別化教学と包括的学習を支援する

関連研究

物理教育におけるAIの応用

  • 個別化学習：Mahligawati等(2023)、Yeadon & Hardy(2024)はChatGPTが問題解決スキルの向上に果たす役割を強調している
  • 対話的学習：Zhu等(2023)が提案した4つの学習対話タイプのフレームワーク
  • 教学設計：Mustofa等(2024)によるAI支援教学設計に関する研究

教師態度研究

  • 積極的態度：Beege等(2024)は科学教師がChatGPTに対して積極的な態度を持つことを発見した
  • 研修の必要性：既存研究は体系的な教師向けAI研修方案が不足している

プロンプトエンジニアリング研究

  • 理論的基礎：Schmidt等(2023)のプロンプトエンジニアリングカタログ
  • 教育応用：Leung(2024)による教育におけるプロンプトエンジニアリング応用研究

結論と考察

主要な結論

  1. 仮説の検証：研究仮説が支持され、プロンプトエンジニアリング研修は確かに教師のChatGPTに対する態度を改善した
  2. 実践的価値：研修後、教師のAIツールに対する信頼度と認可度が大幅に向上した
  3. 応用可能性：教師はプロンプトエンジニアリング技術を実際の教学実践に応用することができた

限界

  1. サンプルサイズ：わずか14名の参加者であり、結果の一般性を制限している
  2. 測定ツール：ギリシャ語環境下での質問票の妥当性と信頼性が検証されていない
  3. 研修期間：3週間の研修期間は比較的短い
  4. 研究設計：対照群との比較がない
  5. 長期効果：研修効果の持続性が評価されていない

今後の方向性

  1. サンプルの拡大：より大規模な研究を実施して結果を検証する
  2. 質的研究：質的方法を採用して態度変化の影響要因を深く探索する
  3. ツールの検証：ギリシャ語環境下で測定ツールの心理測定特性を検証する
  4. 長期追跡：研修効果の持続性と実際の応用状況を評価する
  5. 対照実験：対照群研究を設計して因果推論を強化する

深層的評価

利点

  1. 革新性：プロンプトエンジニアリング研修が教師のAI態度に与える影響を体系的に研究した初めての研究である
  2. 実用性：具体的で実行可能な研修方案と技術を提供した
  3. 厳密性：ノンパラメトリック検定とブートストラップ分析を含む適切な統計方法を採用した
  4. 関連性：現在のAI教育応用のホットトピックに密接に関連している
  5. 先見性：教師の専門能力開発に新しい方向性を提供した

不足

  1. サンプルの代表性：便宜的サンプリングと小規模サンプルが結果の外部妥当性を制限している
  2. 研究設計：対照群がなく、他の混同要因を排除することが難しい
  3. 測定の深さ：態度質問票のみを使用しており、行動レベルの測定が不足している
  4. 文化的適応性：質問票の翻訳と文化的適応性の検証が不十分である
  5. メカニズムの説明：態度変化のメカニズムに対する深い分析が不足している

影響力

  1. 学術的貢献：AI教育応用研究に新しい視点と証拠を提供した
  2. 実践的指導：教育機関がAI研修を実施する際の参考フレームワークを提供した
  3. 政策的示唆：教師の専門能力開発にAIスキル研修を組み込むことを支持している
  4. 後続研究：関連分野のさらなる研究の基礎を築いた

適用シーン

  1. 教師研修機関：類似のフレームワークを採用してAIツール研修を実施できる
  2. 学校管理：AI教育政策の策定に参考を提供できる
  3. 研究機関：より大規模な関連研究を実施するための基礎を提供できる
  4. 技術開発：教師向けのAIツール開発のためのユーザーニーズの洞察を提供できる

参考文献

本研究は豊富な関連文献を引用しており、主に以下を含みます：

  1. AI教育応用：Kasneci等(2023)によるChatGPTの教育機会と課題に関する包括的分析
  2. プロンプトエンジニアリング：Schmidt等(2023)のプロンプトパターンカタログ研究
  3. 教師態度測定：Nazaretsky等(2022)のAI教育技術信頼測定ツール
  4. 物理教育のAI応用：Mahligawati等(2023)、Yeadon & Hardy(2024)等の関連研究

本研究はAIの科学教育への応用に重要な実証的支持を提供しており、一定の限界は存在しますが、今後の関連研究と実践のための良好な基礎を築いています。