Skip to content
検索結果に戻る

事前検査-事後検査実験計画法

提唱者
Donald T. Campbell and Julian C. Stanley
年
1963 (formalized in Campbell & Stanley)
種類
Experimental / quasi-experimental research design
系統
Experimental design

この文章は機械翻訳で、まだ確認されていません。 英語の原文を読む

文字サイズ

何をする手法か?

事前検査-事後検査実験計画法は、介入群と対照群への参加者のランダム割り当てを典型的とし、介入の前後で参加者のアウトカム変数に対する測定を行う。事前検査と事後検査のスコア間の差は、ベースラインのばらつきから介入効果を分離し、教育、心理学、医学、社会科学全般にわたる実験および準実験研究において最も広く使用されている枠組みの一つとなっている。

手法の背後にある直感

6週間の読解介入が識字スコアを向上させるかどうかを知りたいと想像してみよう。プログラム終了後にスコアを測定するだけでは信頼性に欠ける――成熟や季節的効果によってスコアは自然に上昇した可能性もある。事前検査-事後検査計画法では、プログラム開始前に測定を追加する。これにより、参加者がどこに到達したかではなく、各グループがどれだけ変化したかを比較できるようになる。対照群を設けることで、両群に共通する変化(例:自然な成長)は相殺され、プログラム独自の貢献度を推定する値が残る。ランダム割り当てを追加することで、これは強力な因果関係を持つ真の実験に格上げされる。

歴史学

事前検査-事後検査計画法は、1963年のモノグラフ『Experimental and Quasi-Experimental Designs for Research』におけるDonald CampbellとJulian Stanleyによる体系的な方法論的扱いによって普及した。このモノグラフは(O1 X O2)という表記法を導入し、内的妥当性に対する脅威をカタログ化した。CampbellとStanleyは、真の事前検査-事後検査対照群計画法(ランダム化あり)と、準実験的な1群事前検査-事後検査計画法を区別し、後者の歴史、成熟、検査の脅威に対する脆弱性を特定した。Shadish、Cook、Campbellは2002年にこの枠組みを更新・拡張し、この計画法の応用研究方法論の礎としての地位を確立した。

使うべき場面

介入による経時的変化を評価する必要があり、個々のベースラインの違いがノイズを導入する可能性が高い場合に、事前検査-事後検査計画法を使用する。これは、ランダム割り当てが可能な場合(真の実験)、または準実験的設定で既存のグループ間の違いを制御するために事前検査スコアが不可欠な場合に適切である。単一の事後検査のみの測定で十分な場合(例:個人間のアウトカム分散が無視できる場合)、事前検査自体が参加者に介入に対する感受性を与える可能性が高い場合(検査効果の脅威 — ソロモン4群計画を検討)、または論理的に1つの時点のデータ収集しか不可能な場合には使用しない。

限界と注意点

  • 事前検査は、参加者に治療内容や研究者の仮説に対する感受性を与え、事後検査のスコアを過大評価または過小評価する可能性がある(検査効果の脅威)。
  • 事前検査から事後検査までの間の死亡/脱落は、脱落が治療条件またはベースラインスコアに関連している場合、結果を偏らせる可能性がある。
  • ランダム化がない場合、選択バイアスが残る:グループ間の既存の違いは、事前検査スコアだけでは完全に捉えられない可能性がある。
  • 平均への回帰:極端な事前検査スコアに基づいて選択されたグループは、治療に関係なく、事後検査では平均に近づく傾向がある。

出典に示された条件は、独立した科学的レビューや分析エンジンによる検証の代わりにはなりません。

強み

  • 既存の個人差を制御し、事後検査のみの計画法と比較して統計的検出力を高める。
  • 変化の直接測定を可能にする。これはしばしば、実質的に意味のある量である(例:学習の向上、症状の軽減)。
  • 多くの学問分野で広く理解されており、多くの分析枠組み(ANCOVA、ANOVA、多レベルモデリング)と互換性がある。
  • ランダム化と組み合わせると、介入効果に対する強力な因果的証拠を提供する。
  • 事前検査と事後検査のスコアは、サブグループ間での差次的変化の検出を可能にする(モデレーション分析)。

応用

  • 教育介入の評価 — カリキュラム、個別指導プログラム、または指導技術の前後の学習成果の測定。
  • 臨床および健康研究 — 医学的または心理的治療後の症状軽減、機能改善、または行動変化の評価。
  • 組織研修研究 — 研修プログラムの前後の従業員の知識、スキル、または態度の変化の測定。
  • 公共政策評価 — 雇用、健康、または学業成績などのアウトカムに対する政策変更または社会プログラムの影響の推定。
  • スポーツおよび運動科学 — 構造化されたトレーニング介入を通じたフィットネス、パフォーマンス、または心理的指標の追跡。

使い方

使い方

1

すべての参加者は、いかなる介入も導入される前に、アウトカム変数に対する測定(事前検査、O1)を完了する。このベースラインは3つの目的を果たす。それは、開始時のグループ間の等質性を確認し(特にランダム化と組み合わせた場合)、変化スコアの計算を可能にし、個人差を制御することによって統計的検出力を高める。

2

参加者は、介入群または対照(または比較)群にランダムに割り当てられる。ランダム割り当てこそが、真の事前検査-事後検査実験と準実験的変異体を区別するものである。ランダム化がない場合、グループ間の既存の違いは因果推論を脅かし、その計画は準実験的となる。

3

介入群は介入を受け、対照群は介入を受けないか、プラセボ、または標準的な治療を受ける。介入期間中の治療提供の期間と忠実度は、内的妥当性を確保するために標準化され、文書化されなければならない。

4

介入期間の後、すべての参加者は再び同じアウトカム測定(事後検査、O2)を完了する。事前検査と事後検査の間隔は、介入が効果を発揮するのに十分な長さであるべきだが、歴史的出来事や脱落が結果を著しく混同するほど長すぎないようにすべきである。

5

主要な分析では、各グループの事前検査から事後検査への変化を計算し、介入群の変化が対照群の変化よりも有意に大きいかどうかを検定する。一般的な分析アプローチには、共変量としての事前検査を用いた共分散分析(ANCOVA)、各グループ内での対応のあるt検定、または混合モデル反復測定分散分析(ANOVA)が含まれる。

よくある落とし穴

  • 事前検査を調整せずに事後検査スコアを分析すること — これは事前検査が提供する情報を破棄し、検出力を低下させる;単純な事後検査比較ではなく、共変量として事前検査を用いたANCOVAを使用する。
  • 事後検査と同じ測定ではない事前検査測定値を使用すること。これにより、変化スコアが解釈不能になる;両方の時点のアウトカム測定値は同一または厳密に平行な形式でなければならない。
  • 特に敏感な文脈(例:態度調査、透明な項目を持つ知識テスト)において、検査効果の脅威を無視すること — 事前検査が参加者を変える可能性が高い場合、ソロモン4群計画を検討する。
  • 事前検査-事後検査計画法を、ランダム化なしに自動的に因果的であると見なすこと — 準実験的バージョンでは、未測定の交絡因子が観察された変化の違いを依然として説明できる可能性がある。
  • 従属変数として生の変化スコア(O2 - O1)を回帰分析で使用すること — このアプローチは既知の心理測定上の問題がある;ANCOVAまたは残差化変化スコアが好ましい。

よくある質問

事前検査-事後検査データを分析するためにANCOVAと対応のあるt検定のどちらを使用すべきか?

共変量として事前検査を用いたANCOVAは、誤差項から事前検査の分散を除去し、検出力を高め、残存するベースラインの不均衡を調整するため、群間比較において一般的に好まれる。1群内の対応のあるt検定は、1群の事前事後チェックに適しているが、介入効果を成熟や歴史から分離することはできない。生の変化スコア(事後マイナス事前)をANCOVAの従属変数として使用することは避ける — 事前検査と事後検査を別々の変数として入力する。

検査効果の脅威とは何か、そしていつ重要になるのか?

検査効果の脅威とは、事前検査の実施自体が参加者を変えること、例えば、どの結果が重視されるかに気づかせたり、テスト項目を練習させたり、事後検査での不安を軽減させたりすることである。これは、アウトカム測定値が透明な内容を持つ知識テストである場合、または参加者が事後検査の前に事前検査の回答について熟考したり議論したりする可能性が高い場合に最も重要となる。これが深刻な懸念事項である場合は、ソロモン4群計画を使用して、事前検査を受けていない2つのグループを追加することを検討する。

事前検査-事後検査計画法は準実験的か実験的か?

どちらでもあり得る。介入群と対照群へのランダム割り当てがあれば、それは真の実験である(Campbell & Stanleyの古典的な事前検査-事後検査対照群計画法)。ランダム割り当てがない場合 — 例えば、既存の教室やグループを比較する場合 — それは準実験的計画法であり、選択バイアスを含む、内的妥当性に対するより強い脅威に直面する。

事前検査と事後検査の間隔はどれくらいにすべきか?

間隔は、介入が期待される効果を生み出すのに十分な長さであるべきだが、歴史効果、脱落、または治療とは無関係な発達的変化が変化スコアの解釈を困難にするほど長すぎないようにすべきである。普遍的な規則はない;適切な間隔は、介入の根底にある変化の理論と、効果のタイミングに関する先行証拠によって決定される。

事前検査-事後検査計画法にさらに多くの時点を追加できるか?

はい — 1つ以上の追跡測定を追加すると、反復測定または縦断的計画法が得られ、治療効果が持続するか、減衰するか、または増加するかを明らかにすることができる。この拡張は、事前検査-事後検査-追跡検査計画法と呼ばれることもある。分析アプローチには、混合モデルANOVAまたは成長曲線モデリングが含まれる。

関連する手法

参考文献

  1. Campbell, D. T., & Stanley, J. C. (1963). Experimental and Quasi-Experimental Designs for Research. Rand McNally.

    出版物の文献を開く
    コピーしました。
  2. Shadish, W. R., Cook, T. D., & Campbell, D. T. (2002). Experimental and Quasi-Experimental Designs for Generalized Causal Inference. Houghton Mifflin.

    ISBN:978-0395615560
    コピーしました。