認知予備テスト

認知事前テスト、または認知面接は、被験者が面接の質問にどのように答えるかに関するデータを収集するフィールド調査方法です。これは、テストまたはアンケートを実施する前に評価するものです。^[1] これにより、調査員は調査の回答に関するフィードバックを収集でき、質問が研究者の意図する構成を測定しているかどうかを評価するために使用されます。収集されたデータは、アンケートの問題のある質問を調整してから、全サンプルの人々に調査を実施するために使用されます。^{[2] [3] [4] [5] [6]}

認知面接では通常、被験者から以下の情報を収集します: 被験者がどのように回答を組み立てたかについての評価、被験者が質問の意味をどのように解釈したかについての説明、被験者が質問に答える際に困難を感じたことの報告、および被験者の回答の状況を明らかにするその他の情報。

認知事前テストは、面接、テスト、アンケートの妥当性をテストする上で不可欠であると考えられている。^[7]

これらの事前テストの目的は次のとおりです。

• テストや面接が理解可能であることを確認する
• 参加者がテストで抱えていた問題に対処する
• 参加者の質問に対する関心と好奇心を測定する
• 回答のスケールを測定する（例：全体のスケールが使用されているか、回答が多すぎるか）
• 質問の順序やその他の文脈効果を評価する
• 面接官の問題
• テストに関する技術的な問題に対処する（例：技術的な不具合、文法上の誤りなど）
• 試験や面接にどれくらいの時間がかかるかなどです。^{[1] [4] [6]}

一般的に、認知事前テストを実施する際には多くの方法が実践されています。これには、従来の事前テスト、認知面接、行動コーディング、回答者への報告、グループディスカッション、専門家によるレビュー、視線追跡、ウェブ調査などが含まれます。^[1]

従来の事前テスト- これは、実際のテストや面接がどのようなものになるかを模倣してモデル化しようとするリハーサルに似ています。実際のテストや面接の前に行われる実際のテストや面接のシミュレーションです。実際の面接やテストで使用される方法は、この事前テストの方法で使用する必要があります。^{[1] [8]}

認知事前テスト（認知面接） - 従来の事前テストと非常によく似ています。ただし、参加者はテストを受ける際に積極的に質問されます。面接またはテスト中に実施されます。^{[1] [6]}

調査方法は、書面調査、口頭調査、電子調査など、さまざまな方法で実施されることもあります^[4]

面接官が認知事前テストで実施する特定のテクニックは、面接やアンケートを効果的に実施するために必要な情報を抽出するために存在します。

思考発話法 -これは、面接官が面接対象者に自分の考えとその答えに至った経緯を声に出して話すように求めるときに行われます。これは面接中または面接後に同時に行うことができます。^{[1] [2]}

プロービング技法- これは、インタビュアーがインタビュー対象者に1つ以上のフォローアップの質問をするときに行われます。彼らは、尋ねられた質問、使用された用語、または応答について「プロービング」します。^{[1] [2]}プロービングは同時（タスク中に、タスクを妨げない程度に）または遡及的（タスク後）に行うことができます。^[9]

言い換え -これは、面接官が面接対象者に自分の言葉で質問を繰り返すように依頼するときに行われます。これは、質問が理解可能であることを確認するためのテストです。^[1]

信頼度評価- これは、面接官が面接対象者に質問にどれだけ正しく答えたかの自信を尋ねるときに行われます。^[1]

ソーティングまたはカードソーティング- これは、インタビュアーがインタビュー対象者に質問したり、インタビュー対象者が特定の状況や用語をどのように分類しているかを理解しようとするときに行われます。^{[1] [9]}

ビネット- 1人以上の架空の人物についての短い説明（心理学や社会学の実験で使用されるビネットや定量調査研究におけるアンカービネットに類似）であり、調査に関連する決定に関する回答者の認知処理を調査するために使用されます。^{[9] [10]}

ウェブプロービング -この手法は、認知インタビュープロービング手法をウェブ調査に実装するものである。ウェブ経由で実施されるため、標準化、匿名性、大規模かつ迅速な調査が可能となるという利点がある。しかし、ウェブプロービングはオンライン人口グループにしか到達できず、プローブ非回答があり、コンテンツの観点から不十分なプローブ回答をフォローアップすることができない。^{[11] [12]}

サンプルサイズは事前テストにおいて非常に重要なトピックです。5～15人の小規模サンプルが一般的です。一部の研究者は、サンプルサイズは少なくとも30人あれば最適で、それ以上であればあるほど良いと示唆していますが、^[13]現在のベストプラクティスは、変更を再テストするために調査を数回に分けて設計することです。たとえば、アンケートの事前テストを行う場合、27人の参加者を1回実施するよりも、9人の参加者を3回実施する方が効果的です^。[9]

参加者にアンケートについて伝える方法は、参加型事前テストと非申告型事前テストの2つがある。^[4]

• 参加型事前テストは、参加者が自分が受けているテストが単なる練習であることを確実にするものである。これは主に、プロービングや思考発話法、または認知的事前テストや面接で用いられる^[4]
• 申告なしの事前テストは、参加者がこれが練習であることを知らないテストです。これは従来の事前テストに最も似ています。研究で複数の事前テストが行​​われる場合、参加型事前テストを最初にし、次に申告なしの事前テストを行うことが推奨されます。^{[4] [6]}

最近の研究では、非英語言語で認知インタビューを実施する場合、調査研究者の間で一般的に行われていた、サンプルの選択と募集を非英語圏の単一言語話者に限定しないことが推奨されています。^{[14] [15]}目的的サンプリングによって、アクセスが困難な回答者や回答者の特性を募集する場合、コミュニティベースの募集（口コミ、コミュニティリーダーからの推薦）は広告よりも効果的です。^{[16] [17] [18]}

認知面接は、国勢調査局^{[19] [20]、} 国立健康統計センター（NCHS）^[21]、労働統計局^[22]などの米国連邦政府機関によって定期的に実施されています。NCHSは、国立科学財団やGESIS（ライプニッツ社会科学研究所）など、認知面接プロジェクトを実施し、報告書を寄贈した米国および国際機関のデータベースを維持しています。^[23]

異文化認知面接は、調査質問の同等性と困難の原因を評価するため、また翻訳に関連する問題を解決するために実施される。^{[24] [25]}コミュニケーションスタイルと文化的規範の違いにより、プロトコルの設定^[26]と設計^[27]、ビネットの使用^{[10] 、および口頭によるプロービング[28]}には適応が必要である。

2016年10月、米国行政管理予算局（OMB）は、統計政策指令第2号補遺：認知インタビューの基準とガイドラインを発行し、米国連邦政府の研究によって、または米国連邦政府の研究のために実施される認知インタビューの7つの基準が含まれていました。[1]研究者によって提案された別の基準は、認知インタビュー中に何が行われたか、それらのインタビューの手順と結果に基づいて結論がどのように出されたかを明らかにするために10カテゴリのチェックリストを適用する認知インタビュー報告フレームワーク（CIRF）です。^[29]さらに、認知インタビュー研究を管理する際には、プロジェクト管理アプローチが推奨されています。^[30]翻訳された調査では、認知インタビューのテクニック、参加者の選択と募集、およびプロジェクト管理アプローチを調整して、使用への適合性を高める必要があります。^[27]