アンケート結果の偏りを疑う：誰が答え、誰が答えていないかを点検する

偏りは4つの入口から入る

「偏り」とひとまとめにすると対処できません。入口で分けます。

1. 届かなかった人：配布経路に載らなかった人（メルマガ未登録、SNSを見ない人など）
2. 答えなかった人：届いたのに回答しなかった人（回収率が低い場合は特に重要）
3. 答え方が歪んだ人：設問や選択肢、回答環境のせいで本音とずれた人
4. 集計・解釈の段階：回答者の構成を確認せずに全体の話へ広げてしまう場合

2つ目について、同サイトの1948年の大統領選予測の解説は、電話調査では「誰が調べているのか」「秘密が守られるのか」が確認しにくく回答率が低くなりうること、日中に電話に出やすい層へ偏るおそれがあることを指摘しています。電話調査の事例ですが、ウェブアンケートでも回答者と非回答者の違いを点検する必要があります。

原因別チェック表

使い方は、各行の「点検する問い」に答え、手元の数字で確認し、右端の「報告での扱い」に従うだけです。

• 配布経路の偏り、起きやすい場面：メルマガ、SNS、店頭QRだけで募集、点検する問い：知りたい相手のうち、この経路に載らない人は誰か、手元でできる確認：母集団（顧客名簿、購入者数）と配布先の人数を並べる、報告での扱い：「配布経路に届いた人の中で」と限定する
• 自己選択、起きやすい場面：自由参加、「ご意見ください」型の募集、点検する問い：強く満足／不満な人だけが答えていないか、手元でできる確認：評価の分布が両端に偏っていないか見る、報告での扱い：満足度の水準は言わず、理由の種類の把握にとどめる
• 無回答、起きやすい場面：回収率が低い、設問の途中離脱が多い、点検する問い：答えなかった人は答えた人とどう違うか、手元でできる確認：回収率（回答数÷配布数）、設問ごとの未回答率、報告での扱い：回収率を明記し、低い場合は割合の断定を避ける
• 設問・選択肢、起きやすい場面：誘導的な文言、必須回答、選択肢の不足、点検する問い：本音を選べる選択肢があったか、手元でできる確認：「その他」「わからない」の有無、設問順を見直す、報告での扱い：設問文を併記し、解釈の幅を示す
• 重複・目的外回答、起きやすい場面：謝礼つき、公開リンク、点検する問い：1人が複数回答／謝礼目当ての回答がないか、手元でできる確認：回答時刻の集中、自由記述の重複、報告での扱い：除外した件数と基準を書く
• 集計の偏り、起きやすい場面：回答者の構成が未確認、点検する問い：年代・利用歴などの内訳が母集団とずれていないか、手元でできる確認：回答者の内訳を母集団の内訳と並べる、報告での扱い：ずれの大きい層は、別集計か「参考値」扱いにする

重み付けで補正する方法もありますが、母集団の内訳が分かっていることが前提で、回答者がごく少ない層は補正しきれません。まずは補正に頼らず、言える範囲を狭める判断を優先してください。

AIに任せる部分と、人が確認する部分

AIに向いているのは、配布の仕組みの説明から偏りの候補を洗い出し、チェック表を埋める下書きを作る作業です。AIは、あなたの顧客が実際にどんな人か、回収率が何を意味するかを知りません。次の線引きで使います。

• AIに渡す：配布経路、配布数、回答数、設問文、回答者の内訳（年代別の件数などの集計値）
• 渡さない：個人が特定できる回答データ、顧客名簿、社外秘の数値。必要なら説明用の数字に置き換えます
• 人が確認する：AIが挙げた偏りが実際に起きているか、母集団の数字が正しいか、結論の言い切り方が妥当か

そのまま使える依頼文

あなたはアンケート結果の点検を手伝う調査アシスタントです。
下の「調査の概要」だけを根拠に、結果に偏りが生じうる原因を挙げてください。

【調査の概要】
- 知りたい相手：（例）当社サービスの利用者全体
- 配布経路と配布数：（例）メルマガ会員8,000人に配信
- 回答数：（例）312件
- 回答者の内訳：（例）20代15%、30代30%、40代35%、50代以上20%
- 設問文と選択肢：（ここに貼る）

【出力形式】
1. 偏りの候補を「届かなかった人／答えなかった人／答え方の歪み／集計の段階」に分けて表で出す
2. 各候補について、私が手元の数字で確認する方法を1つずつ示す
3. 「言える範囲」を2文、「言えない範囲」を2文で下書きする
4. 資料にない情報は推測せず、「不明」と書く

出力は下書きです。確認方法の欄に出た項目を、実際に自分の手元の数字で確かめてから使います。

「言える範囲」の書き方例

次は、数字も含めて説明用の例です。実際の調査結果ではありません。

条件（説明用の例）：メルマガ会員8,000人に配信し、312件の回答を得た（回収率3.9%）。「満足」と答えた人は78%だった。

回収率は312÷8,000で約3.9%です。この条件で、報告書に添える文は次のように書けます。

悪い例「お客様の78%がサービスに満足している」

よい例「メルマガ会員への調査（配信8,000人、回答312件、回収率3.9%）では、回答者の78%が『満足』を選んだ。回答者は自分から応じた人であり、満足度が高い人ほど答えやすい可能性がある。このため、利用者全体の満足度を表す数字としては扱わず、改善要望の内容を知る材料として使う。メルマガを受け取っていない利用者の意見は、この調査には含まれていない」

書き方の型は次のとおりです。

• 範囲：「〇〇経路で募集した、回答者の中では」と対象を限定する
• 根拠の数字：配布数、回答数、回収率を併記する
• 偏りの方向：どちらに寄りうるかを一文で書く
• 使い道：「全体の割合」ではなく、「意見の種類の把握」「仮説づくり」などに限る
• 含まれていない人：届かなかった層を名指しする

報告前の最終確認

• 「全体」「多くのお客様」と書いた箇所を、回答者に限った表現へ直したか
• 回収率と配布経路を、グラフの近くに書いたか
• 偏りが疑われる設問の結果を、数字の大小で判断に使っていないか
• 追加の調査（別経路での募集、無作為に選んだ相手への再依頼）が必要なら、その提案を報告に入れたか

偏りを完全になくせない調査は多くあります。それでも、「誰の声か」を明記すれば、結果は読み手が使える情報になります。