2016.12.9

腦補式的民主時代即將到來

英國《牛津字典》(Oxford Dictionaries)公布2016年的年度字彙:「post-truth」(後真相的)意指「對於形塑公眾意見,客觀事實的影響力比不上情緒和個人信念的訴求」。

2016 英國脫歐公投

2016 美國總統大選前民調 46 vs. 43 = 希拉蕊勝出?

2016 美國總統大選結果

一個非常近期的網路調查結果

網路調查 Nov.19-26, 2016

問卷完成率

請問您平常(沒有選舉的時候)會不會注意政治人物的民調數字(像是滿意度、支持度)?

[0]會 [1]不會

那選舉前呢?

[0]會 [1]不會

整體來說,您相不相信選舉民調的數字?

[1] 完全不相信 [2] 還算相信 [3] 完全相信

民調多是公正客觀的。

[0]不同意 [1]同意

民調是社會的亂源。

[0]不同意 [1]同意

民調是有心人用來操作政治的工具。

[0]不同意 [1]同意

民調總是不準。

[0]不同意(民調還算準) [1]同意(民調不準)

民意調查為什麼不準?

造成民調結果「不準」的原因有兩類:

  • 抽樣誤差 (sampling error)
  • 非抽樣誤差 (non-sampling error)

抽樣誤差是怎麼來的?

母體與樣本

分層抽樣

分層抽樣

電話隨機撥號(RDD)

Random Digit Dialing

秘密在這裡

中央極限定理( the central limit theorem, CLT)

民意調查「可信」(也就是可推論)的理論基礎

選舉時候選人的民調,領先1%就算領先。

[0]不同意 [1]同意

如果有一個候選人領先對手兩個百分點(2%),我會說他/她是領先的。

[0]不同意 [1]同意 [95] 不確定/不清楚

選舉時的民調要領先超過6%以上才算領先。

[1]同意 [2]不同意 [3]不清楚

抽樣誤差之外,還有五種非抽樣造成的誤差

非抽樣誤差 (Non-Sampling Error)

  • 設定誤差 (specification error)
  • 涵蓋誤差 (frame or coverage error)
  • 無回覆誤差 (nonresponse error)
  • 測量誤差 (measurement error)
  • 處理誤差 (processing error)

1. 設定誤差 (specification error)

  • 想測的測念與實際的問題不一致
  • 例如,要測國家認同,卻問統獨

2. 涵蓋誤差 (frame or coverage error)

  • 有些人真的問不到
  • 例如,純手機族、住宿、服役、夜班、坐牢…

3. 無回覆/無反應誤差 (nonresponse error)

  • 單元無反應 (unit nonresponse):有些人真的不配合訪問
  • 項目無反應(item nonresponse):有些題目真的問不出答案
  • 例如:你心中最支持那一黨?

4. 測量誤差 (measurement error)

  • 不同訪問方法可能導致不同答案
  • 例如:面訪給的答案可能跟電訪、網調的答案不同?

5. 處理誤差 (processing error)

  • 訪問或處理資料過程中可能出錯
  • 例如:計算藍綠比例時直接刪除中間選民(因為他們沒有給出政黨傾向答案)

誤差之間的環環相扣

還有…受訪者本身會受問卷和問法的影響

  • 社會期待效應(social desirability)
  • 題序效應(question order)
  • 問卷型態效應(mode of administration)
  • 機構效應(institutional effects)

所以問什麼很重要(問卷題的設計是關鍵)

  • 信度(reliability):不同場合詢問得到的答案一致
  • 效度(validity):概念與測量所得的答案貼合
  • 圖示

認真來想一想

民意調查到底可以調查什麼?

支持度/滿意度/賽馬?

政策偏好?

小心 Garbage In, Garbage Out!

輿情調查?

決定候選人?

中華民族?中國人?

統獨當話題?

你同意嗎?

民調很可能已經成透過媒體用來協助民眾腦腦與動員的工具

其實還是有民眾抱著希望,覺得民調是民主治理必要的一環。

[0]不同意 [1]同意

民調其實可以問更多關於你我的價值觀和生活:

其實統獨還可以這樣問:

您覺得那個單位所做民意調查最值得信賴?

[1]民間調查公司做的調查 [2]學術單位做的調查 [3]政府部門做的調查
[4]媒體做的調查 [5]都不信任 [6]都算信任

電話調查不行了

用網路調查可以解決問題嗎?

NO! 網路調查的結果不能推論!

對於國內民調業者,你有什麼話想告訴他們呢?

[1]要更努力 [2]前景堪憂 [4]有你真好 [5]我真正想對民調業者說的是_

民調業該做什麼?如何不會成為一灘死水?

FiveThirtyEight’s Pollster Ratings

劉老師的觀點:

揭露調查的過程、問卷和樣本結構才是治本清源之道

微笑小熊調查小棧

smilepoll.tw

smilepoll

結語

不要輕易用民調推論

truth and lie

truth?