看懂民調》軍演民調反映民意?學者:問卷有疑義且過度解讀

  財團法人台灣民意基金會8月16日早上在台大校友會館發表八月民調報告,主題是「裴洛西訪台、中國軍演與台灣民意」。此全國性民調聚焦主題內容共十六個重點,經調查結果提出十五項主要研究發現供大眾參考。

  經檢視此民調是以全國住宅電話用戶為抽樣架構,年輕族群的觸及偏少,建議可同步使用手機用戶抽樣,以接觸一定比例的年輕族群。學者指出,這次民調在問卷的設計上,問題陳述、措辭、與社會大眾的連結皆有爭議之處與完善空間;在問卷解讀的部分,解讀者宜注意避免過度解讀的風險,建議可以在受訪者表態選項後,列出可能原因的封閉式選項,由受訪者自己說明原因,以達到更客觀的解讀。

本次解讀民調報告如下:
解讀日期:2022年8月25日
民調日期:2022年8月8日至9日
民調主題:裴洛西訪台、中國軍演與台灣民意
報導機構:財團法人台灣民意基金會、風傳媒、TVBS新聞網、中時新聞網、三立新聞網、新頭殼newtalk、聯合新聞網等
執行機構:台灣民意基金會、山水民意研究公司
調查地區:全台各縣市
樣本/誤差:以全國為範圍的二十歲以上成年人,有效樣本 1035 人;抽樣誤差在 95%信心水準下約正負 3.05 個百分點。並依內政部最新人口統計資料進行地區、性別、年齡及教育程度加權,以符合母體結構。
民調摘要:此全國性民調由台灣民意基金會游盈隆教授負責問卷設計、報告撰寫、研究發現的判讀及相關公共政策與政治意涵的解析;山水民意研究公司受基金會委託,主要負責抽樣設計、電話訪談與統計分析。訪問期間是2022年8月8-9二天,以全國為範圍的二十歲以上成年人,抽樣方法是以全國住宅電話用戶為抽樣架構,以系統抽樣加尾數兩碼隨機方式抽樣,有效樣本1035人,抽樣誤差在95%信心水準下約正負3.05 個百分點。依內政部最新人口統計資料進行地區、性別、年齡及教育程度加權,以符合母體結構。民調內容聚焦主題共十六個重點,經調查結果提出十五項主要研究發現供大眾參考。

爭點解讀:
一、使用市話調查,年輕族群的觸及情形是否偏少?
二、問卷設計上是否有爭議之處?
三、問卷解讀上是否有爭議之處?

專家分析:    
世新大學行政管理學系副教授陳俊明解讀:
  台灣地區的電話民意調查,若是使用中華電信住宅電話號碼簿,能夠接觸的人只有所有中華電信用戶的七成左右,此調查以系統抽樣加尾數兩碼隨機方式抽樣,目的是克服涵蓋率不足的問題,不過即使可以接觸到每一位電話用戶,還是有找不到一般人口結構裡,30歲以下年輕受訪者的疑慮。建議可同步使用手機用戶抽樣,以接觸一定比例的年輕族群。此外,此調查報告的交叉分析表只附上加權後的年齡層占比,加權前的占比則未提供,故無法檢視接觸年齡層的原始情況(圖一所示)。

▲附圖一,圖片來源: 財團法人台灣民意基金會


  針對問卷的設計,在問法上面也有需要注意的地方。以台灣人對中國八月軍演的態度題組來看,其題幹敘述出現「可能」這樣的問法,較易引發負面情緒的措辭,因此有引導受訪者思考、作答的可能(圖二所示)。對於台灣人的統獨傾向的題組,問題陳述並未提供「維持現狀」的選項,但解讀文字卻似乎因此而稱民進黨與國民黨前此均高估「維持現狀」者的占比,顯然並不恰當(圖三所示)。此外,有些問題的設計,牽涉國防、軍事等專業知識,民眾日常生活中一般與國防的連結較少,故問卷設計必須試想:受訪者是否看得懂?儘量淺顯白話,此問卷題目才有效度。

▲附圖二,圖片來源: 財團法人台灣民意基金會

▲附圖三,圖片來源: 財團法人台灣民意基金會


  有關問卷解讀的部分,解讀者宜注意避免過度解讀的風險。受訪者為何做出選項的選擇,如未在原始訪問時有就回答做追問的設計,實應注意解讀者的個人臆測,若是過度推論便會失去民調專業性與其公信力,故建議可以在受訪者表態選項後,列出可能原因的封閉式選項,由受訪者自己說明原因,以達到更客觀的解讀。
 

資料來源

財團法人台灣民意基金會 2022 年 8 月全國性民意調查 摘要報告

熱門推薦