昨天檢查題幹會不會帶答案,今天換看選項。很多問卷的題目沒有錯,受訪者卻在選項前卡成紅綠燈,原因通常不是他沒想法,而是答案沒有地方可以放。
例如問「你從哪裡得知活動資訊?」選項列了 Instagram、Facebook、學校網站與朋友推薦,看起來很完整。但有人可能從 LINE 群組看到,也可能先被朋友提醒、再去學校網站確認。這時如果只能單選,研究者得到的不是最真實的來源,而是受訪者被迫挑出的其中一個。
我用一份示範問卷,請 ChatGPT 檢查四件事:
AI 很容易犯的錯,是為了完整,把所有想得到的答案都塞進去。選項從五個長到十五個,看似滴水不漏,填答者卻要讀到忘記題目。
| 問題 | 例子 | 修正方向 |
|---|---|---|
| 重疊 | 每週 1~2 次/2~3 次 | 邊界只能屬於一組 |
| 遺漏 | 沒有 LINE、社團或其他 | 補常見來源或其他欄 |
| 層級混亂 | 社群媒體/Instagram/朋友 | 分類與子項目不要並列 |
| 作答方式不合 | 多個來源卻只能單選 | 改多選或明確問主要來源 |
再套回五項框架:正確性看選項是否符合題意;完整性看重要情況有沒有出口;可追溯性看選項從訪談、文獻還是團隊猜測而來;可使用性看受訪者能否快速判斷;人工修正成本則看回收後是否需要大量重編碼。
有些人會想,漏掉沒關係,放一個「其他」就好。但如果很多人都填其他,通常代表選項設計沒有掌握真實情境。更麻煩的是,開放文字可能出現同義詞、縮寫與錯字,後續要花時間重新分類。
我的做法是先用小規模試填收集常見答案,再決定哪些值得成為固定選項。「其他」保留彈性,但不能拿來遮住前期研究不足。
我也會請 AI 模擬幾種不同角色作答,但那只能找初步漏洞,不能替代真人試填。AI 想得到的角色,仍然受限於我提供的背景。
ChatGPT 能快速補選項、找重疊,Codex 能協助檢查區間與編碼一致性;但選項是否貼近生活,要靠前測與真實回答驗證。好選項不是多到像吃到飽,而是每位受訪者都找得到自己的盤子,也不用把三種答案硬擠在同一格。
對了,區間題一定要特別驗邊界。像「18~25歲、25~30歲」,25歲會瞬間擁有兩個家。請 AI 列出每個臨界值逐一測試,通常一分鐘就能抓到這種很小、分析時很煩的洞。
我以前看到「其他」會覺得很安心,像幫所有漏網答案留了逃生門。後來才發現,如果大家都往逃生門跑,問題可能不是受訪者太特別,而是正門根本沒有蓋在他們會走的地方。
你填問卷時最常在哪種選項前卡住?是沒有適合答案、兩個都能選、選項太多,還是明明能複選卻被限制單選?想知道哪個最容易讓人半途離場。