問卷效度的評估涉及多箇方面,包括內容效度、構想效度、判準效度、內部一致性、重測信度和分半信度等。以下是這些方面的具體操作:
內容效度。確保問卷涵蓋了研究領域的所有關鍵方面,可以通過專家評審或文獻回顧等方法評估。問題的設計和選項的設置應與研究目的相符。
構想效度。評估問卷是否測量了所要研究的概念,可以通過與其他已被證實有效的測量工具進行比較來確認。
判準效度。將問卷的測量結果與已知的標準進行比較,以確定問卷是否能夠準確地預測或區分感興趣的變量。這可分爲預測效度和同質效度,預測效度涉及將問卷的結果與未來的行爲或結果進行比較,而同質效度涉及將問卷的結果與其他測量同一概唸的工具進行比較。
內部一致性。衡量問卷中各項之間的一致性,確保它們在測量相同的概念時是相互關聯的。常見的內部一致性檢驗方法包括Cronbach's alpha係數。
重測信度。通過在一段時間內重複進行相同的測量,檢查問卷結果的穩定性,適用於測量相對穩定的概念。
分半信度。將問卷分爲兩部分,分別進行測量,然後比較兩者的結果,以評估問卷內部一致性。
參與者反饋。向參與者徵求對問卷的意見和反饋,瞭解他們對問題的理解是否與研究者的意圖一致,以及是否存在歧義或困擾的地方。
此外,在設計問卷時,還需要注意樣本的代表性、問卷的回收率、校標的合理性以及受訪者的狀態,這些因素都會影響問卷的效度。