【文章內(nèi)容簡介】 第三節(jié) 信度與效度的概念 研究調(diào)查問卷是否很好地反映目標總體（目標值）特征； 檢驗被調(diào)查者的回答是否真實可信（一致性或穩(wěn)定性） 一、 信度 (Reliability) 問卷調(diào)查 所得結(jié)果 的一致性或穩(wěn)定性的程度， 也稱為可靠性或精確度。 ? 一致性：同一群受訪者關于同一項目的各種問卷調(diào)查的 結(jié)果間顯示高度相關。 ? 穩(wěn)定性：同一群受訪者不同時間（間隔時間較短，如兩周） 或不同空間下接受相同的問卷調(diào)查，結(jié)果差異很小。 古典真實得分評價模型 調(diào)查值（ X） =真實值（ T） +誤差（ E） 誤差（ E） =系統(tǒng)誤差（ I） +隨機誤差（ R） 例 2 5位被調(diào)查者對某銀行的柜臺服務滿意度調(diào)查，評分 為 0100分。前后間隔兩周，進行了兩次評分，評分 結(jié)果如下，請問兩次評價結(jié)果是否可信？ 被調(diào)查者 第一次調(diào)查評分 第二次調(diào)查評分 真實評分 （假定） A B C D E 85 77 68 67 61 67 88 70 60 76 82 75 71 68 62 二、 效度 (Validity) 問卷或測量工具測出調(diào)查結(jié)果的正確程度，即問卷結(jié)果與 目標值之間的接近程度，反映被測特征的真實性。 例如： 關于居民收入狀況的問卷調(diào)查。如果直接詢問被調(diào)查者 的收入和繳納的所得稅，則調(diào)查所得收入數(shù)據(jù)很可能會 較大地低于居民的真實收入，因而認為問卷的效度較差。 三、信度與效度誤差來源 （一）信度誤差來源 —— 隨機誤差 ① 被調(diào)查者個人狀況：身體、作答動機、情緒等 ② 測驗情境：測驗程序、環(huán)境、意外事件等 ③ 測驗本身：難易程度、題意、抽樣方式等 ④ 計分：主觀計分、登記錯誤等 （二）效度誤差來源 —— 系統(tǒng)誤差 如：問卷設計有缺陷，用詞含義不清，造成多種理解而 提供不準確信息產(chǎn)生的誤差；問卷中“無回答”；或 敏感性問題調(diào)查與真實情況不一致產(chǎn)生的誤差；等。 第四節(jié) 信度的評價分析方法 信度系數(shù)大致分為三類： ① 穩(wěn)定系數(shù)（跨時間的一致性，如重測信度、） ② 等值系數(shù)（跨形式的一致性，如復本系數(shù)、） ③ 內(nèi)在一致性系數(shù)（跨項目的一致性，如折半信度、 克朗巴哈 α信度、） 調(diào)查值（ X） =真實值（ T） +隨機誤差（ R） 2 2 2X T R? ? ???22221TRXTXXR ????? ? ?定義 信度系數(shù) 為： 影響信度評價的主要因素 ? 測驗題數(shù)（測驗項目越多，信度越高）； ? 樣本的同質(zhì)性； ? 測驗的難度； ? 計分的客觀性（主觀題與客觀題的比例）； ? 信度的估計方法（如折半系數(shù)常比 α系數(shù)高） 信度的評價方法 （一）重測信度法（ Kappa系數(shù)、 Spearman等級相關系數(shù)、 Pearson積矩相關系數(shù)） （二）內(nèi)部一致性信度法（ Cronbach α系數(shù)） （三）復本信度法 （四）折半信度（ SpearmanBrown公式、 Flanagan校正公式、 Rulon校正公式） （五）評分者信度（ Kendall協(xié)同系數(shù)） （一）重測信度法 用同樣的問卷對同一組被調(diào)查者間隔一定時間內(nèi)（一般 為 24周）重復調(diào)查，考查問卷結(jié)果的穩(wěn)定性程度。 定類數(shù)據(jù)的重測信度 —— Kappa 系數(shù) 211, [ ( ) ( ) ( ) ( ) ]aeaeaePPkPadP P a c a b b d c dnn????? ? ? ? ? ? ?其中 即： （卡巴系數(shù)） 第一次調(diào)查 合計 是 否 第二次 調(diào)查 是 否 a b c d (a+b) (c+d) 合計 (a+c) (b+d) n 調(diào)查問卷對某一特征進行“是、否”判斷 表 3 若 重測信度的評價或檢驗 aaakkk????一致性很好 一致性較好 一致性較差 或用標準正態(tài)分布檢驗： 2( 1 ),( 1 )a a aaaaek P PZnP??????檢驗統(tǒng)計量為 當 2 6 , ( 5 )aZZ ? ?? ? ?，認為兩次調(diào)查結(jié)果在 一定程度上具有可重復性。 例 3 50位消費者試用兩種產(chǎn)品 X和 Y，并請他們回答兩者中 更喜歡哪一種產(chǎn)品。兩周后，進行第二次測試，并同 樣回答對這兩種產(chǎn)品的偏好。求 Kappa 系數(shù)？ 第一次試用 合計 更喜歡 X 更喜歡 Y 第二次 試用 更喜歡 X 更喜歡 Y 21 5 6 18 26 24 合計 27 23 50 定序數(shù)據(jù)的重測信度 —— Spearman 等級相關系數(shù) )1(61212???? ??nndr ni isidn21)2(ssrnrT???為等級項數(shù)； 為兩組測量值的等級之差。 作檢驗統(tǒng)計量 01: , :HH不 存 在 等 級 相 關 存 在 等 級 相 關或者 定量數(shù)據(jù)的重測信度 —— Pearson 積矩相關系數(shù) 2 2 2 2[ ( ) ] [ ( ) ]i i i ixyi i i in x y x yrn x x n y y????? ? ?? ? ? ?ix iy為第一次調(diào)查的數(shù)值， 為第二次調(diào)查的數(shù)值， n為調(diào)查單位數(shù) 其中： （二）內(nèi)部一致性信度法 調(diào)查問卷各個項目間相關程度，即問卷中單個項目與全部 項目間的相關性、一致性。用 Cronbach α信度系數(shù)度量， 表示問卷調(diào)查結(jié)果總變異中由不同被調(diào)查者導致的比例。 212[ 1 ]1kiiXSkkS? ?????k2iS2X為調(diào)查的項目（題項）總數(shù)， 為所有調(diào)查對象的第 i項目得分的方差， 為所有調(diào)查對象的全部項目所得分之和（即所得總分）的方差。 其中 即： （克朗巴哈系數(shù)） 01???0. 8? ?0. 6 0. 8???0. 6? ?表明一致性很好； 表明一致性較好； 表明一致性較差。 系數(shù)值越大，表明問卷內(nèi)部一致性越好； 評價 例 4 對前述例中的李克特量表，計算 α信度系數(shù)。 首先，將李克特量表中負相關的語句作 “逆向處理” ， 使其變成正相關，以保證各項目得分方向的一致性。 表 1（續(xù)） 李克特評分法 態(tài)度 項目 非常同意 同意 中立 不同意 非常不同意 A1（贊成） A2（贊成） A3（不贊成） A4（不贊成） A5（不贊成） A6（贊成） A7（贊成） A8（贊成） A9（贊成） 5 5 1 1 1 5