調查問卷的信度與效度

1、調查問卷的設計,,,,問卷的定義與作用,詢問目標,應答者的信息,問卷,,,,訪問實施,,數(shù)據采集和錄入,,數(shù)據處理,,數(shù)據分析,調研結果,,,建議,問卷的作用 在需要對受訪人進行詢問的市場調研中：提供了標準化和統(tǒng)一化的數(shù)據收集程序保證每個受訪者看到或聽到相同的文字和問題保證訪問人員的問題詢問一致……,,問卷在詢問調研過程中起到了非常重要的翻譯作用，是關鍵工具。,如何進行問卷設計,,,實施,準備問卷,預先測試及修訂,獲得各相關方

2、面的認可,評價問卷和編排,確定問卷的流程和編排,問卷設計過程（1）,確定問題的用詞,確定問題回答形式,確定數(shù)據收集方法,確定調研目的、來源和局限,調研需求一般來自市場部經理、品牌經理或新產品開發(fā)部門，因為在決策過程中所需信息不足而發(fā)起。調研目的要提供委托方的所需的市場信息，幫助他們解答市場疑惑。因此，前期的溝通要充分、問題確認清晰。,調研目標確認后，要考慮從誰那里獲得數(shù)據。也就是要明確訪問的對象，不同的訪問對象回答哪些不同的問題。,調研

3、局限包括來自被訪者、訪問員、預算、時間等。,實施,準備問卷,預先測試及修訂,獲得各相關方面的認可,評價問卷和編排,確定問卷的流程和編排,問卷設計過程（1）,確定問題的用詞,確定問題回答形式,確定數(shù)據收集方法,確定調研目的、來源和局限,調研需求一般來自市場部經理、品牌經理或新產品開發(fā)部門，因為在決策過程中所需信息不足而發(fā)起。調研目的要提供委托方的所需的市場信息，幫助他們解答市場疑惑。因此，前期的溝通要充分、問題確認清晰。,調研目標確認后，

4、要考慮從誰那里獲得數(shù)據。也就是要明確訪問的對象，不同的訪問對象回答哪些不同的問題。,調研局限包括來自被訪者、訪問員、預算、時間等。,實施,準備問卷,預先測試及修訂,獲得各相關方面的認可,評價問卷和編排,確定問卷的流程和編排,問卷設計過程（2）,確定問題的用詞,確定問題回答形式,確定數(shù)據收集方法,確定調研目的、來源和局限,面訪,電話訪問,街頭攔截,定點攔截,入戶訪問,深度訪問,神秘顧客訪問,,不同類型的訪問方法對應的問卷形式有很大差異,實

5、施,準備問卷,預先測試及修訂,獲得各相關方面的認可,評價問卷和編排,確定問卷的流程和編排,問卷設計過程（3）,確定問題的用詞,確定問題回答形式,確定數(shù)據收集方法,確定調研目的、來源和局限,開放題開放式問題的作用詢問原因描述感受補充 開放式問題的提問規(guī)范追問（三次）逐字記錄歸類和編碼,封閉題 封閉題的作用 了解不同類型的分布 找到主要特征 量化程度和評價 封閉題的提問規(guī)范 避免引導 選項要盡量全面 描述簡單

6、清晰 單選和多選的設計要慎重,,優(yōu)點：信息豐富封閉題的補充了解受訪者的真實反應,缺點：不容易處理編碼費時費力容易受訪問人員的影響容易忽略內向的受訪者,,優(yōu)點：操作方便，便于數(shù)據處理無傾向，不受被訪問人的性格影響不受訪問人員的影響,缺點：必須進行預先的研究選項范圍的確定容易產生次序誤差訪問程序要規(guī)范必須對訪問人員培訓,實施,準備問卷,預先測試及修訂,獲得各相關方面的認可,評價問卷和編排,確定問卷的流程和編排

7、,問卷設計過程（4）,確定問題的用詞,確定問題回答形式,確定數(shù)據收集方法,確定調研目的、來源和局限,1.用詞必須清楚 說明調查 描述清晰，統(tǒng)一的基準和指代，不要使被訪問人的回答建立在他自己的理解之上 避免專業(yè)詞匯 每個受訪問人代表獨立的參考構架 避免一個句子中出現(xiàn)兩種以上的問題,2.避免引導式的問題,3.考慮被訪問人的回答能力 認知和感受的關聯(lián) 記憶內容和時間效應,4.考慮被訪問人的回答意愿 第三人稱方式提問 對等誤差

8、表達,實施,準備問卷,預先測試及修訂,獲得各相關方面的認可,評價問卷和編排,確定問卷的流程和編排,問卷設計過程（5）,確定問題的用詞,確定問題回答形式,確定數(shù)據收集方法,確定調研目的、來源和局限,1.甄別部分,2.以非敏感、并能引起興趣的問題開始,3.先問一般問題,4.需要思考的問題放中間,5.敏感問題放在主體問卷的后面,6.人口統(tǒng)計學信息,,主體問卷 邏輯關系 不同類型用戶的區(qū)分 跳轉提示,實施,準備問卷,預先測試及修訂,獲得各

9、相關方面的認可,評價問卷和編排,確定問卷的流程和編排,問卷設計過程（6）,確定問題的用詞,確定問題回答形式,確定數(shù)據收集方法,確定調研目的、來源和局限,1.問卷時間是否過長 面訪控制在30分鐘以內 電話訪問控制在15分鐘以內 深度訪問控制在1小時左右,2.是否回答了研究目標所需的問題，問題是否必要,3.不同類型問卷的形式和外觀面訪：提示卡電話訪問：訪問員注意事項和CATI用問卷的形式要強調跳轉關系深度訪問中問卷的樣式不重要，

10、對于訪問人員的要求很高,4.敏感問題放在主體問卷的后面,4.問卷樣式要統(tǒng)一公司標志，封面統(tǒng)一的格式字體字號的一致選擇項不要跨兩個頁面著重標志,實施,準備問卷,預先測試及修訂,獲得各相關方面的認可,評價問卷和編排,確定問卷的流程和編排,問卷設計過程（6）,確定問題的用詞,確定問題回答形式,確定數(shù)據收集方法,確定調研目的、來源和局限,,實施,準備問卷,預先測試及修訂,獲得各相關方面的認可,評價問卷和編排,確定問卷的流程和編排,問卷

11、設計過程（6）,確定問題的用詞,確定問題回答形式,確定數(shù)據收集方法,確定調研目的、來源和局限,,實施,準備問卷,預先測試及修訂,獲得各相關方面的認可,評價問卷和編排,確定問卷的流程和編排,問卷設計過程（6）,確定問題的用詞,確定問題回答形式,確定數(shù)據收集方法,確定調研目的、來源和局限,,實施,準備問卷,預先測試及修訂,獲得各相關方面的認可,評價問卷和編排,確定問卷的流程和編排,問卷設計過程（7）,確定問題的用詞,確定問題回答形式,確定數(shù)

12、據收集方法,確定調研目的、來源和局限,內部確認，獲得其他同事的意見和建議 委托方確認，獲得客戶的反饋，必要的時候進行講解,試訪和修訂研究員親自試訪問，獲得親身體會執(zhí)行人員對于陌生受訪者的訪問，獲得現(xiàn)場實施方面的反饋意見時間和預算允許的范圍內，最好進行預調研，了解全面實施后的總體情況,實施,準備問卷,預先測試及修訂,獲得各相關方面的認可,評價問卷和編排,確定問卷的流程和編排,問卷設計過程（8）,確定問題的用詞,確定問題回答形式,確

13、定數(shù)據收集方法,確定調研目的、來源和局限,問卷的印刷或編程 調研實施調研說明：給代理公司明確的項目調研目的，配額，時間，訪問條件，抽樣說明，訪問要求等文字化的說明訪問員培訓說明：訪談要點，接觸方式，配額，工作記錄表（接觸情況，復核情況）通話記錄,培訓可能會占用你一些的時間和精力，但是想要調研的準確和真實，對于訪問實施相關方面的培訓必不可少！,,一、 Questionnaire Validity 二、 Example of

14、 Validity 三、 Questionnaire Reliability 四、 Example of Reliability 五、 The correlation between Reliability and Validity,Main Content,1.誤差公理,誤差(error)是指對事物某一特征的度量值偏離真實值的部分，即測定值與真實值之差，樣本統(tǒng)計量與總體參數(shù)之差。

15、 沒有一項研究推論能夠達到百分之百的真實。 No study is free of errors, the inferences are never perfectly valid. 誤差公理：實驗結果都會有誤差，誤差自始至終存在于一切科學實驗的過程之中。,2.誤差的種類(types of error),,（1）隨機誤差（random error） 隨機誤差是由不確定原因引起的，不可避免和消除。 其偏離總體的方向不能確定

16、。包括隨機測量誤差和抽樣誤差。,,隨機測量誤差（random measurement error） ：沒有固定的傾向，可使多次觀測結果有大有小。 抽樣誤差（sample error） ：由于抽樣造成的樣本指標與總體指標之間的差別。,（2）系統(tǒng)誤差（systematic error）,是由于偏倚（使研究結果按照一個方向偏離總體， bias）產生的錯誤結果，可校正和消除。,(3) 過失誤差（gross error)是由于科研設計錯誤，

17、或實驗者的主觀片面、粗心大意引起的誤差。必須避免和剔除！,問卷測驗中測量誤差通常來源于兩個方面： 一是產生于問卷測驗過程中的誤差，稱為測量誤差（measurement Error），也稱為隨機誤差（random error）； 二是由問卷的結構質量造成的誤差，稱為系統(tǒng)誤差（system Error）。measurement Error reliabilitysystem Error

18、 validity,,,一、調查問卷的效度,The validity of a questionnaire,The validity of measures,The question of validity is how far can we be sure that a measure really does reflect the concept to which it is supposed to be refe

19、rring.,,效度（validity）通常是指問卷的有效性和正確性，亦即問卷能夠測量出其所欲測量特性的程度。 對于一個標準測驗來說，效度比信度更為重要。,,1.效度分析的意義,效度是問卷調查研究中最重要的特征，問卷調查的目的就是要獲得高效度的測量與結論，效度越高表示該問卷測驗的結果所能代表要測驗的行為的真實度越高，越能夠達到問卷測驗目的，該問卷才正確而有效。 問卷的準確性或稱為有效性是用問卷的效度加以刻劃的，它反映了對

20、問卷的系統(tǒng)誤差的控制程度。,2、效度的定義,效度是指問卷測驗的準確性，即測驗能夠反映所要測量特性的程度. 其包括兩個方面的含義：一是問卷測驗的目的；二是問卷對測量目標的測量精確度和真實性。效度是一個具有相對性、連續(xù)性、間接性的概念。,,在測量理論中，效度被定義為在一系列測量中，與測量目的有關的真變異數(shù) ( 即有效變異 ) 與總變異數(shù)之比：,,r2xy 表示測量的效度系數(shù)，Sv2 代表有效變異數(shù)，Sx2 代表總變異數(shù)。,3.常

21、用的效度指標,確定一個問卷效度的方法，通常是以答卷者的問卷得分和另一個效度標準求相關，以其相關系數(shù)的大小來表示效度。如果相關系數(shù)高，則該問卷的效度就高。 一般常用的效度指標有內容效度、結構效度。,(1)內容效度 (content validity),內容效度是指問卷內容的貼切性（relevance）和代表性（representativeness）,即問卷內容能否反應所要測量的特質，能否達到測驗目的，較好地代表所欲測量的內容和

22、引起預期反應的程度。內容效度常以題目分布的合理性來判斷，屬于命題的邏輯分析，所以，內容效度也稱為“邏輯效度” (logical validity)、“內在效度（intrinsic Validity）”、“循環(huán)效度（circular validity）”。,,內容效度的評價主要通過經驗判斷進行，通常考慮3方面的問題： 其一是項目所測量的是否真屬于應測量的領域； 其二是測驗所包含的項目是否覆蓋了應測領域的各個方面；

23、其三是測驗題目的構成比例是否恰當。,,常用的內容效度的評價方法有兩種： 一是專家法，即請有關專家對問卷題目與原來的內容范圍是否符合進行分析,作出判斷，看問卷題目是否較好地代表了原來的內容。 二是統(tǒng)計分析法，即從同一內容總體中抽取兩套問卷，分別對同一組答卷者進行測驗, 兩種問卷的相關系數(shù)就可用來估計問卷的內容效度。 計算某個問題與去掉此問題后總得分的相關性情況，分析是否需要被剔除（敏感性分析）。,(2)結構效度(C

24、onstruct Validity),結構效度又稱構想效度，是指問卷對某一理論概念或特質測量的程度，即某問卷測驗的實際得分能解釋某一特質的程度。如果我們根據理論的假設結構，通過問卷測驗得到答卷者實際分數(shù)，經統(tǒng)計檢驗，結果表明問卷能有效解釋答卷者該項特質，則說此問卷具有良好的結構效度。,常用的確定結構效度的方法有：,(1)根據文獻、前人研究結果、實際經驗等建 立假設性理論建構；(2)對問卷題目進行分析。主要是分析問卷的

25、 內容，答卷者對題目所作的反應，問卷題 目的同質性以及分項目之間的關系來判斷 問卷的結構效度；(3)根據建構的假設性理論編制適當?shù)膯柧恚?4)計算與同類權威問卷的相關;(5)以統(tǒng)計檢驗的實證方法去考查問卷是否能 有效解釋所欲建構的特質。,3．效標效度（Criterion Validity）,效標效度也稱為準則關聯(lián)效度（Criterion-Related Validity）、經驗效度（Empirical Val

26、idity）、統(tǒng)計效度（Statistical Validity）。效標效度是說明問卷得分與某種外部準則（效標）間的關聯(lián)程度，用問卷測量得分與效度準則之間的相關系數(shù)表示。,一般估計效標效度的主要方法有：,（1）相關法，即求某問卷分數(shù)與效標間的相關，所得結果即效標效度。（2）區(qū)分法，即看問卷分數(shù)是否可以區(qū)分由效標所劃分的團體。 可以運用t檢驗對先后兩次問卷結果平均分數(shù)進行差異性檢驗。若差異有統(tǒng)計學意義，說明問卷是有效的；若差異無統(tǒng)

27、計學意義，說明問卷是無效的。,(4)判別效度（Discriminant Validity）,判別效標也稱為辨別效標，是指運用相同的問卷測定不同特質和內涵，測量結果之間不應有太大的相關性。,(5)聚合效度（Convergent Validity）,聚合效度也稱為收斂效度，是指運用不同測量方法測定同一特質所得結果的相似程度，即對同一特質的兩種或多種測定方法間應有較高的相關性。,6.效度的評價,Spitzer認為如果滿足以下5個條件就可以認為

28、問卷由效：.（1）問卷有內容效度和結構效度；（2）在問卷制定階段應當請有關人員提出意見，供修正和提高內容效度；（3）問卷經過反復使用證明了其可靠性；（4）如果有金標準存在，應以金標準為準；（5）無金標準時可由判別效度代替。,7.提高問卷效度的方法,（1）理論正確，解釋清楚。問卷內容要適合問卷測驗的目的，題目要清楚明了，易于理解，問卷的排列要由易到難，題目的難度和區(qū)分度要合適；（2）操作規(guī)范以減少誤差；（3）控制系統(tǒng)誤差。它主要

29、包括儀器不準，題目和指導語有暗示性，答案安排不當(被試可以猜測)等, 控制這些因素可以降低系統(tǒng)誤差, 提高效度；,,（4）樣本適宜且要預防流失。重視問卷調查的回收率。樣本容量一般不應低于30；（5）適當增加問卷的長度。增加問卷的長度既可提高問卷的信度，也可以提高問卷的效度，但增加問卷的長度對信度的影響大于對效度的影響；（6）排除無關因素干擾。認清并排除足以混淆或威脅結論的無關干擾變量。,,二、效度分析實例(example),,,例2

30、 對例1中的問卷測驗結果進行效度分析,1．問卷的敏感性（可靠性）分析,（1）操作過程從菜單選擇Analyze → Scale → Reliability Analysis…→ Item（輸入問卷的各條目或各因子包含的條目）→ 單擊“Statistics”按鈕，彈出信度分析統(tǒng)計量對話框 → Descriptives for: → √ Scale if item deleted →OK,,,,Scale if item delet

31、ed:去掉當前題目整個問卷的描述統(tǒng)計量，即敏感性分析，包括以下內容：Scale Mean if Item Deleted:去掉當前題目問卷合計分的均數(shù)；Scale Variance if Item Deleted: 去掉當前題目問卷合計分的方差；Corrected Item-Total Correlation: 當前題目得分與去掉當前題目問卷合計分的Pearson相關系數(shù)；Squared Multiple Correlation:

32、以當前題目為因變量，其它所有題目為自變量求得的決定系數(shù)R2；Alpha if Item Deleted: 去掉當前題目后問卷的Cronbach α系數(shù)。,（2）輸出結果,SCL90各條目的敏感性分析結果:Item Scale Scale Corrected Mean Variance Item- Al

33、pha if Item if Item Total if Item Deleted Deleted Correlation DeletedA1 31.7250 1272.7173 0.6397 0.9736E2

34、 31.7500 1253.6282 0.8027 0.9732B3 31.8250 1261.0712 0.7408 0.9734A4 31.7500 1259.7821 0.7557 0.9733D5 31.7000 1278

35、.2667 0.3872 0.9740C6 31.8250 1300.0455 0.0596 0.9745I7 31.9000 1279.0667 0.5320 0.9737H8 31.5750 1255.1224 0.7590

36、 0.9733B9 31.2750 1259.2301 0.6572 0.9735…………………………………………………………………..E86 31.1750 1272.8147 0.3764 0.9742I87 31.9250 1277.1481 0.6

37、231 0.9736I88 32.0500 1282.9718 0.6057 0.9737J89 32.2000 1304.1641 0.0000 0.9741I90 32.1750 1302.7122 0.1250 0.9741,,

38、一般地，在做問卷的敏感性分析時，可以將“Alpha if Item Deleted”值，作為調整題目的一個重要參考依據。 如果“Alpha if Item Deleted”值越大，其相對應的題目越應是首先考慮調整的題目。從本次問卷結果敏感性分析可以看出，量表的各個題目的“Alpha if Item Deleted”值均在0.97左右變化，且變化的幅度很小。所以，就 “Alpha if Item Deleted”值這項指標看量表各題

39、目均可以保留，無需調整。這個結果可能與研究者所采用的SCL-90輛標是一個經典量表有關。,,,摘 要 目的：探討調查問卷的可靠性。方法：對武警十五支隊201名戰(zhàn)士，作心理衛(wèi)生自評90項調查問卷資料，利用SAS軟件編程，計算Alpha可靠性系數(shù)，進行可靠性分析。結果：有6項被剔除達到要求后，α=0.973569，當使用標準化數(shù)據時，α=0.974102。結論：利用可靠性分析，可以從調查問卷表的數(shù)據中，提取真實的、可靠性的成分。,2．

40、問卷的結構效度的分析,問卷的結構效度的評價較為復雜，可用各個題目與量表各銀子的相關分析和因子分析方法來反映。（1）利用相關分析評價問卷的結構效度,從菜單選擇Analyze →Scale →Reliability Analysis…→Item(輸入問卷的各條目或各因子包含的條目) →Statistics彈出信度分析統(tǒng)計量對話框 →Inter-Item → √ Correlations → OK,（2）利用因子分析評價問卷的結構效度,因

41、子分析不僅能夠評價量表結構的相合性，還可以用共性變異（共性方差）與總變異之比作為結構效度的衡量指標。結構效度的分析最好使用證實性因子分析，它較探索性因子分析更能說明問題。,執(zhí)行Analyze → Data Reduction → Factor … ,彈出“Factor Analysis”對話框: 單擊Descriptives…→ Statistics → √ Initial Solution → Correlation Matri

42、x → √ KMO and Bartlett’s test of sphericity → Continue,,三、調查問卷的信度 Questionnaire Reliability,1.信度分析的意義,信度主要是指問卷是否精準(precision)。信度分析涉及了問卷測驗結果的一致性和穩(wěn)定性，其目的是如何控制和減少隨機誤差。,The reliability of measures,The question of reliabil

43、ity is to what extent does an indicator measure the same thing consistently: i.e. will people answer the same question in the same way on different occasion?,,調查問卷的信度包含兩層含義：,一是相同的個體在不同時間，以相同的問卷測驗，或以復本測驗，或在不同的情景下測驗，是否能得到相

44、同的結果，即問卷測驗結果是否隨時間和地點等因素而變化； 二是能否減少隨機誤差對問卷測驗結果的影響，從而能夠反映問卷所要測量的真實情況，即問卷測驗結果是否具有穩(wěn)定性、可靠性和可預測性。一個好的問卷必須是穩(wěn)定可靠的，且多次問卷測驗結果應前后一致。,2.信度的定義,信度是用估計測量誤差大小的尺度，來說明問卷測驗結果中測量誤差所占的比率。 信度可定義為真實分數(shù)(true score)的方差與測驗實得分數(shù)(observed sco

45、re) 的方差之比，當實得分數(shù)變異可以全部由真實分數(shù)的變異解釋時，測驗誤差就是0，這時問卷測驗的信度為1。,,若用表示問卷測驗的信度，理論應有 或 式中 表示真實分數(shù)的方差； 表示實得分數(shù)的方差； 表示誤差的方差。,,,,,,3.信度的分類,信度研究的是問卷測驗結果的可靠性與穩(wěn)定性，可以從不同的角度來評價：（1）在相同條件下所得問卷測驗結果的一致程度；（2）不同研究

46、者用同一種問卷同時測驗所得結果的一致程度；（3）同一研究者用同一種問卷在不同時間內測驗所得結果的一致程度。,4.常用的信度系數(shù),（1）重測信度(test-retest reliability) 假定短時間內一批對象的狀況并沒有改變，對每個對象用同一個問卷先后測驗兩次，兩次測驗得分的相關系數(shù)就稱為重測信度。重測信度是用皮爾遜積差相關系數(shù)r公式計算的。,重測信度也存在著局限性：,間隔時間長，環(huán)境影響； 如果間隔時間短，記憶影

47、響。,(2)復本信度（alternate form reliability）,復本通常是根據相同的設計說明分別獨立編制的兩個平行問卷，即題目不同但是內容相似的兩份問卷。復本信度也叫等值性系數(shù)（coefficient of equivalence）。兩個復本間隔一定時間或同時施于同一答卷者所得分數(shù)的相關系數(shù)就是復本信度。,,缺點： 如復本編制不容易，易出現(xiàn)順序效應，受練習的影響； 復本信度只能反應問卷內容所造成的誤差，

48、無法反應答卷者本身所造成的誤差等。,(3)分半信度(split-half reliability),當測驗沒有復本且測驗不可避免地受到時間的影響，只適合用于一次測驗時，可用分半信度。 分半的方法很多，一般是將奇數(shù)題和偶數(shù)題各作為一半，而非前后分半，目的是避免順序效應。分半信度也叫折半信度，其計算方法是將問卷的題目分成對等的兩半，分別求出兩半題目的總分，再計算兩部分總分的相關系數(shù)。,,使用分半信度時要注意兩個問題： 一

49、是問卷題目所測的應是同一種特質； 二是兩半題目應是等值的。對問卷題目進行分半會造成了對整個問卷信度的低估，為此需要對分半信度進行校正，其校正公式為斯皮爾曼-布朗(Spearman — Brown)公式：,,,為分半信度,表示兩半題目各自得分和之相關系數(shù)，n為原問卷相對于變化后問卷長度的倍數(shù)，計算分半信度時n=2。,,Spearman — Brown公式要求兩個分半表的信度和方差均滿足齊性； Guttman: Guttman分半信

50、度，可不滿 足上述要求,(4)庫得─理查森信度 (Kuder ─ Richardson),庫德-理查森信度適用于計算“對或錯”的是非題的同質性信度，其是計算所有可能的分半信度的平均數(shù)。 最有代表性的計算公式是庫德-理查森公式:,,式中n為問卷包含的題目數(shù).,為問卷測驗總得分的方差，pi表示答對該題的人數(shù)占總答卷人數(shù)的比例，pi可視為該題的難度，qi=1-pi 。,(5)克隆巴赫信度系數(shù) (cronbach’s α),Cron

51、bach’s α系數(shù)是Cronbach于1951年創(chuàng)立的，用于評價問卷的內部一致性。α系數(shù)取值在0到1之間，α系數(shù)越高，信度越高，問卷的內部一致性越好。Cronbach’s α系數(shù)不僅適用于兩級記分的問卷，還適用于多級計分的問卷。,Cronbach’s α信度,Cronbach, L. J. (1951). Coefficient alpha and the internal structure of tests. Psychometr

52、ika. 16, 297-334. It is a measure of squared correlation between observed scores and true scores. Put another way, reliability is measured in terms of the ratio of true score variance to observed score variance.,其計算公式為：

53、,,式中n為問卷包含的題目數(shù)，,為答卷者在第i題得分的方差，,為答卷者問卷測驗總得分的方差。,,α系數(shù)有以下性質：（1）α系數(shù)是所有可能的分半信度的平均值；（2）α系數(shù)是估計信度的最低限度；（3）當問卷計分為二分名義變量時，即答案為0或1，α系數(shù)與KR20值相同，即庫德-理查森信度公式是克隆巴赫的α系數(shù)的一個特例。,,低信度：α<0.35, 中信度： 0.35<α<0.70,高信度： 0.70<α 一

54、般地，問卷的α系數(shù)在0.8以上該問卷才具有使用價值。Cronbach‘s α值皆達0.85以上，表明問卷信度良好。,(6)評分者信度（inter-scorer reliability）*,考察評分者信度的方法為，隨機抽取相當份數(shù)的問卷，由兩位評分者按記分規(guī)則分別給分；然后根據每份問卷的分數(shù)計算相關系數(shù)，就得到評分者信度。評分者信度也可以是一位評分者兩次評分的相關系數(shù)。如果是多個評分者或一位評分者兩次以上的評分，可采用肯德爾和諧系數(shù)和K

55、appa系數(shù)?？系聽柡椭C系數(shù)用于等級資料，Kappa系數(shù)用于定性資料。,,信度系數(shù)類型 ： 重測信度復本信度分半信度（Spearman — Brown； Guttman）庫德-理查森系數(shù)克隆巴赫α系數(shù)評分者信度*,5.提高信度的方法,問卷的信度越高，受到人、時、地、物的干擾就越低，其所能反應事實或讓人相信的程度越高，因此在問卷實施前如何有效提高信度是問卷測驗成敗的關鍵。通常提高問卷信度的方法為：,

56、（1）適當延長問卷的長度,問卷題目較多，其在一定程度上排除了偶然因素的影響，從而提高了問卷的信度。 但是問卷長度的增加與問卷的信度的增加并不總是成正比的，當信度系數(shù)較小時，延長問卷長度，問卷的信度系數(shù)增加較大；而當信度系數(shù)較大時，延長問卷長度對信度系數(shù)的影響就較小。,（2）問卷的難度適中,當問卷題目難度太大時，問卷得分普遍過低；當問卷題目難度太小時，問卷得分普遍較高。問卷題目太難或太易都會使問卷得分差異減小，使實得分數(shù)方差減

57、小，從而降低了問卷的信度。,（3）問卷的內容盡量同質,內容同質的問卷，要求答卷者具有相同的能力、知識和技能。因而為了提高問卷的信度，問卷的內容應盡量保持同質。,（4）測驗的時間要充分,一份問卷應保證絕大多數(shù)答卷者在規(guī)定的時間內能完成測驗。當答卷者不能從容地回答所有題目時，問卷的得分就不能反映答卷者的真實情況。,（5）測驗的程序要統(tǒng)一,問卷題目要統(tǒng)一，指導語、回答問題的方式、分收試卷的方法和問卷測驗的時間等都要統(tǒng)一，這些是問卷有較高信度的

58、基本保證。,,四、信度分析實例 （example）,例1 某人在新入學的大學生中隨機抽取40人，組織癥狀自評量表（SCL-90）測驗，以了解新生心理健康的水平，及有針對性地進行心理教育和疏導，避免意外事件的發(fā)生。試就量表測驗結果，對此次測驗的可靠性進行分析,,SCL-90量表，包含90個題目，由受試者根據自己在最近一周以內的實際感受，在：沒有、很輕、中等、偏重、嚴重各選項中選擇一個答案，每個選項分別計為0，1，2，3，4分。

59、 SCL-90分為9個因子，分別為軀體化、強迫癥狀、人際關系敏感、憂郁、焦慮、敵對性、恐怖、偏執(zhí)和精神病性。分析對象為答卷者所選的五項答案得分，計算各因子得分和問卷總分。求各因子的各種信度系數(shù)和問卷總的信度系數(shù)。,表11-2 各因子描述統(tǒng)計量,,在“Model:”選項中，SPSS提供5種信度分析模型:①Alpha: Cronbach α系數(shù)②Split-half: 分半信度，又稱 Spearman-Brown系數(shù),其應

60、用的前提 條件是兩個分半表的信度和方差均滿 足齊性。③Guttman: Guttman分半信度，可不滿 足上述要求④Parallel:平行模型⑤Strict Parallel:嚴格平行模型,量表的cronbach α系數(shù),從菜單選擇Analyze → Scale → Reliability Analysis…→Item:a1/b2/c3/a4/．．．/j89/i90(共90個變量) → Model: Alph

61、a → √ List item labels →OK,,Reliability CoefficientsN of Cases = 40.0 N of Items = 90Alpha = 0.9740量表有90個題目，量表總的Cronbach α系數(shù)為0.9740，信度較高。,各因子的Cronbach α系數(shù),操作過程從菜單選擇Analyze → Scale → Reliability A

62、nalysis…→Item: 輸入各因子的條目數(shù)a1/a4/a12/a27/a40/a42/a48/a49/a52/a53/a56/a58 (軀體化因子，共12個變量) → Model: Alpha → OK,,量表的9個因子的Cronbach α系數(shù)分別為：軀體化0.8740；強迫0.8600；人際關系敏感0.7483；憂郁0.9445；焦慮0.8517；敵對性0.6009；恐怖0.9218；偏執(zhí)0.7210；精神病性0.6461

63、。憂郁、恐怖、軀體化、強迫、焦慮因子的信度較高；人際關系敏感和偏執(zhí)因子的信度尚可；但是敵對性和精神病性的信度偏低。從結果中我們還可以看出各項因子的Cronbach α系數(shù)小于問卷總的Cronbach α系數(shù)。,分半信度,操作過程：從菜單選擇Analyze →Scale → Reliability Analysis…→Model：Split-half→ok,總量表的分半信度,總量表分半信度計算結果:Reliability Coeffi

64、cients 90 itemsCorrelation between forms = 0.9147 Equal-length Spearman-Brown = 0.9554Guttman Split-half = 0.9133 Unequal-length Spearman-Brown =0.9554Alpha for part 1 =0.9613 Alpha for

65、 part 2 =0.935845 items in part 1 45 items in part 2,,總量表的分半信度在0.90以上。 各因子分半信度中憂郁因子與恐怖因子的分半信度在0.90以上；焦慮因子、強迫因子和軀體化因子的分半信度在0.80以上；人際關系敏感因子的分半信度0.70以上；其余幾個因子得分半信度在0.70以下。,,五、效度和信度的關系,,,The validity of a questionnaire

66、 relies first and foremost on reliability.  If the questionnaire cannot be shown to be reliable, there is no discussion of validity.,1.信度和效度的共同點都是以相關系數(shù)來表示其大小的。都是整個運用問卷調查技術進行科研工作的可靠性保證。,,2.不同點主要是： （1）研究的對象不同

67、 信度：答卷者 效度：組卷人 （2）研究的角度不同 信度：測量的質量 效度：問卷的質量,,（3）涉及的誤差不同 信度僅考慮隨機誤差占測驗總變異的比例； 效度則還包括與測驗無關但穩(wěn)定的測量誤差。 兩者存在著必然的聯(lián)系，問卷的信度是效度的必要而非充分條件，信度越高，效度不一定越高，即如果問卷是完全可信的，那么問卷可能達到完全有效，也可能達不到，這種現(xiàn)象產生的原因是測量

68、誤差的存在。,,（4）數(shù)值大小不同 可以證明，問卷的效度為問卷信度所制約，且效度不會大于信度，測量理論研究發(fā)現(xiàn)，效度的最大值小于或等于信度的平方根。效度高的測驗，信度必定高，但信度高的測驗，效度未必高。,,從理論的角度來看，一份好的問卷應具有足夠的效度和信度。但是，從實踐的觀點來看，一份好的問卷還應該具有實用性，即問卷的經濟性、便利性和可解釋性。,,適當增加問卷的長度。增加問卷的長度既可提高問卷的信度，也可以提高問卷的效度，