評分這信度是指多個(gè)評分者給同一批人的答卷評分的一致性程度。舉個(gè)例子,如果只有兩個(gè)評分者,則計算其評分的相關(guān)系數,即可得到評分者信度。它主要適用于測驗是主觀(guān)性試題時(shí),不同評分者的評分會(huì )存在差異,這時(shí)評分者就凸顯作用
一、數據準備
這里使用兩個(gè)評委對10個(gè)運動(dòng)員某項目評分,假兩位評委對這十個(gè)運動(dòng)員評分如下圖所示。這里就用這兩位評委對運動(dòng)員評分進(jìn)行一致性評價(jià)。
圖1 數據展示
二、分析步驟
點(diǎn)擊SPSS頂部菜單欄“分析”-“相關(guān)”-“雙變量”。將評委A、B加載到變量文本框,并且相關(guān)系數勾選“皮爾遜”和“斯皮爾曼”。
圖2 雙變量相關(guān)性
雙變量相關(guān)窗口左側“選項”、“樣式”、“拔靴法”、“置信區間”均保持默認,當然可以根據個(gè)人需要進(jìn)行勾選。
圖3 參數默認
三、結果分析
由于分析過(guò)程相關(guān)系數勾選了皮爾遜和斯皮爾曼,因此下面分別進(jìn)行結果分析。皮爾遜相關(guān)系數為0.816,表格底部有解釋?zhuān)@著(zhù)性大于0.01則說(shuō)明相關(guān)性顯著(zhù),這里為0.04說(shuō)明相關(guān)性顯著(zhù),評分者一致性很高。
圖4 皮爾遜分析
斯皮爾曼同理分析,相關(guān)系數為0.890,顯著(zhù)性(雙尾)為0.03,并且0.03大于0.01,說(shuō)明相關(guān)性顯著(zhù),評分者一致性很高。
表5 斯皮爾曼分析
以上就是利用IBM SPSS Statistics進(jìn)行評分者信度分析的測試,大家可以根據需要自行試驗。