資源描述:
《效度分析和信度分析》由會員上傳分享,免費在線閱讀,更多相關(guān)內(nèi)容在教育資源-天天文庫。
1、效度分析和信度分析一、背景準(zhǔn)備1、誤差公理誤差(error)是指對事物某一特征的度量值偏離真實值的部分,即測定值與真實值之差,樣本統(tǒng)計量與總體參數(shù)之差。誤差公理:實驗結(jié)果都會有誤差,誤差自始至終存在于一切科學(xué)實驗的過程之中2、誤差的種類:1)隨機誤差包括隨機測量誤差和抽樣誤差隨機測量誤差:沒有固定的傾向,可使多次觀測結(jié)果有大有小。抽樣誤差:由于抽樣造成的樣本指標(biāo)與總體指標(biāo)之間的差別。問卷測驗中測量誤差通常來源于兩個方面:一是產(chǎn)生于問卷測驗過程中的誤差,稱為測量誤差,也稱為隨機誤差;二是由問卷的結(jié)構(gòu)質(zhì)量造成的誤差,稱為系統(tǒng)誤差2)系統(tǒng)誤差:是由于偏倚(使研究結(jié)果
2、按照一個方向偏離總體,bias)產(chǎn)生的錯誤結(jié)果,可校正和消除。3)過失誤差(grosserror)是由于科研設(shè)計錯誤,或?qū)嶒炚叩闹饔^片面、粗心大意引起的誤差。效度(validity)通常是指問卷的有效性和正確性,亦即問卷能夠測量出其所欲測量特性的程度。效度是問卷調(diào)查研究中最重要的特征,問卷調(diào)查的目的就是要獲得高效度的測量與結(jié)論,效度越高表示該問卷測驗的結(jié)果所能代表要測驗的行為的真實度越高,越能夠達到問卷測驗?zāi)康?,該問卷才正確而有效。問卷的準(zhǔn)確性或稱為有效性是用問卷的效度加以刻劃的,它反映了對問卷的系統(tǒng)誤差的控制程度。二、問卷效度分析效度是指問卷測驗的準(zhǔn)確性,即
3、測驗?zāi)軌蚍从乘獪y量特性的程度.其包括兩個方面的含義:一是問卷測驗的目的;二是問卷對測量目標(biāo)的測量精確度和真實性。效度是一個具有相對性、連續(xù)性的概念。效度性質(zhì)——1.效度具有相對性:任何測驗的效度是對一定的目標(biāo)來說的,或者說測驗只有用于與測驗?zāi)繕?biāo)一致的目的和場合才會有效。所以,在評價測驗的效度時,必須考慮效度測驗的目的與功能。2.效度具有連續(xù)性:測驗效度通常用相關(guān)系數(shù)表示,它只有程度上的不同,而沒有“全有”或“全無”的區(qū)別。效度是針對測驗結(jié)果的常用的效度指標(biāo)確定一個問卷效度的方法,通常是以答卷者的問卷得分和另一個效度標(biāo)準(zhǔn)求相關(guān),以其相關(guān)系數(shù)的大小來表示效度。如
4、果相關(guān)系數(shù)高,則該問卷的效度就高。一般常用的效度指標(biāo)有內(nèi)容效度、結(jié)構(gòu)效度。(一)內(nèi)容效度內(nèi)容效度是指問卷內(nèi)容的貼切性和代表性,即問卷內(nèi)容能否反應(yīng)所要測量的特質(zhì),能否達到測驗?zāi)康模^好地代表所欲測量的內(nèi)容和引起預(yù)期反應(yīng)的程度。內(nèi)容效度常以題目分布的合理性來判斷,屬于命題的邏輯分析,所以,內(nèi)容效度也稱為“邏輯效度”、“內(nèi)在效度”。內(nèi)容效度的評價主要通過經(jīng)驗判斷進行,通??紤]3方面的問題:其一是項目所測量的是否真屬于應(yīng)測量的領(lǐng)域;其二是測驗所包含的項目是否覆蓋了應(yīng)測領(lǐng)域的各個方面;其三是測驗題目的構(gòu)成比例是否恰當(dāng)。常用的內(nèi)容效度的評價方法有兩種:一是專家法,即請有關(guān)
5、專家對問卷題目與原來的內(nèi)容范圍是否符合進行分析,作出判斷,看問卷題目是否較好地代表了原來的內(nèi)容。二是統(tǒng)計分析法,即從同一內(nèi)容總體中抽取兩套問卷,分別對同一組答卷者進行測驗,兩種問卷的相關(guān)系數(shù)就可用來估計問卷的內(nèi)容效度。三是計算某個問題與去掉此問題后總得分的相關(guān)性情況,分析是否需要被剔除(敏感性分析)。(二)結(jié)構(gòu)效度建構(gòu)效度:是指測量結(jié)果體現(xiàn)出來的某種結(jié)構(gòu)與測值之間的對應(yīng)程度。效度分析最理想的方法是利用因子分析測量量表或整個問卷的結(jié)構(gòu)效度。因子分析的主要功能是從量表全部變量(題項)中提取一些公因子,各公因子分別與某一群特定變量高度關(guān)聯(lián),這些公因子即代表了量表的基
6、本結(jié)構(gòu)。通過因子分析可以考察問卷是否能夠測量出研究者設(shè)計問卷時假設(shè)的某種結(jié)構(gòu)。在因子分析的結(jié)果中,用于評價結(jié)構(gòu)效度的主要指標(biāo)有累積貢獻率、共同度和因子負荷。累積貢獻率反映公因子對量表或問卷的累積有效程度,共同度反映由公因子解釋原變量的有效程度,因子負荷反映原變量與某個公因子的相關(guān)程度。(三)其他效度指標(biāo)1、效標(biāo)效度效標(biāo)效度也稱為準(zhǔn)則關(guān)聯(lián)效度、經(jīng)驗效度、統(tǒng)計效度。效標(biāo)效度是說明問卷得分與某種外部準(zhǔn)則(效標(biāo))間的關(guān)聯(lián)程度,用問卷測量得分與效度準(zhǔn)則之間的相關(guān)系數(shù)表示。一般估計效標(biāo)效度的主要方法有:相關(guān)法,即求某問卷分數(shù)與效標(biāo)間的相關(guān),所得結(jié)果即效標(biāo)效度。區(qū)分法,即看
7、問卷分數(shù)是否可以區(qū)分由效標(biāo)所劃分的團體。可以運用t檢驗對先后兩次問卷結(jié)果平均分數(shù)進行差異性檢驗。若差異有統(tǒng)計學(xué)意義,說明問卷是有效的;若差異無統(tǒng)計學(xué)意義,說明問卷是無效的。2、判別效度判別效標(biāo)也稱為辨別效標(biāo),是指運用相同的問卷測定不同特質(zhì)和內(nèi)涵,測量結(jié)果之間不應(yīng)有太大的相關(guān)性。3、聚合效度聚合效度也稱為收斂效度,是指運用不同測量方法測定同一特質(zhì)所得結(jié)果的相似程度,即對同一特質(zhì)的兩種或多種測定方法間應(yīng)有較高的相關(guān)性。Spitzer認為如果滿足以下5個條件就可以認為問卷由效:.(1)問卷有內(nèi)容效度和結(jié)構(gòu)效度;(2)在問卷制定階段應(yīng)當(dāng)請有關(guān)人員提出意見,供修正和提高
8、內(nèi)容效度;(3)問卷經(jīng)過反復(fù)使用證明了