資源描述:
《效度分析和信度分析》由會(huì)員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在教育資源-天天文庫(kù)。
1、效度分析和信度分析一、背景準(zhǔn)備1、誤差公理誤差(error)是指對(duì)事物某一特征的度量值偏離真實(shí)值的部分,即測(cè)定值與真實(shí)值之差,樣本統(tǒng)計(jì)量與總體參數(shù)之差。誤差公理:實(shí)驗(yàn)結(jié)果都會(huì)有誤差,誤差自始至終存在于一切科學(xué)實(shí)驗(yàn)的過(guò)程之中2、誤差的種類:1)隨機(jī)誤差包括隨機(jī)測(cè)量誤差和抽樣誤差隨機(jī)測(cè)量誤差:沒(méi)有固定的傾向,可使多次觀測(cè)結(jié)果有大有小。抽樣誤差:由于抽樣造成的樣本指標(biāo)與總體指標(biāo)之間的差別。問(wèn)卷測(cè)驗(yàn)中測(cè)量誤差通常來(lái)源于兩個(gè)方面:一是產(chǎn)生于問(wèn)卷測(cè)驗(yàn)過(guò)程中的誤差,稱為測(cè)量誤差,也稱為隨機(jī)誤差;二是由問(wèn)卷的結(jié)構(gòu)質(zhì)量造成的誤差,稱為系統(tǒng)誤差2)系統(tǒng)誤差:是由于偏倚(使研究結(jié)果
2、按照一個(gè)方向偏離總體,bias)產(chǎn)生的錯(cuò)誤結(jié)果,可校正和消除。3)過(guò)失誤差(grosserror)是由于科研設(shè)計(jì)錯(cuò)誤,或?qū)嶒?yàn)者的主觀片面、粗心大意引起的誤差。效度(validity)通常是指問(wèn)卷的有效性和正確性,亦即問(wèn)卷能夠測(cè)量出其所欲測(cè)量特性的程度。效度是問(wèn)卷調(diào)查研究中最重要的特征,問(wèn)卷調(diào)查的目的就是要獲得高效度的測(cè)量與結(jié)論,效度越高表示該問(wèn)卷測(cè)驗(yàn)的結(jié)果所能代表要測(cè)驗(yàn)的行為的真實(shí)度越高,越能夠達(dá)到問(wèn)卷測(cè)驗(yàn)?zāi)康?,該?wèn)卷才正確而有效。問(wèn)卷的準(zhǔn)確性或稱為有效性是用問(wèn)卷的效度加以刻劃的,它反映了對(duì)問(wèn)卷的系統(tǒng)誤差的控制程度。二、問(wèn)卷效度分析效度是指問(wèn)卷測(cè)驗(yàn)的準(zhǔn)確性,即
3、測(cè)驗(yàn)?zāi)軌蚍从乘獪y(cè)量特性的程度.其包括兩個(gè)方面的含義:一是問(wèn)卷測(cè)驗(yàn)的目的;二是問(wèn)卷對(duì)測(cè)量目標(biāo)的測(cè)量精確度和真實(shí)性。效度是一個(gè)具有相對(duì)性、連續(xù)性的概念。效度性質(zhì)——1.效度具有相對(duì)性:任何測(cè)驗(yàn)的效度是對(duì)一定的目標(biāo)來(lái)說(shuō)的,或者說(shuō)測(cè)驗(yàn)只有用于與測(cè)驗(yàn)?zāi)繕?biāo)一致的目的和場(chǎng)合才會(huì)有效。所以,在評(píng)價(jià)測(cè)驗(yàn)的效度時(shí),必須考慮效度測(cè)驗(yàn)的目的與功能。2.效度具有連續(xù)性:測(cè)驗(yàn)效度通常用相關(guān)系數(shù)表示,它只有程度上的不同,而沒(méi)有“全有”或“全無(wú)”的區(qū)別。效度是針對(duì)測(cè)驗(yàn)結(jié)果的常用的效度指標(biāo)確定一個(gè)問(wèn)卷效度的方法,通常是以答卷者的問(wèn)卷得分和另一個(gè)效度標(biāo)準(zhǔn)求相關(guān),以其相關(guān)系數(shù)的大小來(lái)表示效度。如
4、果相關(guān)系數(shù)高,則該問(wèn)卷的效度就高。一般常用的效度指標(biāo)有內(nèi)容效度、結(jié)構(gòu)效度。(一)內(nèi)容效度內(nèi)容效度是指問(wèn)卷內(nèi)容的貼切性和代表性,即問(wèn)卷內(nèi)容能否反應(yīng)所要測(cè)量的特質(zhì),能否達(dá)到測(cè)驗(yàn)?zāi)康?,較好地代表所欲測(cè)量的內(nèi)容和引起預(yù)期反應(yīng)的程度。內(nèi)容效度常以題目分布的合理性來(lái)判斷,屬于命題的邏輯分析,所以,內(nèi)容效度也稱為“邏輯效度”、“內(nèi)在效度”。內(nèi)容效度的評(píng)價(jià)主要通過(guò)經(jīng)驗(yàn)判斷進(jìn)行,通??紤]3方面的問(wèn)題:其一是項(xiàng)目所測(cè)量的是否真屬于應(yīng)測(cè)量的領(lǐng)域;其二是測(cè)驗(yàn)所包含的項(xiàng)目是否覆蓋了應(yīng)測(cè)領(lǐng)域的各個(gè)方面;其三是測(cè)驗(yàn)題目的構(gòu)成比例是否恰當(dāng)。常用的內(nèi)容效度的評(píng)價(jià)方法有兩種:一是專家法,即請(qǐng)有關(guān)
5、專家對(duì)問(wèn)卷題目與原來(lái)的內(nèi)容范圍是否符合進(jìn)行分析,作出判斷,看問(wèn)卷題目是否較好地代表了原來(lái)的內(nèi)容。二是統(tǒng)計(jì)分析法,即從同一內(nèi)容總體中抽取兩套問(wèn)卷,分別對(duì)同一組答卷者進(jìn)行測(cè)驗(yàn),兩種問(wèn)卷的相關(guān)系數(shù)就可用來(lái)估計(jì)問(wèn)卷的內(nèi)容效度。三是計(jì)算某個(gè)問(wèn)題與去掉此問(wèn)題后總得分的相關(guān)性情況,分析是否需要被剔除(敏感性分析)。(二)結(jié)構(gòu)效度建構(gòu)效度:是指測(cè)量結(jié)果體現(xiàn)出來(lái)的某種結(jié)構(gòu)與測(cè)值之間的對(duì)應(yīng)程度。效度分析最理想的方法是利用因子分析測(cè)量量表或整個(gè)問(wèn)卷的結(jié)構(gòu)效度。因子分析的主要功能是從量表全部變量(題項(xiàng))中提取一些公因子,各公因子分別與某一群特定變量高度關(guān)聯(lián),這些公因子即代表了量表的基
6、本結(jié)構(gòu)。通過(guò)因子分析可以考察問(wèn)卷是否能夠測(cè)量出研究者設(shè)計(jì)問(wèn)卷時(shí)假設(shè)的某種結(jié)構(gòu)。在因子分析的結(jié)果中,用于評(píng)價(jià)結(jié)構(gòu)效度的主要指標(biāo)有累積貢獻(xiàn)率、共同度和因子負(fù)荷。累積貢獻(xiàn)率反映公因子對(duì)量表或問(wèn)卷的累積有效程度,共同度反映由公因子解釋原變量的有效程度,因子負(fù)荷反映原變量與某個(gè)公因子的相關(guān)程度。(三)其他效度指標(biāo)1、效標(biāo)效度效標(biāo)效度也稱為準(zhǔn)則關(guān)聯(lián)效度、經(jīng)驗(yàn)效度、統(tǒng)計(jì)效度。效標(biāo)效度是說(shuō)明問(wèn)卷得分與某種外部準(zhǔn)則(效標(biāo))間的關(guān)聯(lián)程度,用問(wèn)卷測(cè)量得分與效度準(zhǔn)則之間的相關(guān)系數(shù)表示。一般估計(jì)效標(biāo)效度的主要方法有:相關(guān)法,即求某問(wèn)卷分?jǐn)?shù)與效標(biāo)間的相關(guān),所得結(jié)果即效標(biāo)效度。區(qū)分法,即看
7、問(wèn)卷分?jǐn)?shù)是否可以區(qū)分由效標(biāo)所劃分的團(tuán)體??梢赃\(yùn)用t檢驗(yàn)對(duì)先后兩次問(wèn)卷結(jié)果平均分?jǐn)?shù)進(jìn)行差異性檢驗(yàn)。若差異有統(tǒng)計(jì)學(xué)意義,說(shuō)明問(wèn)卷是有效的;若差異無(wú)統(tǒng)計(jì)學(xué)意義,說(shuō)明問(wèn)卷是無(wú)效的。2、判別效度判別效標(biāo)也稱為辨別效標(biāo),是指運(yùn)用相同的問(wèn)卷測(cè)定不同特質(zhì)和內(nèi)涵,測(cè)量結(jié)果之間不應(yīng)有太大的相關(guān)性。3、聚合效度聚合效度也稱為收斂效度,是指運(yùn)用不同測(cè)量方法測(cè)定同一特質(zhì)所得結(jié)果的相似程度,即對(duì)同一特質(zhì)的兩種或多種測(cè)定方法間應(yīng)有較高的相關(guān)性。Spitzer認(rèn)為如果滿足以下5個(gè)條件就可以認(rèn)為問(wèn)卷由效:.(1)問(wèn)卷有內(nèi)容效度和結(jié)構(gòu)效度;(2)在問(wèn)卷制定階段應(yīng)當(dāng)請(qǐng)有關(guān)人員提出意見(jiàn),供修正和提高
8、內(nèi)容效度;(3)問(wèn)卷經(jīng)過(guò)反復(fù)使用證明了