信度(Reliability) 信度(Reliability)即可靠性,它是指采用同樣的方法對同一對象重復(fù)測量時所得結(jié)果的一致性程度。信度指標(biāo)多以相關(guān)系數(shù)表示,在實際應(yīng)用中,信度的估計和分析是從幾個方面根據(jù)不同的情況分別處理的,大致可分為三類:即從穩(wěn)定性(stability)、內(nèi)在一致性(internal consistency)和等價性(equivalency)三個方面來分析測量的信度。信度分析的方法主要有以下四種: 1、重測信度法 這一方法是用同樣的問卷對同一組被調(diào)查者間隔一定時間重復(fù)施測,計算兩次施測結(jié)果的相關(guān)系數(shù)。顯然,重測信度屬于穩(wěn)定系數(shù)。重測信度法特別適用于事實式問卷,如性別、出生年月等在兩次施測中不應(yīng)有任何差異,大多數(shù)被調(diào)查者的興趣、愛好、習(xí)慣等在短時間內(nèi)也不會有十分明顯的變化。如果沒有突發(fā)事件導(dǎo)致被調(diào)查者的態(tài)度、意見突變,這種方法也適用于態(tài)度、意見式問卷。由于重測信度法需要對同一樣本試測兩次,被調(diào)查者容易受到各種事件、活動和他人的影響,而且間隔時間長短也有一定限制,因此在實施中有一定困難。 2、復(fù)本信度法 復(fù)本信度法是讓同一組被調(diào)查者一次填答兩份問卷復(fù)本,計算兩個復(fù)本的相關(guān)系數(shù)。復(fù)本信度屬于等值系數(shù)。復(fù)本信度法要求兩個復(fù)本除表述方式不同外,在內(nèi)容、格式、難度和對應(yīng)題項的提問方向等方面要完全一致,而在實際調(diào)查中,很難使調(diào)查問卷達(dá)到這種要求,因此采用這種方法者較少。 3、折半信度法 折半信度法是將調(diào)查項目分為兩半,計算兩半得分的相關(guān)系數(shù),進(jìn)而估計整個量表的信度。折半信度屬于內(nèi)在一致性系數(shù),測量的是兩半題項得分間的一致性。這種方法一般不適用于事實式問卷(如年齡與性別無法相比),常用于態(tài)度、意見式問卷的信度分析。 4、α信度系數(shù)法 Cronbach α信度系數(shù)是目前最常用的信度系數(shù),評價的是量表中各題項得分間的一致性,屬于內(nèi)在一致性系數(shù)。這種方法適用于態(tài)度、意見式問卷(量表)的信度分析。 效度(Validity) 效度(validity)告訴研究者,所測量的是不是他/她所想要的,在多大程度上給出了他/她所想要的。這里可能包括測量的對象是否為所預(yù)期的,變量的操作性定義是否能反映原始的基本定義,等等。效度主要有三種類型:內(nèi)容效度(Content Validity)、構(gòu)想效度(Construct Validity)和效標(biāo)效度(Criterion Validity)。 一、內(nèi)容效度(Content Validity) 內(nèi)容是效度用最簡單的也是最基本的主觀判斷的方法,一般根據(jù)測量量表所選的題項,僅從表面上來觀察判斷其是否能夠代表想要測量的內(nèi)容或主題。為了得到高效度的量表,通常需要盡量收集和閱讀與測量內(nèi)容有關(guān)的資料、以及相關(guān)的以往的研究報告,以便所設(shè)計的量表題項能較好地覆蓋有關(guān)內(nèi)容的各個方面。內(nèi)容效度的評估方法有: 1、專家判斷法; 由夠資格的判斷者(專家)詳盡地、系統(tǒng)地對測驗作評價而建立的。 2、統(tǒng)計分析法(評分者信度\復(fù)本信度\折半信度\再測法); 3、經(jīng)驗推測法 (實驗檢驗) 也叫表面效度(Face Validity),由外行被對測驗者對測驗表做出表面上的檢查確定,它不反映測驗實際測量的東西,只是指測驗表面上看來好像是測量所要測的東西。 二、構(gòu)想效度(Construct Validity) 構(gòu)想效度主要用于評價量表測量的結(jié)果是否與理論假設(shè)或理論框架相關(guān)。研究者在設(shè)計測量量表時,一般都是從所研究問題的理論框架出發(fā),假設(shè)某種構(gòu)想存在,然后按照這種構(gòu)想來具體設(shè)計提問的題項從而形成量表。如果所用的量表的確能測出真正的構(gòu)想,則說明該量表具有較高的構(gòu)想效度。構(gòu)想效度的分析有時還有另一層的意義,就是評價量表中的各個題項能否有效地區(qū)分研究對象。構(gòu)想效度的估計方法: 1、對測驗本身的分析(用內(nèi)容效度來驗證構(gòu)想效度) 2、測驗間的相互比較:相容效度(與已成熟的相同測驗間的比較)、區(qū)分效度或項目分析法(與近似或應(yīng)區(qū)分測驗間的比較)、因子分析法 3、效標(biāo)效度的研究證明 4、實驗法和觀察法證實 三、效標(biāo)效度(Criterion Validity) 效標(biāo)效度,又稱實證效度、效標(biāo)關(guān)聯(lián)效度或獨立標(biāo)準(zhǔn)效度,反映的是測驗預(yù)測個體在某種情境下行為表現(xiàn)的有效性程度。所謂效標(biāo)就是一個與量表有密切關(guān)聯(lián)的獨立標(biāo)準(zhǔn),將量表所測特性看成因變量,將效標(biāo)看成自變量,所測特性與效標(biāo)密切相關(guān)的量表才是有效的量表。根據(jù)研究的目的、或根據(jù)獲取量表測量結(jié)果和效標(biāo)測量結(jié)果的先后順序,效標(biāo)效度有時也可以分類為“預(yù)測效度”(Predictive Validity)和“協(xié)同效度”(Concurrent Validity)。效標(biāo)效度分析的方法是考察所測特性(因變量)與效標(biāo)(自變量)是否有顯著的相關(guān);或是對效標(biāo)(自變量)的不同取值,特性(因變量)的值是否表現(xiàn)出顯著的差異。 效標(biāo)的確定并不是一件容易的事,選擇效標(biāo)一般要根據(jù)某種已知的理論、或某種已經(jīng)得到肯定的結(jié)論。一個好的效標(biāo)必須具備以下條件: ?、傩?biāo)必須能最有效地反映測驗的目標(biāo),即效標(biāo)測量本身必須有效; ?、谛?biāo)必須具有較高的信度,穩(wěn)定可靠,不隨時間等因素而變化; ?、坌?biāo)可以客觀地加以測量,可用數(shù)據(jù)或等級來表示; ?、苄?biāo)測量的方法簡單,省時省力,經(jīng)濟(jì)實用。 效標(biāo)效度的評估方法 1.相關(guān)法:效度系數(shù)是最常用的效度指標(biāo),尤其是效標(biāo)效度。它是以皮爾遜積差相關(guān)系數(shù)來表示的,主要反映測驗分?jǐn)?shù)與效標(biāo)測量的相關(guān)。 2.區(qū)分法:是檢驗測驗分?jǐn)?shù)能否有效地區(qū)分由效標(biāo)所定義的團(tuán)體的一種方法。算出t值后,便可知道分?jǐn)?shù)的差異是否顯著。若差異顯著,說明該測驗?zāi)軌蛴行У貐^(qū)分由效標(biāo)定義的團(tuán)體,否則,測驗是無效的。 3.命中率法:是當(dāng)測驗用來做取舍的依據(jù)時,用其正確決定的比例作為效度指標(biāo)的一種方法。 4、預(yù)期表法:是一種雙向表格,預(yù)測分?jǐn)?shù)排在表的左邊,效標(biāo)排在表的頂端。從左下至右上對角線上各百分?jǐn)?shù)字越大,而其它的百分?jǐn)?shù)字越小,表示測驗的效標(biāo)效度越高 ;反之,數(shù)字越分散,則效度越低。 信度和效度的關(guān)系 從信度和效度的定義中可以看到,信度與效度有一定的關(guān)系:信度高的測量,其效度不一定高;但是效度高的測量,其信度必定也高。 |
|
來自: 傷心的華南虎 > 《調(diào)查》