第5章 信度
1、信度是指：測(cè)量結(jié)果的可靠性和一致性。因?yàn)樾睦頊y(cè)驗(yàn)通常測(cè)量人的行為，行為會(huì)由于各種各樣的原因，因時(shí)、因事、因地而產(chǎn)生變動(dòng)，這些因素有些是偶然的，有些是固有的，人在完成心理測(cè)驗(yàn)時(shí)的行為也會(huì)受上述因素的影響，從而使測(cè)驗(yàn)結(jié)果與真實(shí)結(jié)果不完全一致，所以我們要用信度來衡量測(cè)驗(yàn)的可靠性和一致性。
2、信度的操作化定義：
（1）誤差理論認(rèn)為：一個(gè)人的測(cè)驗(yàn)分?jǐn)?shù)X是由真實(shí)分?jǐn)?shù)（T）和誤差（E）兩部分構(gòu)成的，公式是X = T + E。
（2）因此信度就被定義為：一組測(cè)量分?jǐn)?shù)的真實(shí)方差與實(shí)得方差的比，或者是指真實(shí)方差占總方差的百分比。公式為：rxx = 1－SE 2／SX 2
（3）根據(jù)統(tǒng)計(jì)學(xué)理論，真實(shí)方差與實(shí)得方差的比是一個(gè)相關(guān)系數(shù)的平方，所以我們把這種相關(guān)系數(shù)的平方叫做信度系數(shù)。
（4）計(jì)算公式為：rxx = ST2／SX2
3、由于誤差的來源信度的可分為：這種分類是基于信度的傳統(tǒng)定義-真分?jǐn)?shù)理論。
（1）重測(cè)信度：考慮的誤差來源是時(shí)間取樣。
（2）復(fù)本信度：考慮的誤差來源是內(nèi)容取樣。
（3）分半信度：它考慮的誤差來源也是內(nèi)容取樣，它與復(fù)本信度的差別是：分半信度考查一個(gè)測(cè)驗(yàn)內(nèi)容的兩半題目測(cè)量的是否是同一個(gè)心理特點(diǎn)行為。
（4）同質(zhì)性信度（內(nèi)部一致性系數(shù)）：考慮的是測(cè)驗(yàn)內(nèi)容是否異質(zhì)。
（5）評(píng)分者信度：考慮的誤差來源是評(píng)分者間的差別。
4、信度的表示方法：
（1）信度系數(shù)和信度指數(shù)：
1 信度系數(shù)：rxx = rx2T = S2T／S2
2 信度指數(shù)：rXT = ST／SX
（2）測(cè)量標(biāo)準(zhǔn)誤：SE = SX 1－rxx
5、信度的意義：
（1）信度系數(shù)可以解釋為樣本測(cè)驗(yàn)分?jǐn)?shù)的總方差中有多少比例是真分?jǐn)?shù)方差，也就是測(cè)驗(yàn)的總變異中真分?jǐn)?shù)造成的變異占百分之幾。它直接告訴我們測(cè)量的誤差有多大。
（2）測(cè)量的標(biāo)準(zhǔn)誤可以告訴我們有多大可能性真實(shí)分?jǐn)?shù)在某一分?jǐn)?shù)范圍內(nèi)，并且可以預(yù)測(cè)實(shí)得分?jǐn)?shù)再測(cè)時(shí)可能的變化情況。
6、信度的作用：
（1）解釋預(yù)測(cè)個(gè)人分?jǐn)?shù)的意義。
（2）解釋真實(shí)分?jǐn)?shù)與實(shí)得分?jǐn)?shù)間的關(guān)系，明確告訴我們測(cè)驗(yàn)誤差大小。
（3）新編的測(cè)驗(yàn)信度應(yīng)高于原有的同類測(cè)驗(yàn)或相似測(cè)驗(yàn)。
（4）下結(jié)論說某測(cè)驗(yàn)比較可靠，必須是依據(jù)情境的，經(jīng)多次證實(shí)的。
（5）它是確定測(cè)驗(yàn)好壞的一個(gè)指標(biāo)。一般的原則是：
1 當(dāng)rxx＜ 0.70時(shí)，測(cè)驗(yàn)不能用于對(duì)個(gè)人作出評(píng)價(jià)或預(yù)測(cè)，而且不能做團(tuán)體間比較。
2 當(dāng)0.70≤rxx＜0.85時(shí)，可用于團(tuán)體比較。
3 當(dāng)rxx ≥0.85時(shí)，才可以用來鑒別或預(yù)測(cè)個(gè)人成績(jī)或作用
7、重測(cè)信度：有時(shí)也叫穩(wěn)定性，主要針對(duì)時(shí)間變量。
（1）重測(cè)信度采集數(shù)據(jù)得方法是：對(duì)同一組被試間隔一定的時(shí)間重復(fù)測(cè)試一次。
（4）重測(cè)信度的計(jì)算方法是積差相關(guān)法，因而rxx就是皮爾遜的積差相關(guān)系數(shù)。
（7）重測(cè)信度的時(shí)間間隔選擇依測(cè)驗(yàn)性質(zhì)和目的而定，如果測(cè)驗(yàn)是用于長(zhǎng)期預(yù)測(cè)，則測(cè)量間隔長(zhǎng)一些。對(duì)兒童的智力測(cè)驗(yàn)一般是兩周到四周為宜。對(duì)成年人，間隔可到半年，很少超過6個(gè)月。
（13）使用重測(cè)信度應(yīng)注意：不是所有測(cè)驗(yàn)都可以計(jì)算重測(cè)信度。并且重測(cè)信度只是反映了隨機(jī)誤差的影響，而不是反映被試心理特點(diǎn)的長(zhǎng)期變化。
8、復(fù)本信度：又叫等值性系數(shù)。
（1）數(shù)據(jù)采集方法是：給被試施測(cè)兩個(gè)內(nèi)容等值但題目不同的測(cè)驗(yàn)，求兩組數(shù)值的相關(guān)。計(jì)算方法常見的也是積差相關(guān)法。
（2）復(fù)本信度的高低反映了兩個(gè)互為復(fù)本的測(cè)驗(yàn)等價(jià)的程度，而不是反映一個(gè)測(cè)驗(yàn)本身受隨機(jī)誤差影響的大小。復(fù)本信度的高低關(guān)鍵取決于復(fù)本測(cè)驗(yàn)的選擇，因而施題目取樣問題，或者說是測(cè)驗(yàn)的內(nèi)容取樣問題。
（3）復(fù)本信度優(yōu)于重測(cè)信度的地方是：避免了重測(cè)帶來的記憶效應(yīng)和練習(xí)效應(yīng)；可用于長(zhǎng)期追蹤研究前后測(cè)量；減少了作弊的可能性。
（4）復(fù)本信度的缺點(diǎn)：有些測(cè)驗(yàn)的復(fù)本很難找到；有些測(cè)驗(yàn)因正遷移效應(yīng)使測(cè)驗(yàn)性質(zhì)改變；如測(cè)量的內(nèi)容很容易受練習(xí)的影響，復(fù)本信度也無法清除這種練習(xí)效應(yīng)。
（5）重測(cè)復(fù)本信度，即再不同的時(shí)間里施測(cè)兩個(gè)等值的測(cè)驗(yàn)（復(fù)本），得到的相關(guān)就是重測(cè)復(fù)本信度，也叫穩(wěn)定等值系數(shù)。它比單一的重測(cè)信度或復(fù)本信度都要嚴(yán)格、全面一些。
9、斯皮爾曼-布朗公式：rnn = nrtt／1 +（n－13、 1）rtt，14、 rnn是校正以后的相關(guān)系數(shù)，15、 rtt是實(shí)得的相關(guān)系數(shù)，16、 n為rnn對(duì)應(yīng)的測(cè)驗(yàn)長(zhǎng)度與rtt 對(duì)應(yīng)的測(cè)驗(yàn)長(zhǎng)度之比。分半時(shí)，17、 n = N／（N／2）= 2（N為測(cè)驗(yàn)全長(zhǎng)），18、所以分半法信度的校正公式是：rxx = 2 rnn／1 + rhh 其中rhh為兩半測(cè)驗(yàn)的相關(guān)系數(shù)。
（1）盧倫公式：rxx = 1－Sd2／Sx2 其中Sd2是兩半測(cè)驗(yàn)分?jǐn)?shù)之差的方差，Sx2為總方差。
（2）從理論上分析，分半信度反映的實(shí)際上是兩半測(cè)驗(yàn)?zāi)軌驕y(cè)量相同內(nèi)容或心理特點(diǎn)的程度。
10、內(nèi)部一致性信度（同質(zhì)性信度）：同質(zhì)性是指測(cè)驗(yàn)的所有題目間性質(zhì)的一致性，即測(cè)的是同一種心理特質(zhì)或行為。同質(zhì)性是測(cè)量單一特質(zhì)的必要條件。這里講的同質(zhì)性是指測(cè)驗(yàn)題目得分反映的心理特質(zhì)一致，同質(zhì)性的判別標(biāo)準(zhǔn)是：題目間呈高正相關(guān)，如果相關(guān)很低或是呈負(fù)相關(guān)，則題目為異質(zhì)。
（1）庫德和里查德森提出的K-R20公式只適合預(yù)測(cè)題目是二分法計(jì)分的�？藗惏秃咋料禂�(shù)適合于非二分法計(jì)分的測(cè)驗(yàn)的內(nèi)部一致性信度估計(jì)法。
（2）從同質(zhì)性信度的含義我們不難看出，分半信度是求測(cè)驗(yàn)兩半之間的一致性或同質(zhì)性，而同質(zhì)性是求所有題目間的一致性。因此分半信度實(shí)際上是同質(zhì)性信度的一種，可以作為測(cè)驗(yàn)同質(zhì)性評(píng)價(jià)的粗略估計(jì)指標(biāo)。因?yàn)榭梢愿鶕?jù)測(cè)驗(yàn)得分來推論或驗(yàn)證某種概念或理論構(gòu)思，因此同質(zhì)性信度也是一種構(gòu)思效度，或叫結(jié)構(gòu)效度，它實(shí)際上介于信度與效度之間。
11、評(píng)分者信度：有些心理測(cè)驗(yàn)的得分不是根據(jù)客觀的計(jì)分系統(tǒng)計(jì)分的，是由評(píng)分者來給被試打分，因此，這樣的測(cè)驗(yàn)的可靠性如何取決于評(píng)分者評(píng)分的一致性和穩(wěn)定性如何。
評(píng)分者信度因評(píng)分者人數(shù)不同而估計(jì)方法不一樣。如果是兩個(gè)評(píng)分者，獨(dú)立對(duì)被試的反應(yīng)評(píng)分，則可以用積差相關(guān)來計(jì)算，或用斯皮爾曼等級(jí)相關(guān)法計(jì)算。如果評(píng)分者在三人以上，而且是等級(jí)評(píng)分，則可以用“肯德爾和諧系數(shù)”（W）來求評(píng)分者信度。
12、以測(cè)量標(biāo)準(zhǔn)誤表示信度的好處是：
（1）信度的單位與測(cè)驗(yàn)分?jǐn)?shù)的單位相同，因此解釋個(gè)人分?jǐn)?shù)時(shí)非常直接，能直接指出允許測(cè)驗(yàn)分?jǐn)?shù)變化的范圍。
（2）測(cè)驗(yàn)同質(zhì)與否并不影響測(cè)量標(biāo)準(zhǔn)誤的大小。測(cè)量標(biāo)準(zhǔn)誤的不足之處時(shí)：無法比較不同測(cè)驗(yàn)間的信度高低。比較不同測(cè)驗(yàn)的信度用信度系數(shù)（rxx）解釋個(gè)人分?jǐn)?shù)時(shí)用測(cè)量標(biāo)準(zhǔn)誤（SE）。
13、常見的影響信度的因素有：樣本特征、測(cè)驗(yàn)的長(zhǎng)度、測(cè)驗(yàn)的難度、測(cè)量的時(shí)間間隔等。
14、我們做信度考驗(yàn)時(shí)，常常選取一個(gè)與常模樣本性質(zhì)相同的樣本施測(cè)，根據(jù)被試得分求出信度系數(shù)。
（1）樣本團(tuán)體得分分布的影響：求信度的樣本團(tuán)體得分分布如果比較窄小的話信度就低。
（2）樣本團(tuán)體異質(zhì)性的影響：樣本團(tuán)體異質(zhì)的話，測(cè)驗(yàn)分?jǐn)?shù)的分布就比同質(zhì)樣本的要廣，分?jǐn)?shù)的離差就大，樣本的方差就大，信度就高。實(shí)際上，高信度可能是假性高信度，是由樣本團(tuán)體的異質(zhì)造成的。但如果常�？傮w要求各種各樣的人，則異質(zhì)的信度樣本求得的信度就是真信度。這時(shí)，相反的情況就需要校正信度。
（3）樣本團(tuán)體平均能力水平的影響。由于信度也會(huì)因樣本間團(tuán)體平均能力水平的不同而不同，因此在求信度時(shí)，一定要注意信度樣本與常�？傮w間是否一致。
15、測(cè)驗(yàn)的長(zhǎng)度：在其他條件均等的情況下，測(cè)驗(yàn)越長(zhǎng)，信度越高。原因在于：
（1）測(cè)驗(yàn)越長(zhǎng)，即題目越多，測(cè)驗(yàn)的內(nèi)容取樣就越有可能有代表性。
（2）測(cè)驗(yàn)越長(zhǎng)，被試的猜測(cè)因素影響就越小。
16、測(cè)驗(yàn)的難度：難度對(duì)信度的影響之存在于某些測(cè)驗(yàn)中，如智力測(cè)驗(yàn)、成就測(cè)驗(yàn)、能力傾向測(cè)驗(yàn)、教育測(cè)驗(yàn)等。測(cè)驗(yàn)的難度對(duì)信度有間接影響，因?yàn)槿绻麥y(cè)驗(yàn)過難，被試的得分會(huì)集中在低分區(qū)。過于容易，分?jǐn)?shù)則集中在高分區(qū)。兩種情況都使信度樣本的得分范圍變窄，變異量降低，從而低估測(cè)驗(yàn)信度。
17、測(cè)驗(yàn)的時(shí)間間隔：這一因素之對(duì)重測(cè)信度和不同時(shí)測(cè)量時(shí)的復(fù)本信度有影響，對(duì)其余的信度來說不存在時(shí)間間隔問題。
第6章 效度
1、效度是指：測(cè)驗(yàn)?zāi)軠y(cè)量到所要測(cè)量的對(duì)象的程度。這一定義包含著兩層含義：測(cè)驗(yàn)測(cè)量什么？測(cè)驗(yàn)對(duì)測(cè)量目標(biāo)的測(cè)量精確度和真實(shí)性是多少？
2、效度的公式為：rxy = SV2／SX2它是與測(cè)量目標(biāo)有關(guān)的真實(shí)分?jǐn)?shù)方差與總方差的比率。其中rxy是常用的效度表示法；SV2是“有關(guān)的真實(shí)方差”，也就是由測(cè)驗(yàn)所要測(cè)量的心理變量引起的方差，也叫有效方差；SX2是總方差。
3、信度和效度的差別是：兩者所涉及的誤差不同：信度僅考慮偶然的隨機(jī)誤差占測(cè)驗(yàn)總變異的比例，效度則還包括與測(cè)驗(yàn)無關(guān)的但穩(wěn)定的測(cè)量誤差。
（1）信度是效度的必要而非充分條件。
（2）效度是受信度制約的。
4、效度的性質(zhì)：效度的真實(shí)含義是指測(cè)驗(yàn)結(jié)果的效度，也就是測(cè)驗(yàn)結(jié)果的準(zhǔn)確程度。
（1）效度具有相對(duì)性。
（2）效度具有連續(xù)性。測(cè)驗(yàn)的有效性只有程度上的差別。
（3）效度也不是直接就可以測(cè)量到的，它是從已有的證據(jù)推理而來的。
5、效度的種類：內(nèi)容效度、構(gòu)思效度和效標(biāo)關(guān)聯(lián)效度。
6、效標(biāo)關(guān)聯(lián)效度是指：測(cè)驗(yàn)總分?jǐn)?shù)與外在標(biāo)20、準(zhǔn)（效標(biāo)）之間的相關(guān)程度，反映的是用測(cè)驗(yàn)預(yù)測(cè)個(gè)體在某種情境下行為的表現(xiàn)如何的有效性程度。由于外在標(biāo)準(zhǔn)成了考察測(cè)驗(yàn)有效性的參照標(biāo)準(zhǔn)，因此簡(jiǎn)稱為效標(biāo)。
7、阿斯丁把效標(biāo)分為兩個(gè)層次：一是理論描述水平的“觀念效標(biāo)”，二是操作定義水平的“效標(biāo)測(cè)量”。
（1）觀念效標(biāo)是效標(biāo)的理論定義，效標(biāo)測(cè)量是效標(biāo)的操作定義，效標(biāo)測(cè)量必須能真正反映觀念效標(biāo)。
（2）效標(biāo)測(cè)量的一個(gè)重要特征是客觀性。為此因做到：
1 避免偏見影響效標(biāo)測(cè)量，特別是以等級(jí)評(píng)定為效標(biāo)4 測(cè)量時(shí)，評(píng)分者的主觀偏見會(huì)有很大影響。
2 防止效標(biāo)污染，即指?jìng)�(gè)人的效標(biāo)因評(píng)定者知道個(gè)體的測(cè)驗(yàn)分?jǐn)?shù)（也叫預(yù)測(cè)源分?jǐn)?shù)）而受到影響。
8、常用的效標(biāo)：學(xué)業(yè)成就、臨床診斷、實(shí)際工作表現(xiàn)、特殊訓(xùn)練成績(jī)、效標(biāo)團(tuán)體比較、先前有效的測(cè)驗(yàn)、等級(jí)評(píng)定。
9、同時(shí)效度：它的效標(biāo)資料是和測(cè)驗(yàn)分?jǐn)?shù)差不多同時(shí)搜集的。一般情況下，它可以代替預(yù)測(cè)效度。
10、預(yù)測(cè)效度的效標(biāo)是經(jīng)過一段時(shí)間以后才獲得的，預(yù)測(cè)效度反映的是從測(cè)驗(yàn)分?jǐn)?shù)預(yù)測(cè)任何效標(biāo)情境或一段時(shí)間后被試的行為表現(xiàn)的程度。
11、構(gòu)思效度就是：心理測(cè)驗(yàn)對(duì)某一理論概念或特質(zhì)測(cè)量的程度。因此，研究構(gòu)思效度就是要搞清楚：測(cè)驗(yàn)測(cè)量的是什么構(gòu)思（概念或特質(zhì)）？測(cè)驗(yàn)分?jǐn)?shù)的變異中有多少來自于測(cè)驗(yàn)的理論構(gòu)思？構(gòu)思效度是沒有單一指標(biāo)的，它是由各方面證據(jù)累積起來作出評(píng)價(jià)的。
12、確定構(gòu)思效度的基本步驟：建立理論框架、根據(jù)理論框架推演出有關(guān)測(cè)驗(yàn)成績(jī)的假設(shè)、用邏輯或?qū)嵶C的方法來證明假設(shè)。
13、確定構(gòu)思效度的方法：測(cè)驗(yàn)內(nèi)部的方法、測(cè)驗(yàn)間的方法、效標(biāo)效度的研究、實(shí)驗(yàn)和觀察法驗(yàn)證。
（1）測(cè)驗(yàn)內(nèi)方法：這類方法是通過研究測(cè)驗(yàn)內(nèi)部結(jié)構(gòu)來界定理論構(gòu)思，從而為構(gòu)思效度提供證據(jù)。
（2）確定方法是：分析測(cè)驗(yàn)的內(nèi)容效度和測(cè)驗(yàn)的內(nèi)部一致性分析。測(cè)驗(yàn)的內(nèi)部一致性可以由分半信度、α系數(shù)、KR20或KR21等指標(biāo)來衡量，它們考察的是測(cè)驗(yàn)題目是否同質(zhì)，分測(cè)驗(yàn)與總測(cè)驗(yàn)是否一致或同質(zhì)，這些都可以證明測(cè)驗(yàn)所測(cè)量的構(gòu)思是否合理，因而構(gòu)成了證實(shí)構(gòu)思效度高低的證據(jù)。
（3）有時(shí)分析被試對(duì)題目的反應(yīng)特點(diǎn)也可以作為構(gòu)思效度的證據(jù)。
（4）測(cè)驗(yàn)間的方法：通過分析幾個(gè)測(cè)驗(yàn)間的相關(guān)關(guān)系，找出其共同之處，進(jìn)行推斷這些測(cè)驗(yàn)測(cè)量的特質(zhì)是什么，也可以確定這些測(cè)驗(yàn)構(gòu)思效度如何。最簡(jiǎn)單的方法是計(jì)算兩種測(cè)驗(yàn)之間得分的相關(guān)。區(qū)分效度是構(gòu)思效度的又一個(gè)證據(jù)。因素分析法也是建立構(gòu)思效度的常用方法。
（5）實(shí)驗(yàn)法和觀察法證實(shí)：觀察實(shí)驗(yàn)前和實(shí)驗(yàn)后分?jǐn)?shù)的差異也是驗(yàn)證構(gòu)思效度的方法之一。
14、內(nèi)容效度是指：測(cè)驗(yàn)題目對(duì)有關(guān)內(nèi)容或行為總體取樣的適當(dāng)性程度。因?yàn)檫@種效度主要是考察測(cè)驗(yàn)的內(nèi)容，因此叫內(nèi)容效度。
（1）要想使測(cè)驗(yàn)的內(nèi)容效度高，必須又兩個(gè)條件：內(nèi)容的范圍或行為總體必須界定名確；測(cè)驗(yàn)題目應(yīng)該是所界定的內(nèi)容范圍的代表性樣本。
