第三節(jié)效標(biāo)與基于效標(biāo)的解釋
◇效標(biāo)參照測驗(yàn)關(guān)心的是應(yīng)試者是否達(dá)到了某種標(biāo)準(zhǔn)或效標(biāo)。參照效標(biāo)的分?jǐn)?shù)解釋分為內(nèi)容參照分?jǐn)?shù)的解釋及結(jié)果參照分?jǐn)?shù)的解釋兩種類型。
一、內(nèi)容參照分?jǐn)?shù)的解釋
1.內(nèi)容參照分?jǐn)?shù)的測量目的是確定應(yīng)試者對某個(gè)確定材料內(nèi)容或技能的掌握和熟悉程度的分?jǐn)?shù)。
☆編制內(nèi)容參照測量表的關(guān)鍵是預(yù)先制定一個(gè)判斷應(yīng)試者是否已掌握某種內(nèi)容或技能的熟練程度的標(biāo)準(zhǔn)。這種標(biāo)準(zhǔn)可以通過掌握分?jǐn)?shù)和正確百分?jǐn)?shù)來表示。掌握分?jǐn)?shù),最簡單的掌握分?jǐn)?shù)的標(biāo)準(zhǔn)是定一個(gè)判別應(yīng)試者是否通過或掌握的最低分?jǐn)?shù)正確百分?jǐn)?shù),表明被試在測驗(yàn)中答對題目的比例。
二、結(jié)果參照分?jǐn)?shù)的解釋
◎結(jié)果參照分?jǐn)?shù):是將效標(biāo)材料直接結(jié)合到測驗(yàn)結(jié)果的解釋過程而進(jìn)行評(píng)價(jià)的分?jǐn)?shù)。預(yù)測性測驗(yàn)往往適合用結(jié)果參照分?jǐn)?shù)進(jìn)行解釋
第七章 人事測量的關(guān)鍵技術(shù):信度
第一節(jié)人事測量的可靠性—信度
一、信度的定義
1.◇信度主要是指測量結(jié)果的可靠性或一致性。
2.系統(tǒng)誤差:量具本身有誤差,這種誤差是必然的,但卻是有規(guī)律的。隨機(jī)誤差:每一次測量都可能有操作上的差異,或者由于不可預(yù)見的外界因素的影響,從而造成誤差,這些誤差也是難免的,但卻是毫無規(guī)律的。
二、信度的作用
1.◎信度系數(shù):信度高低的指標(biāo)通常以相關(guān)系數(shù)表示,稱為信度系數(shù)。信度系數(shù)一般是同一樣本所得的兩組資料的相關(guān),在理論上表示為實(shí)得分?jǐn)?shù)與真實(shí)分?jǐn)?shù)相關(guān)的平方。rxx=rxr2=ST2/SX2,其中rxr=ST/SX有時(shí)也稱為信度指數(shù),它是真實(shí)分?jǐn)?shù)標(biāo)準(zhǔn)差與實(shí)得分?jǐn)?shù)標(biāo)準(zhǔn)差的比率。信度系數(shù)的分布是從0.00~1.00的正數(shù)范圍。
2.◇一般來說,當(dāng)rxx 0.70時(shí),不能用測驗(yàn)對個(gè)人作評(píng)價(jià),也不能在團(tuán)體間作比較;當(dāng)rxx 0.70時(shí),可用于團(tuán)體間比較;rxx 0.85時(shí),可用于鑒別個(gè)人。rxx指信度。
第二節(jié)如何評(píng)估人事測量的信度
一、重測信度
1.◎重測信度又稱為穩(wěn)定性系數(shù),它的計(jì)量方法是采用重測法:用同一測驗(yàn),在不同時(shí)間對同一群體施測兩次,這兩次測量分?jǐn)?shù)的相關(guān)系數(shù)即為重測系數(shù)。
重測信度所考察的誤差來源是時(shí)間的變化所帶來的隨機(jī)影響。在評(píng)估重測信度時(shí),必須注意重測間隔的時(shí)間。對于人格測驗(yàn),重測間隔在兩周到6個(gè)月之間比較合適。
☆在進(jìn)行重測信度的評(píng)估時(shí),還應(yīng)注意以下兩個(gè)重要問題:⑴重測信度一般只反映由隨機(jī)因素導(dǎo)致的變化,而不反映被試行為的長久變化。⑵不同的行為受隨機(jī)誤差影響不同。
二、復(fù)本信度
1.◎復(fù)本信度又稱等值性系數(shù),它是以兩個(gè)測驗(yàn)復(fù)本來測量同一群體,然后求得應(yīng)試者在這兩個(gè)測驗(yàn)上得分的相關(guān)系數(shù)。復(fù)本信度的高低反映了這兩個(gè)測驗(yàn)復(fù)本在內(nèi)容上的等值性程度。兩個(gè)等值的測驗(yàn)互為復(fù)本。
2.◇計(jì)算復(fù)本信度的主要目的在于考察兩個(gè)測驗(yàn)復(fù)本的題目取樣或內(nèi)容取樣是否等值。復(fù)本信度也考慮兩個(gè)復(fù)本實(shí)施的時(shí)間間隔。
3.☆復(fù)本信度的主要優(yōu)點(diǎn)在于:⑴能夠避免重測信度的一些問題,如記憶效果、練習(xí)效應(yīng)等;⑵適用于進(jìn)行長期追蹤研究或調(diào)查某些干涉變量對測驗(yàn)成績影響;⑶減少了輔導(dǎo)或作弊的可能性。☆復(fù)本信度的局限性在于:⑴如果測量的行為易受練習(xí)的影響,則復(fù)本信度只能減少而不能消除這種影響;⑵有些測驗(yàn)的性質(zhì)會(huì)由于重復(fù)而發(fā)生改變;⑶有些測驗(yàn)很難找到合適的復(fù)本。
三、內(nèi)部一致性信度
1.◎內(nèi)部一致性信度系數(shù)主要反映的是測驗(yàn)內(nèi)部題目之間的關(guān)系,考察測驗(yàn)的各個(gè)題目是否測量了相同的內(nèi)容或特質(zhì)。內(nèi)部一致性信度又分為分半信度和同質(zhì)性信度。
2.分半信度系數(shù)是通過將測驗(yàn)分成兩半,計(jì)算這兩半測驗(yàn)之間的相關(guān)性而獲得的信度系數(shù)。測驗(yàn)愈長,信度系數(shù)愈高。同質(zhì)性信度是指測驗(yàn)內(nèi)部的各題目在多大程度上考察了同一內(nèi)容。同質(zhì)性信度低時(shí),即使各個(gè)測試題看起來似乎是測量同一特質(zhì),但測驗(yàn)實(shí)際上是異質(zhì)的,即測驗(yàn)測量了不止一種特質(zhì)。同質(zhì)性分析與項(xiàng)目分析中的內(nèi)部一致性分析相類似。
四、評(píng)分者信度
1.◎評(píng)分者信度:是指不同評(píng)分者對同樣對象進(jìn)行評(píng)定時(shí)的一致性。最簡單的估計(jì)方法就是隨機(jī)抽取若干份答卷,由兩個(gè)獨(dú)立的評(píng)分者打分,再求每份答卷兩個(gè)評(píng)判分?jǐn)?shù)的相關(guān)系數(shù)。這種相關(guān)系數(shù)的計(jì)算可以用積差相關(guān)方法,也可以采用斯皮爾曼等級(jí)相關(guān)方法。