第九章 人事測(cè)量的關(guān)鍵技術(shù):項(xiàng)目分析
項(xiàng)目分析可以分為定性分析和定量分析。
一、測(cè)量的難題分析
難度分析,就是對(duì)題目的難度進(jìn)行估計(jì)以確定適宜的難度。
1、通過率。難度的指標(biāo)通常以通過率表示,即以答對(duì)或通過該題的人數(shù)百分比來表示:P=R/N*100
2、測(cè)驗(yàn)難度的確定。題目難度水平的確定究竟多高合適,依賴于測(cè)驗(yàn)的目的、性質(zhì)和題目形式。
(1)從測(cè)驗(yàn)的目的考慮
(2)從測(cè)驗(yàn)的作用考慮
(3)從題目的形式考慮。對(duì)于是非題而言,其難度值應(yīng)該為0.75最為合適;而對(duì)于四擇一題目,難度值約為0.63時(shí)最為合適。
二、測(cè)量的項(xiàng)目鑒別度分析
項(xiàng)目鑒別度是指測(cè)驗(yàn)項(xiàng)目對(duì)于所測(cè)查的心理特性的鑒別能力和區(qū)分程度。鑒別度分析可以從項(xiàng)目效度和內(nèi)部一致性兩方面著手。
(一)項(xiàng)目效度分析主要以效標(biāo)為依據(jù),考察被試在每個(gè)試題上的反應(yīng)與其在效標(biāo)上表現(xiàn)的相關(guān)程度,即每個(gè)試題所測(cè)查的行為是否反映了被試在效標(biāo)上的表現(xiàn)。
1、鑒別度指數(shù),它比較效標(biāo)得分高和得分低的兩組被試在項(xiàng)目上通過率上的差值:D=PH-PL.D值是鑒別題目測(cè)量效標(biāo)有效性的指標(biāo),D值越高,題目越有效。D值大于0.30時(shí),題目就可以接受了。
(二)內(nèi)部一致性分析
1、有時(shí)在進(jìn)行項(xiàng)目分析時(shí),難以找到合適的效標(biāo),這時(shí)可以采用測(cè)驗(yàn)的總分代替效標(biāo),考察每個(gè)試題和總分的一致性,即做項(xiàng)目-總分分析。
(三)項(xiàng)目效度與內(nèi)部一致性的比較
1、項(xiàng)目效度代表題目與外在效標(biāo)的關(guān)系,內(nèi)部一致性則更多地代表題目與總分的關(guān)系。有較高的內(nèi)部一致性的題目,并不一定與外在效標(biāo)有很高相關(guān)。
2、那么空間選擇何種鑒別度作為選擇題目的依據(jù)更為合適呢?
(1)一般根據(jù)測(cè)驗(yàn)的目的確定。如果測(cè)驗(yàn)是預(yù)測(cè)性測(cè)驗(yàn),則應(yīng)該多采用項(xiàng)目效度較高的試題,這樣,各個(gè)試題對(duì)預(yù)測(cè)外在效標(biāo)都有較大的貢獻(xiàn);
(2)如果測(cè)驗(yàn)要求同質(zhì),即希望各個(gè)試題都測(cè)量同一特質(zhì),則應(yīng)該選擇內(nèi)部一致性較高的題目。
(四)鑒別度的標(biāo)準(zhǔn)。
1、就成就測(cè)驗(yàn)而言,一般要求項(xiàng)目和總分的相關(guān)達(dá)到0.20以上,而鑒別度指數(shù)希望達(dá)到0.15~0.20以上。一般心理測(cè)驗(yàn),D值在0.30以上就可以接受了。
三、測(cè)量的誘答分析
1、誘答分析是指系統(tǒng)考察測(cè)試題目,以診斷題目是否符合一系列測(cè)量學(xué)要求的過程,主要目的在于避免猜測(cè)的影響,使題目真正反映應(yīng)試者的真實(shí)情況。
2、在設(shè)計(jì)誘答時(shí),要注意避免兩種情況:
第一,不要出現(xiàn)過于容易被排除的誘答,這會(huì)使不知道正確答案的被試猜測(cè)正確的概率提高;
第二,不要出現(xiàn)過于似真的選項(xiàng),即欺騙性誘答。