難度分析,就是對題目的難度進(jìn)行估計(jì)以確定適宜的難度。
1、通過率。難度的指標(biāo)通常以通過率表示,即以答對或通過該題的人數(shù)百分比來表示:P=R/N*100
2、測驗(yàn)難度的確定。題目難度水平的確定究竟多高合適,依賴于測驗(yàn)的目的、性質(zhì)和題目形式。
(1)從測驗(yàn)的目的考慮
(2)從測驗(yàn)的作用考慮
(3)從題目的形式考慮。對于是非題而言,其難度值應(yīng)該為0.75最為合適;而對于四擇一題目,難度值約為0.63時最為合適。
二、測量的項(xiàng)目鑒別度分析
項(xiàng)目鑒別度是指測驗(yàn)項(xiàng)目對于所測查的心理特性的鑒別能力和區(qū)分程度。鑒別度分析可以從項(xiàng)目效度和內(nèi)部一致性兩方面著手。
(一)項(xiàng)目效度分析主要以效標(biāo)為依據(jù),考察被試在每個試題上的反應(yīng)與其在效標(biāo)上表現(xiàn)的相關(guān)程度,即每個試題所測查的行為是否反映了被試在效標(biāo)上的表現(xiàn)。
1、鑒別度指數(shù),它比較效標(biāo)得分高和得分低的兩組被試在項(xiàng)目上通過率上的差值:D=PH-PL.D值是鑒別題目測量效標(biāo)有效性的指標(biāo),D值越高,題目越有效。D值大于0.30時,題目就可以接受了。
(二)內(nèi)部一致性分析
1、有時在進(jìn)行項(xiàng)目分析時,難以找到合適的效標(biāo),這時可以采用測驗(yàn)的總分代替效標(biāo),考察每個試題和總分的一致性,即做項(xiàng)目-總分分析。
(三)項(xiàng)目效度與內(nèi)部一致性的比較
1、項(xiàng)目效度代表題目與外在效標(biāo)的關(guān)系,內(nèi)部一致性則更多地代表題目與總分的關(guān)系。有較高的內(nèi)部一致性的題目,并不一定與外在效標(biāo)有很高相關(guān)。
2、那么空間選擇何種鑒別度作為選擇題目的依據(jù)更為合適呢?
(1)一般根據(jù)測驗(yàn)的目的確定。如果測驗(yàn)是預(yù)測性測驗(yàn),則應(yīng)該多采用項(xiàng)目效度較高的試題,這樣,各個試題對預(yù)測外在效標(biāo)都有較大的貢獻(xiàn);
(2)如果測驗(yàn)要求同質(zhì),即希望各個試題都測量同一特質(zhì),則應(yīng)該選擇內(nèi)部一致性較高的題目。
(四)鑒別度的標(biāo)準(zhǔn)。
1、就成就測驗(yàn)而言,一般要求項(xiàng)目和總分的相關(guān)達(dá)到0.20以上,而鑒別度指數(shù)希望達(dá)到0.15~0.20以上。一般心理測驗(yàn),D值在0.30以上就可以接受了。
三、測量的誘答分析
1、誘答分析是指系統(tǒng)考察測試題目,以診斷題目是否符合一系列測量學(xué)要求的過程,主要目的在于避免猜測的影響,使題目真正反映應(yīng)試者的真實(shí)情況。
2、在設(shè)計(jì)誘答時,要注意避免兩種情況:
第一,不要出現(xiàn)過于容易被排除的誘答,這會使不知道正確答案的被試猜測正確的概率提高;
第二,不要出現(xiàn)過于似真的選項(xiàng),即欺騙性誘答。