07年自考“人事測(cè)量”串講資料（5）

　　三、測(cè)試題的預(yù)測(cè)試和分析

　　◎預(yù)備測(cè)試題：測(cè)試題編排完成并不意味著這項(xiàng)測(cè)量工具的編制就此完成。前面對(duì)題目的選取只是依靠編寫者的主觀經(jīng)驗(yàn)，題目的效果如何還需要進(jìn)行定量的客觀分析。這時(shí)的測(cè)試題還只能叫做預(yù)備測(cè)試題，還需要獲取被試對(duì)這些題目的反應(yīng)的材料，為進(jìn)一步篩選題目和為編排測(cè)量工具提供客觀依據(jù)。

　　◎預(yù)測(cè)試：必須將預(yù)備測(cè)試題對(duì)一定規(guī)模的小樣本被試進(jìn)行施測(cè)，獲得數(shù)據(jù)以進(jìn)行校驗(yàn)、修訂。這一過程稱為測(cè)試題的預(yù)測(cè)試。

　　◎題目分析：測(cè)驗(yàn)數(shù)據(jù)收集上來之后，應(yīng)該利用這些數(shù)據(jù)對(duì)題目進(jìn)行分析，刪除不好的題目或?qū)︻}目進(jìn)行修改，這個(gè)過程稱為題目分析。具體內(nèi)容包括對(duì)題目的項(xiàng)目分析和對(duì)測(cè)驗(yàn)信度、效度指標(biāo)的檢查。

　　對(duì)測(cè)試題的預(yù)測(cè)試應(yīng)注意以下問題：⑴預(yù)測(cè)試對(duì)象必須和將來正式測(cè)試的對(duì)象相似；⑵預(yù)測(cè)試的實(shí)施過程與情境應(yīng)力求與將來正式測(cè)量工具實(shí)施時(shí)的情境相似；⑶預(yù)測(cè)試的時(shí)限可稍寬些，最好使每個(gè)被試都能將題目答完，以便搜集充分的反應(yīng)資料，使統(tǒng)計(jì)分析的結(jié)果更為可靠；⑷在預(yù)測(cè)試過程中，應(yīng)將被試的各種反映情況隨時(shí)加以記錄。如，記錄在不同時(shí)限內(nèi)一般被試所完成的題目數(shù)、題意不清之處、被試的態(tài)度等，以便在在修改測(cè)驗(yàn)時(shí)作為參考。

　　預(yù)測(cè)試完成后，可以根據(jù)預(yù)測(cè)結(jié)果進(jìn)行題目分析，對(duì)每個(gè)題目的具體分析稱為項(xiàng)目分析，主要是指根據(jù)題目的難度、區(qū)分度、備選答案的合適度等數(shù)量指標(biāo)來對(duì)題目進(jìn)行分析。

　　2.☆被試特點(diǎn)對(duì)測(cè)量結(jié)果的影響：

　?、艤y(cè)驗(yàn)的技巧與練習(xí)因素?！蚓毩?xí)效應(yīng)：有不少研究發(fā)現(xiàn)，應(yīng)試者參加相同或重復(fù)的測(cè)驗(yàn)，會(huì)由于練習(xí)效應(yīng)而使測(cè)驗(yàn)成績(jī)提高。

　?、平箲]和動(dòng)機(jī)因素。①應(yīng)試動(dòng)機(jī)；②測(cè)驗(yàn)焦慮?！蚪箲]是一種不愉快的、表現(xiàn)為焦急、恐懼和緊張的情緒體驗(yàn)，它主要是由于對(duì)可能出現(xiàn)的結(jié)果的擔(dān)心或?qū)?yīng)付這一結(jié)果的能力的擔(dān)心而造成。大多數(shù)人都在測(cè)驗(yàn)前和測(cè)驗(yàn)中感到焦慮，故又稱測(cè)驗(yàn)焦慮或考試焦慮。

　?、欠磻?yīng)定勢(shì)?！蚍磻?yīng)定勢(shì)也成為反應(yīng)的方式或反應(yīng)風(fēng)格，簡(jiǎn)單地說，就是每個(gè)人回答問題的習(xí)慣方式。

　　☆影響測(cè)量結(jié)果的反應(yīng)定勢(shì)主要有以下幾種：①求“快”與求“精確”的反應(yīng)定勢(shì)。②偏好正面敘述的反應(yīng)定勢(shì)，又成為肯定反應(yīng)定勢(shì)，克倫巴赫發(fā)現(xiàn)。③偏好特殊位置的反應(yīng)定勢(shì)。吉爾福特認(rèn)為，被試如果完全不知道選擇題的正確答案，則不會(huì)以完全隨機(jī)的方式來決定該選擇哪一個(gè)選項(xiàng)，而有偏好某一個(gè)位置的選項(xiàng)的傾向，而有些測(cè)驗(yàn)編制者也存在偏好某個(gè)位置的反應(yīng)定勢(shì)，這些現(xiàn)象稱為位置定勢(shì)。④偏好較長(zhǎng)選項(xiàng)的反應(yīng)定勢(shì)。⑤猜測(cè)的反應(yīng)定勢(shì)。

　　四、猜測(cè)的校正

　　1.★猜測(cè)修正的公式：S=R-W/（n-1），其中，S是正確分?jǐn)?shù)；R為被試答對(duì)的題目數(shù)；W為被試答錯(cuò)的題目數(shù)；n為選項(xiàng)數(shù)目。

　　2.☆猜測(cè)修正的優(yōu)缺點(diǎn)。優(yōu)點(diǎn)：⑴修正公式可避免減低測(cè)驗(yàn)的信度。⑵修正公式可以反映被試真正的能力和水平。⑶使用修正公式對(duì)那些不能答完全部試題的被試來說比較公平。

　　缺點(diǎn)：⑴公式假設(shè)不成立，因?yàn)楸辉嚧疱e(cuò)試題，并非完全瞎猜。⑵猜測(cè)修正無實(shí)質(zhì)作用。⑶未采用猜測(cè)修正對(duì)信度并無重大影響。⑷完全不許猜測(cè)與實(shí)際生活不符。

　　第二節(jié)實(shí)施測(cè)量計(jì)分的要領(lǐng)與誤差控制

　　檢驗(yàn)客觀與否，可以以兩個(gè)或兩個(gè)以上受過訓(xùn)練的合格評(píng)分者所評(píng)結(jié)果之間的一致性作為指標(biāo)。一般情況下，受過訓(xùn)練的評(píng)分者之間的平均一致性達(dá)到90%以上，我們就認(rèn)為計(jì)分是客觀的。

　　一、計(jì)分的一般程序

　　1.◆☆計(jì)分的基本步驟：⑴記錄反應(yīng)。及時(shí)和清楚地記錄被試的反應(yīng)。⑵檢索標(biāo)準(zhǔn)答案。標(biāo)準(zhǔn)答案有時(shí)又稱計(jì)分鍵。⑶反應(yīng)和標(biāo)準(zhǔn)答案的比較。

　　2.◇問答題的主要缺點(diǎn)是評(píng)分不夠客觀，也就是說問答題的計(jì)分經(jīng)常受到評(píng)分者的情感、態(tài)度的影響。問答題中常見的誤差有：寬容定勢(shì)和暈輪效應(yīng)。

　　3.◎?qū)捜荻▌?shì)：指主試的計(jì)分過于寬松，即使沒有回答出題目所要求的答案，評(píng)分者也給予較高的分?jǐn)?shù)。

　　4.◎暈輪效應(yīng)：指給予被試某道題較高分?jǐn)?shù)僅僅是由于被試在另外一些試題上獲得了高分，也就是說對(duì)被試的一般印象影響到具體某個(gè)問題的評(píng)價(jià)。

　　5.◎整體計(jì)分：就是評(píng)分者根據(jù)總體印象給答案評(píng)一個(gè)總分。整體計(jì)分在實(shí)際中應(yīng)用較為普遍。

　　6.◎分析計(jì)分：是給問答題的不同部分分派不同的權(quán)數(shù)，按照各部分的要求對(duì)答案中所包括的信息和技能評(píng)分，最后將各部分的權(quán)數(shù)和得分組合起來得到該問答題的分?jǐn)?shù)。

　　比較整體計(jì)分和分析計(jì)分？（回答上面的名詞，再加以說明）

　　7.◇客觀題的一個(gè)主要優(yōu)點(diǎn)就是計(jì)分簡(jiǎn)單、客觀。

　　8.不同的反應(yīng)依據(jù)主試認(rèn)為的重要性不同也可以給予不同的權(quán)數(shù)，我們還可以根據(jù)被試回答問題時(shí)的確定程度給予不同的權(quán)數(shù)，這叫做“信心權(quán)數(shù)”◎。

　　第六章 人事測(cè)量結(jié)果的解釋

　　人事測(cè)量的解釋不同于測(cè)量實(shí)施本身，它們是測(cè)量中兩個(gè)不同的、相對(duì)獨(dú)立的成分。測(cè)量的解釋是一個(gè)相當(dāng)復(fù)雜的系統(tǒng)程序。