心理學(xué) - 話題

第十章
目標(biāo)參照測驗>>練習(xí)與思考
練習(xí)與思考：

1.請根據(jù)表10.3中專家評定結(jié)果的平均數(shù)對表中14道題目的內(nèi)容效度進(jìn)行評定，并決定題目的取舍。
2.目標(biāo)參照測驗的題目區(qū)分度可以通過哪些方法來確定？
3.目標(biāo)參照測驗的信度與效度為何不適宜以相關(guān)系數(shù)作為評價指標(biāo)？
4.試比較目標(biāo)參照測驗與常模參照測驗的異同。
5.試分析內(nèi)容范圍的界定在目標(biāo)參照測驗的標(biāo)準(zhǔn)化過程中的重要性。
6.試分析分?jǐn)?shù)分界點在目標(biāo)參照測驗的質(zhì)量評估中的作用。
7.試分析題目內(nèi)容效度與目標(biāo)參照測驗的內(nèi)容效度間的聯(lián)系。
解答要點：
　１.首先進(jìn)行專家的取舍。由于第二位專家在所有題目上所評等級與各等級平均數(shù)之間的差異之和較大，因此可以不考慮該專家的意見，只保留另外八位專家的評定結(jié)果，并重新計算這八位專家評定結(jié)果的等級平均數(shù)。
　　其次根據(jù)八位專家評定結(jié)果的等級平均數(shù)對每道題目進(jìn)行評定，并決定題目的取舍。等級平均數(shù)越高，說明題目內(nèi)容與其欲測量的目標(biāo)內(nèi)容之間的匹配程度越高，即內(nèi)容效度越高。題目2、7、14、4、12、5、11的內(nèi)容效度很高（等級平均值均在4以上），可以得到完整的保留；題目1、3、6、9的內(nèi)容效度較高（等級平均值均在3-4之間），適當(dāng)修改后即可；題目8、13、10的內(nèi)容效度較差（等級平均值均在3以下），一般需做較大修改或直接刪除。
　２.目標(biāo)參照測驗的題目區(qū)分度可以通過計算題目的難度差值和題目得分與測驗總分之間的相關(guān)系數(shù)來表示。難度差值包括掌握組-未掌握組鑒別指數(shù)和個人獲得指數(shù)兩種。
�。�.相關(guān)系數(shù)受到受測者團體異質(zhì)性的影響，團體的異質(zhì)性越高，測驗分?jǐn)?shù)的分布就越廣，所計算出來的相關(guān)系數(shù)就接近真實值。由于目標(biāo)參照測驗的目的在于了解個體在所測內(nèi)容上的掌握水平，因此大多數(shù)情況下，被試團體在目標(biāo)參照測驗上的分?jǐn)?shù)分布比較集中，并且絕大多數(shù)被試都能夠達(dá)到所要求的水平。如果用相關(guān)系數(shù)作為信效度指標(biāo)，由于受到分?jǐn)?shù)分布的影響，即使該測驗本身具有較高的穩(wěn)定性和一致性，所得的信度系數(shù)也會和低，所以目標(biāo)參照測驗的信度與效度不適宜以相關(guān)系數(shù)作為評價指標(biāo)。
�。�.常模參照測驗的目的在于度量和比較個體之間的差異，并以被試在團體中的相對位置來評價和解釋測量結(jié)果。目標(biāo)參照測驗的主要目的則在于了解個體在所規(guī)定的測量內(nèi)容上的行為水平，其出發(fā)點是個體本身的絕對水平，而不再是個體間的水平差異。由于測驗性質(zhì)的不同和受測人群可能存在的差異，兩種測驗的項目分析和信效度評估需采用不同的方法和評價指標(biāo)。另外，目標(biāo)參照測驗通常要根據(jù)切割分?jǐn)?shù)線對被試進(jìn)行分類，所以在目標(biāo)參照測驗中對分?jǐn)?shù)分界點的確定具有十分重要的意義。
�。�.從目標(biāo)參照測驗的定義來看，構(gòu)成測驗的各個項目是否合適，測驗是否有效，測驗的分?jǐn)?shù)是否能夠得到有意義而準(zhǔn)確的解釋，這一切的前提都在于測驗有沒有明確的目的以及與之相應(yīng)的嚴(yán)格界定的內(nèi)容范圍。因此對于目標(biāo)參照測驗而言，測驗編制的前期過程，尤其是內(nèi)容范圍的確定十分重要。
　６.在目標(biāo)參照測驗的實際應(yīng)用中，常常要根據(jù)分?jǐn)?shù)分界點來判斷某考生是否達(dá)到了升一個年級或畢業(yè)所要求掌握的最低知識技能水平，或者是否達(dá)到了從事特定專業(yè)工作所需的最低水平。這個分?jǐn)?shù)分界點的確定科學(xué)與否，直接決定了我們最終決策的正確與否。因此分?jǐn)?shù)分界點在目標(biāo)參照測驗的質(zhì)量評估中具有十分重要的作用。
�。�.題目內(nèi)容效度與目標(biāo)參照測驗的內(nèi)容效度之間有著重要的聯(lián)系。要確定目標(biāo)參照測驗是否有效，必須首先要對構(gòu)成測驗的每一個題目是否合適以及有效性進(jìn)行分析，即檢驗題目與測驗內(nèi)容范圍所要求的內(nèi)容與目標(biāo)的一致性。目標(biāo)參照測驗注重被試在其所測內(nèi)容范圍內(nèi)的掌握程度，測驗本身的題目組成對其欲測的內(nèi)容范圍的覆蓋程度或代表性程度--即測驗的內(nèi)容效度-- 顯得尤其重要。

第十一章
學(xué)績測驗>>練習(xí)與思考
練習(xí)與思考：

1.結(jié)合實際的測驗例子試述學(xué)績測驗的性質(zhì)和作用。

2.就《心理與教育測量》前10章內(nèi)容，設(shè)計一份測驗編制計劃。(此題為思考題）

3.標(biāo)準(zhǔn)化學(xué)績測驗的標(biāo)準(zhǔn)化要求有哪些？如何才能做到？
４.舉例說明診斷測驗如何實現(xiàn)它的診斷功能？
（此題為思考題）
５.題庫的基本要求是哪些？你認(rèn)為建設(shè)題庫有些什么好處？
６.就你的經(jīng)驗談?wù)劷處熥跃帨y驗存在哪些不是？改進(jìn)的途徑是什么？
解答要點:

1.學(xué)績測驗是對個體在一個階段的學(xué)習(xí)或訓(xùn)練之后知識、技能的發(fā)展水平的測定，學(xué)績測驗與能力測驗一樣在測量學(xué)中屬于最佳行為測驗,其所測對象為個體的認(rèn)知性心理品質(zhì)，主要包括知識能力兩個方面。學(xué)績測驗有時也用來預(yù)測被試在今后的學(xué)習(xí)或工作中的成就，但是它與一般的性向測驗有所不同。
　　學(xué)校使用學(xué)績測驗鑒定學(xué)生的學(xué)績成績以及輔助本學(xué)校的教學(xué)管理；現(xiàn)代社會的人事管理中的人員取錄、晉職提級常以學(xué)績測驗成績作為重要的評價標(biāo)準(zhǔn)；教育科學(xué)研究工作者利用學(xué)績測驗信息評價教育決策、優(yōu)選教育方案。

3.標(biāo)準(zhǔn)化學(xué)績測驗的標(biāo)準(zhǔn)化要求包括:
　�。ㄒ唬┟�題組卷標(biāo)準(zhǔn)化。標(biāo)準(zhǔn)化試卷的試題測量目標(biāo)明確，語詞意義清晰、試題難度、區(qū)分度達(dá)到規(guī)定標(biāo)準(zhǔn)。全卷的結(jié)構(gòu)與測量的目標(biāo)一致，題型比例恰當(dāng)，題量適度，試題難度分布符合規(guī)定要求，試卷的信、效度都達(dá)到規(guī)定標(biāo)準(zhǔn)。
　　（二）施測標(biāo)準(zhǔn)化。標(biāo)準(zhǔn)化測驗必須在統(tǒng)一標(biāo)準(zhǔn)的環(huán)境下施測，統(tǒng)一標(biāo)準(zhǔn)環(huán)境包括測驗場所的標(biāo)準(zhǔn)統(tǒng)一、測驗時間統(tǒng)一、測驗的指導(dǎo)語統(tǒng)一、提供給考生的測驗材料統(tǒng)一、材料出示的順序統(tǒng)一。
　�。ㄈ�）評分標(biāo)準(zhǔn)化。標(biāo)準(zhǔn)化測驗的答案要正確、規(guī)范、唯一，評分規(guī)則應(yīng)盡量細(xì)致、客觀、最好是沒有伸縮性。
　�。ㄋ模�測驗分?jǐn)?shù)解釋標(biāo)準(zhǔn)化。對于常模參照測驗，必須編制好測驗常模；對于目標(biāo)參照測驗必須認(rèn)真研究教材和教學(xué)大綱，分析合格標(biāo)準(zhǔn)的確切含義，通過調(diào)整試卷難度結(jié)構(gòu)準(zhǔn)確劃定合格分?jǐn)?shù)線。

5.題庫的基本要求包括：
　�。�1）植基于一種科學(xué)的測量理論；
　�。�2）儲備有一定數(shù)量的試題，所有試題品質(zhì)優(yōu)良，技術(shù)參數(shù)完備；
　�。�3）題庫內(nèi)容結(jié)構(gòu)層次清楚、分類嚴(yán)謹(jǐn)，試題檢索方便；
　�。�4）題庫管理方便、可控性強、易于維護更新；
　�。�5）保密性強，應(yīng)用題庫組拼標(biāo)準(zhǔn)化學(xué)績測驗的試卷，具有經(jīng)濟、高效、保密性強等優(yōu)點。

6.（一）教師要深入研究教材，深入調(diào)查學(xué)生。僅憑經(jīng)驗命題容易形成所測內(nèi)容往往只涉及自己熟悉的或自己注重的內(nèi)容，考試對象只以自己熟悉的或親近學(xué)生為代表，這樣會造成命題試卷內(nèi)容部全面，或脫離學(xué)生實際。
　�。ǘ�）要維護準(zhǔn)確穩(wěn)定的合格標(biāo)準(zhǔn)。所謂準(zhǔn)確就是要保證凡被評為合格的學(xué)生確實都是達(dá)到教學(xué)基本要求的人，凡被評為部合格的學(xué)生確實是未達(dá)到學(xué)科基本要求的人，要盡量減少誤判之處；所謂穩(wěn)定，就是在各次測驗中都維持同一個合格標(biāo)準(zhǔn)，不能忽高忽低。
　�。ㄈ�）要客觀評價自己的命題技術(shù)，合理使用各種題型。定向反應(yīng)型試題命題技術(shù)要求比較高，沒有一定的命題經(jīng)驗和技術(shù)，編寫定向反應(yīng)型試題，有時反而會達(dá)不到預(yù)期的要求。
　�。ㄋ模┮�注意總結(jié)命題經(jīng)驗，提高命題技術(shù)。教師要通過不斷總結(jié)成功、反思失敗，逐漸掌握命題的各種技巧�？偨Y(jié)命題經(jīng)驗還具體包括不斷積聚優(yōu)秀試題，不斷充實個人的題庫。
　　（五）要盡量控制評分誤差，防止簡單粗糙。教師自編測驗應(yīng)防止評分簡單粗糙、草率從事，要防止簡單地以對錯判分，特別是對于自由反應(yīng)型試題評分應(yīng)詳細(xì)分析學(xué)生的作答過程，評價他的思維方式和思維水平。
　�。�六）要做一些定量分析研究。教師在自編測驗施測后對試卷做一些定量的分析研究，比如計算試題難度、區(qū)分度、信度、效度等，可以逐步總結(jié)命題經(jīng)驗，提高命題技術(shù)。