《心理測(cè)量學(xué)課件6第四章項(xiàng)目分析.ppt》由會(huì)員分享，可在線閱讀，更多相關(guān)《心理測(cè)量學(xué)課件6第四章項(xiàng)目分析.ppt（49頁珍藏版）》請(qǐng)?jiān)谘b配圖網(wǎng)上搜索。

1、第四章 項(xiàng)目分析 測(cè)驗(yàn)分?jǐn)?shù)的解釋與應(yīng)用,,第八章 測(cè)驗(yàn)的項(xiàng)目分析 項(xiàng)目分析包括定性分析和定量分析。定性分析包括考慮內(nèi)容效度、題目編寫的恰當(dāng)性和有效性等；定量分析主要是指題目難度和區(qū)分度的測(cè)量。 對(duì)項(xiàng)目進(jìn)行篩選和修訂，可以提高測(cè)驗(yàn)的信度和效度。無論是何種類型的測(cè)驗(yàn)，都需要進(jìn)行分析。 在對(duì)結(jié)果進(jìn)行分析時(shí)需要解答如下問題： 設(shè)定的測(cè)試時(shí)間長(zhǎng)度是否適當(dāng)？ 受測(cè)者是否理解指導(dǎo)語？ 施測(cè)條件是否適當(dāng)？ 緊急意外事件的處理是否恰當(dāng)？.,,下面所列的問卷，是受測(cè)者完成成就測(cè)驗(yàn)后填寫的，其目的是提供關(guān)于測(cè)驗(yàn)公平性的信息： 測(cè)驗(yàn)評(píng)價(jià)表 指導(dǎo)語：請(qǐng)?jiān)谕瓿蓽y(cè)驗(yàn)后填寫這份表格，請(qǐng)您對(duì)每個(gè)項(xiàng)目的反應(yīng)上畫圓

2、圈，并將您認(rèn)為恰當(dāng)?shù)睦碛商顚懺诳崭裉帯?1、Y N 測(cè)試環(huán)境（座位、溫度、通風(fēng)、噪音水平等）您是否滿意？ 2、Y N 在測(cè)試之前您是否已仔細(xì)閱讀了指導(dǎo)語？ 3、Y N 測(cè)驗(yàn)指導(dǎo)語是否清晰？,,4、Y N 測(cè)驗(yàn)的格式（項(xiàng)目類型、項(xiàng)目編排、答題卡等）您是否滿意？ 5、Y N 測(cè)驗(yàn)是否充分涵蓋了考試指定材料？ 6、Y N 測(cè)驗(yàn)問題的難度是否適宜？ 7、Y N 您對(duì)參加該測(cè)試是否做了充分的準(zhǔn)備？ 8、Y N 您是否學(xué)習(xí)了合適的材料？ 9、Y N 您認(rèn)為是否答錯(cuò)了某些測(cè)驗(yàn)問題？具體是哪些？ 10、Y N 您是否對(duì)測(cè)驗(yàn)回答進(jìn)行了猜測(cè)？猜測(cè)的問題有多少？具體是哪些問題？ 11、Y N 您是否有沒作答的問題？

3、具體是哪些問題？,,12、Y N 您是否有足夠的時(shí)間答完測(cè)驗(yàn)？ 13、Y N 您在完成測(cè)驗(yàn)后是否檢查了作答的答案？ 14、Y N 在測(cè)驗(yàn)的過程中您是否有焦慮或情緒上的厭煩？ 15、Y N 測(cè)驗(yàn)是否公正？ 16、Y N 總的來說，這是否是一份好的測(cè)驗(yàn)？ 17、Y N 您是否觀察到測(cè)試中有欺詐行為？ 18、Y N 您期望在此測(cè)驗(yàn)上獲得哪個(gè)等級(jí)的成績(jī)？,,分析受測(cè)者在某個(gè)項(xiàng)目上的反應(yīng)，功能是： 1、進(jìn)行項(xiàng)目分析的主要目的是提供測(cè)驗(yàn)質(zhì)量或刪除無效的項(xiàng)目。 2、對(duì)于成就測(cè)驗(yàn)而言，是提供受測(cè)者掌握知識(shí)與否的診斷信息，看受測(cè)者是否對(duì)測(cè)驗(yàn)有充分的準(zhǔn)備，是否能滿足他們的期望等等。,,第一節(jié) 測(cè)驗(yàn)的難度 一、難度

4、（difficulty）的意義 難度，指項(xiàng)目的難易程度。 在能力測(cè)驗(yàn)中，稱為“難度”，而在非能力測(cè)驗(yàn)中（如人格），則指“通俗性”。兩者都是指在總體中，能夠正確或確切回答某項(xiàng)目的人數(shù)。,,二、難度的計(jì)算 （一）二分法記分項(xiàng)目的難度 1通過率 P=R/N100% P代表項(xiàng)目的通過率，N為全體受測(cè)人數(shù)，R為通過或答對(duì)該項(xiàng)目的人數(shù)。 以通過率來表示項(xiàng)目的難度，P越大，項(xiàng)目越容易，難度越低。,,2極端分組法（上下27%） P=（PH+PL）/2 P代表難度，PH和PL分布代表高分組和低分組通過率，此公式還可轉(zhuǎn)換為 P=(RH+RL)/2N100% RH和RL分別代表高分組和低分組通過該題

5、的人數(shù)，N代表每個(gè)組的人數(shù)。,,例如：在100名被試中，選為高分組和低分組的被試各有27人，其中高分組有20人答對(duì)第一題，低分組有10人答對(duì)第一題，則第一題的難度為： (1) PH=20/27100%=74.1% PL=10/27100%=37% P=(74.1%+37%)/2=55.6% (2) P=(20+10)/227=55.6%,,練習(xí)： 一個(gè)測(cè)驗(yàn)項(xiàng)目向75名受測(cè)者施測(cè)，高水平組（測(cè)驗(yàn)總分中最高27）中有18名答對(duì)此項(xiàng)目，低水平（27）中有12名受測(cè)者答對(duì)此題目，那么此項(xiàng)目的難度是多少？,,3、選擇題的難度校正公式：,CP為校正后的通過率，P為實(shí)際得到的通過率，K為備選項(xiàng)目的

6、數(shù)目。,例如：假定某題有75的被試通過，如果該題有5個(gè)備選項(xiàng)目，則校正后通過率實(shí)為：,（二）非二分法記分項(xiàng)目的難度，測(cè)試題為問答題或其他不能用二分法記分的形式時(shí)，常常對(duì)部分正確的反應(yīng)也給一定分?jǐn)?shù)，在這樣情況下，可以先人為的確定通過每一題的分?jǐn)?shù)線，再按公式計(jì)算難度： x100 為所有被試在該項(xiàng)目上的平均得分， Xmax為該項(xiàng)目的滿分。,,例如：一個(gè)數(shù)學(xué)題的滿分為20分，全體考生在試題上所得的平均分?jǐn)?shù)為15分，其難度為： P=15/200.75,三、測(cè)驗(yàn)難度水平的確定 效標(biāo)參照測(cè)驗(yàn)、掌握測(cè)驗(yàn)：不考慮難度； 選拔測(cè)驗(yàn)：難度=錄取率； 對(duì)于選擇題來說，難

7、度一般應(yīng)大于猜測(cè)概率； 無論是速度測(cè)驗(yàn)，還是難度測(cè)驗(yàn)，一般都應(yīng)防止被試得滿分，因?yàn)闈M分的意義是不明確的。 大體而言，難度為0.50時(shí)最理想，此時(shí)項(xiàng)目具有最大的鑒別力。但在實(shí)際操作中，讓所有項(xiàng)目難度都到達(dá)0.50困難很大，而且也不必要，一般只需使項(xiàng)目的平均難度接近0.50，而各個(gè)項(xiàng)目的難度在0.50 0.20之間變化。,四、難度的等距變換 根據(jù)正態(tài)分布表，將難度P作為正態(tài)曲線下的面積，轉(zhuǎn)換成相應(yīng)的Z分?jǐn)?shù)，這就是等距量表。 P Y 0 Z,美國(guó)教育服務(wù)中心以 作為難度指標(biāo)： =13+4Z P = .0013 Z

8、 = +3 = 25 P = .16 Z = +1 = 17 P = .50 Z = 0 = 13 P = .84 Z = -1 = 9 P = .9987 Z = -3 = 1,五、難度對(duì)測(cè)驗(yàn)的影響 （一）測(cè)驗(yàn)難度影響測(cè)驗(yàn)分?jǐn)?shù)的分布形態(tài) 難度大，正偏態(tài) 難度低，負(fù)偏態(tài),（二）測(cè)驗(yàn)難度影響測(cè)驗(yàn)分?jǐn)?shù)的離散程度 測(cè)驗(yàn)過難或過易，分?jǐn)?shù)全距縮小，信度降低。 P=0.50時(shí)最佳,第二節(jié) 測(cè)驗(yàn)的區(qū)分度 一、區(qū)分度的意義 區(qū)分度（discrimination）是指測(cè)驗(yàn)項(xiàng)目對(duì)被試心理品質(zhì)水平差異的區(qū)分能力或鑒別能力。 項(xiàng)目的區(qū)分度是測(cè)驗(yàn)是否有效的“指示器”。 鑒別力分析的設(shè)想基礎(chǔ)：如

9、果單個(gè)項(xiàng)目與測(cè)驗(yàn)測(cè)的是同11、 一特性，那么我們可以預(yù)期在測(cè)驗(yàn)上得高分的人正確回答這一問題的概率大，而在測(cè)驗(yàn)上得低分的人正確回答這一問題的概率低。鑒別力分析就是在這一設(shè)想的基礎(chǔ)上進(jìn)行的。項(xiàng)目的鑒別力就是其對(duì)于所測(cè)量的心理特性的區(qū)分能力。 鑒別力分析的一般方法：鑒別力指數(shù)、項(xiàng)目-總分相關(guān)、項(xiàng)目間相關(guān)。,,二、區(qū)分度的計(jì)算 （一）項(xiàng)目鑒別指數(shù)法 1鑒別指數(shù)（index of discrimination，D）的計(jì)算 D = PH - PL 取值范圍：-1 +1 D為鑒別指數(shù)， PH為高分組在某個(gè)項(xiàng)目上的通過率， PL為低分組在該項(xiàng)目上的通過率。,,例如：某小學(xué)數(shù)學(xué)測(cè)驗(yàn)，受測(cè)者共18人，高分組和低分

10、組若各取總?cè)藬?shù)的27，則兩組各為5人，第8題高分組5人全部答對(duì)，低分組1人答對(duì)，則第8題的鑒別指數(shù)為： D5/5-1/5=0.8 D值是鑒別項(xiàng)目測(cè)量效標(biāo)有效性的指標(biāo)，D越高，項(xiàng)目的區(qū)分度就越高，項(xiàng)目就越有效。如果測(cè)驗(yàn)只是用來考查學(xué)生對(duì)一些基本知識(shí)和技能是否掌握，則不用考慮區(qū)分度。,,一個(gè)測(cè)驗(yàn)項(xiàng)目向75名受測(cè)者施測(cè)，高水平組（測(cè)驗(yàn)總分中最高27）中有18名答對(duì)此項(xiàng)目，低水平（27）中有12名受測(cè)者答對(duì)此題目，那么此項(xiàng)目的區(qū)分度是多少？,2極端組的劃分 27%規(guī)則 一般情況下，取上下25%33%均可。 樣本少時(shí)，可以取50% 注意： 由于計(jì)算機(jī)的方便使用，可以上下50%作為劃分高低組的標(biāo)準(zhǔn)，或者多

11、分幾組，對(duì)區(qū)分度和難度作詳細(xì)分析。因?yàn)橹蝗∩舷聝啥?，只利用了一部分資料，浪費(fèi)了很多信息，有可能得出錯(cuò)誤結(jié)論。,,（二）相關(guān)法（項(xiàng)目-總分相關(guān)）1點(diǎn)二列相關(guān),,是受測(cè)者總量,是答對(duì)該項(xiàng)目的受測(cè)者量,是通過該項(xiàng)目的受測(cè)者效標(biāo)分?jǐn)?shù)的平均數(shù),是所有效標(biāo)分?jǐn)?shù)的平均數(shù),是所有效標(biāo)分?jǐn)?shù)的標(biāo)準(zhǔn)差,,例如：假定有30人，他們測(cè)驗(yàn)總分的平均數(shù)和標(biāo)準(zhǔn)差分別是75和10，如果有17名受測(cè)者答對(duì)某個(gè)項(xiàng)目，他們測(cè)驗(yàn)總分的平均分?jǐn)?shù)是80，那么項(xiàng)目的效度是多少？,,,,一個(gè)測(cè)驗(yàn)的項(xiàng)目答對(duì)的 記1分，答錯(cuò)的記0分，這時(shí)項(xiàng)目的分?jǐn)?shù)就是一個(gè)二分變量，而測(cè)驗(yàn)的總分則為連續(xù)變量，如果要計(jì)算該項(xiàng)目的區(qū)分度，就可用點(diǎn)二列相關(guān)公式：,,,通

12、過該項(xiàng)目的受測(cè)者總分的平均值,未通過該項(xiàng)目的受測(cè)者的總分平均值,所有值的標(biāo)準(zhǔn)差,,方差的計(jì)算：,,例題：下表是某學(xué)校的15名學(xué)生的總分和某項(xiàng)目的解答情況，計(jì)算該項(xiàng)目與總分的相關(guān)系數(shù)。,（三）項(xiàng)目特征曲線（item characteristic curve, ICC） 項(xiàng)目特征曲線描述了效標(biāo)分?jǐn)?shù)不同的被試在該項(xiàng)目上的通過率。 曲線坡度越陡，鑒別力越好，預(yù)測(cè)的誤差越小。,,,,率 概 的 目 項(xiàng) 答 回 確 正,1.00,0.00,0.50,低 中 高 能力,鑒別力較好,低 中 高 能力,鑒別力為負(fù),鑒別力較低,,難度不同的3個(gè)項(xiàng)目的

13、ICC,,項(xiàng)目特征曲線：運(yùn)用圖象直觀地顯示了隨著測(cè)驗(yàn)者某種心理特征水平的變化，正確回答某個(gè)項(xiàng)目的概率是如何變化的。項(xiàng)目特征曲線是現(xiàn)代心理測(cè)量學(xué)最有影響的理論之一-項(xiàng)目反應(yīng)理論或稱潛特征理論的基礎(chǔ)。ICC歸納了項(xiàng)目分析的信息，顯示了心理能力水平與項(xiàng)目反應(yīng)之間的關(guān)系。 當(dāng)項(xiàng)目-總體相關(guān)為正時(shí)，ICC的斜率也是正的；當(dāng)相關(guān)接近0時(shí)，ICC斜率也接近于0；當(dāng)相關(guān)為負(fù)時(shí)，ICC斜率為負(fù)。,多項(xiàng)選擇中每個(gè)選項(xiàng)的ICC,三、區(qū)分度與難度的關(guān)系,難度和區(qū)分度都是針對(duì)一定團(tuán)體而言的。 一般來說，較難的項(xiàng)目對(duì)高水平被試區(qū)分度高，較易的項(xiàng)目對(duì)低水平被試的區(qū)分度高。,四、區(qū)分度的相對(duì)性 （一）不同的計(jì)算方法，所得區(qū)分

14、值不同 區(qū)分度有幾種計(jì)算方法？ （二）樣本容量大小影響相關(guān)法區(qū)分度值的大小 樣本越大，區(qū)分度越 （三）分組標(biāo)準(zhǔn)影響鑒別指數(shù) 分組越極端，區(qū)分度越 （四）被試樣本的同質(zhì)性程度影響區(qū)分度值的大小 樣本越同質(zhì)，區(qū)分度越,第三節(jié) 項(xiàng)目分析的特殊問題 一、多重選擇題的項(xiàng)目分析（誘答分析） 對(duì)于多重選擇題，除了分析難度和區(qū)分度外，還要對(duì)每個(gè)選項(xiàng)進(jìn)行分析。 下列哪一個(gè)最有可能是偏執(zhí)型精神分裂癥患者的次級(jí)癥狀： A 幻聽 B 癱瘓 C 記憶喪失 D 厭食,如果所有被試都選擇某一正確的選項(xiàng)，說明該選項(xiàng) 如果沒有一個(gè)被試選擇某個(gè)錯(cuò)誤選項(xiàng)，說明該選項(xiàng) 如果所有被試都選擇某個(gè)錯(cuò)誤選

15、項(xiàng)，說明該選項(xiàng) 如果高分組被試的選擇集中在兩個(gè)選項(xiàng)上，說明該選項(xiàng) 如果高分組和低分組對(duì)正確選項(xiàng)的選擇沒有區(qū)別，說明該選項(xiàng) 如果所有被試都未回答某個(gè)題目，說明該題 如果選擇各個(gè)選項(xiàng)的人數(shù)幾乎相等，說明該題,二、速度測(cè)驗(yàn)的項(xiàng)目分析 對(duì)前面部分的測(cè)驗(yàn)項(xiàng)目，難度和區(qū)分度都 對(duì)后面部分的測(cè)驗(yàn)項(xiàng)目，難度和區(qū)分度都 三、標(biāo)準(zhǔn)參照測(cè)驗(yàn)的項(xiàng)目分析 在標(biāo)準(zhǔn)參照測(cè)驗(yàn)中，無須考慮項(xiàng)目的難度和區(qū)分度，只要項(xiàng)目的內(nèi)容很重要就行。 也可以通過比較教學(xué)或訓(xùn)練的前測(cè)和后測(cè)結(jié)果來進(jìn)行項(xiàng)目分析，用來說明教學(xué)或訓(xùn)練的效果以及項(xiàng)目編制是否適當(dāng)。,四、項(xiàng)目-團(tuán)體的相互作用 具有不同性質(zhì)（性別、種族、職業(yè)等）的團(tuán)體，在測(cè)驗(yàn)得分上也存在

16、差異，即同樣的項(xiàng)目可能有不同的難度。 如果測(cè)驗(yàn)要求對(duì)所有個(gè)體都相對(duì)“公平”，那么，就應(yīng)該排除那些有利于或不利于不同性質(zhì)的亞團(tuán)體的項(xiàng)目； 如果測(cè)驗(yàn)的目的就是為了考察不同亞團(tuán)體的差異，那么，就應(yīng)選擇使團(tuán)體差異盡可能大的題目。,五、有效性與可靠性的矛盾 同質(zhì)性信度要求項(xiàng)目之間有高相關(guān)，各項(xiàng)目的難度均等； 對(duì)于預(yù)測(cè)效度來說，因?yàn)樾?biāo)的變異范圍較大，如果項(xiàng)目越同質(zhì)，那么效標(biāo)關(guān)聯(lián)效度則低；因此，效標(biāo)關(guān)聯(lián)效度要求各項(xiàng)目之間要有一定的差異，即項(xiàng)目之間相關(guān)低，這樣才能保證測(cè)驗(yàn)得分與效標(biāo)之間有高相關(guān)，即高的效標(biāo)關(guān)聯(lián)效度。 因此，對(duì)于多數(shù)心理測(cè)驗(yàn)來說，項(xiàng)目之間中等程度的相關(guān)，可使二者調(diào)和，獲得較為滿意的（同質(zhì)性

17、）信度和（效標(biāo)關(guān)聯(lián)）效度。,,練習(xí)： 選取一名同學(xué)作為你的觀察對(duì)象，要求最好是觀察你不了解的同學(xué)，或者你對(duì)他既無好感也沒有不好的印象。在三次或四次以上的班會(huì)或其他活動(dòng)中觀察他，在不引起別人注意的情況下記錄他的言行。你的觀察應(yīng)盡量客觀，觀察時(shí)要對(duì)固定的和典型的行為進(jìn)行觀察，同時(shí)還要記錄那些不常出現(xiàn)的行為。,,體貌特征：衣著打扮、身體描述（魅力、不尋常的特征等） 行為：態(tài)度和情緒（合作、開朗或保守、友好或有敵意、防御等） 運(yùn)動(dòng)行為：積極的和消極的、身體姿勢(shì)、步態(tài)、舉止）,,在觀察結(jié)束階段，寫一份23頁的觀察報(bào)告，在這份報(bào)告中，不要對(duì)觀察對(duì)象有任何評(píng)價(jià)（如其他同學(xué)是如何談?wù)撍?，他在大學(xué)做得如何好等之類的），你將如何描繪他的個(gè)性和特征呢？最后，檢查你的觀察報(bào)告，找出與那些了解被觀察者也對(duì)被觀察者進(jìn)行觀察的人同的信息。在體驗(yàn)過用時(shí)間取樣技術(shù)進(jìn)行近距離觀察之后，你對(duì)客觀觀察作為評(píng)估人格的方法有何看法？它是否可信？是否有效？是否有用？,Click to edit company slogan .,,Thank You !,