參照過去人工評(píng)卷的方法,我們將網(wǎng)上閱卷系統(tǒng)按照三個(gè)階段來評(píng)卷,并且在計(jì)算機(jī)系統(tǒng)的控制下,過去很多好的評(píng)卷思想由于客戶條件無法實(shí)現(xiàn)或者不能很好的實(shí)現(xiàn),現(xiàn)在可以得到充分利用,不僅能夠提高評(píng)卷質(zhì)量,更能夠促進(jìn)和考察評(píng)卷員的評(píng)卷質(zhì)量。
試評(píng)階段:將部分或全部試卷分發(fā)給評(píng)卷員評(píng)卷,主要是同一評(píng)卷員對(duì)評(píng)分標(biāo)準(zhǔn)的掌握尺度。試評(píng)試卷來自于考生的正常答卷,對(duì)其評(píng)卷不影響考生的終成績(jī)。
正評(píng)階段:由系統(tǒng)將考生試卷隨機(jī)地分發(fā)給評(píng)卷員,系統(tǒng)經(jīng)過誤差控制,產(chǎn)生考生的終成績(jī)。
檢查階段:由評(píng)卷組長(zhǎng)隨機(jī)對(duì)某試題或某評(píng)卷員的評(píng)分結(jié)果進(jìn)行檢查?疾旄鹘處煹脑u(píng)分穩(wěn)定性。該階段實(shí)際上是與正評(píng)階段同時(shí)進(jìn)行的。
對(duì)設(shè)置了三評(píng)的答卷/答題,系統(tǒng)首先隨機(jī)將答卷分發(fā)給兩個(gè)評(píng)卷教師,這兩個(gè)評(píng)卷教師評(píng)閱完成后得出X1,X2兩個(gè)評(píng)分,此時(shí)系統(tǒng)將對(duì)【X1-X2】的絕對(duì)值進(jìn)行比較,如其絕對(duì)值小于容許的誤差值,則系統(tǒng)將自動(dòng)取X1,X2的平均值作為該考生的得分;如超出容許的誤差值,系統(tǒng)將把該考生的答卷自動(dòng)分發(fā)給第三人評(píng)卷人。第三評(píng)卷評(píng)閱完成后,得到X3的評(píng)分,此時(shí)系統(tǒng)對(duì)三人評(píng)分值的兩兩之差進(jìn)行比較,如果它們的差值在容許誤差范圍內(nèi),則系統(tǒng)將取三位評(píng)卷人員的評(píng)分中,差值小的兩個(gè)評(píng)分的平均值作為該考生的得分,否則系統(tǒng)將該考生的答卷轉(zhuǎn)發(fā)評(píng)卷組長(zhǎng)進(jìn)行終評(píng)。
質(zhì)量控制 在評(píng)卷過程中,雖然通過誤差控制可以有效地抑制了考生成績(jī)的評(píng)判誤差,但是所有評(píng)卷員在評(píng)卷中對(duì)標(biāo)準(zhǔn)掌握得是否一致,每一個(gè)評(píng)卷員在評(píng)卷過程中對(duì)標(biāo)準(zhǔn)的掌握是否一致,均影響著評(píng)卷的質(zhì)量、速度和考生的成績(jī)。系統(tǒng)通過以下兩個(gè)控制來進(jìn)一步抑制誤差、提高閱卷的整體質(zhì)量、效率。
評(píng)卷員之間一致性控制 控制每個(gè)評(píng)卷員之間的一致性。使用的數(shù)學(xué)模型為柯斯檢驗(yàn)法。簡(jiǎn)述如下:首先計(jì)算出整體評(píng)卷的分?jǐn)?shù)-人數(shù)比曲線,再計(jì)算評(píng)卷員個(gè)人的個(gè)人分?jǐn)?shù)-人數(shù)比曲線;這時(shí)比較兩個(gè)曲線的擬合程度,如果超過設(shè)置的允許值,則認(rèn)為評(píng)卷有誤差,否則就沒有誤差。
評(píng)卷員個(gè)人一致性控制 個(gè)人一致性控制主要通過個(gè)人復(fù)評(píng)試卷來檢驗(yàn)評(píng)卷員在評(píng)卷中的穩(wěn)定性。系統(tǒng)每隔一段時(shí)間(可以定時(shí),可以隨機(jī),隨機(jī)時(shí)要保證一定間隔)自動(dòng)在評(píng)卷員已評(píng)試卷中抽取一定數(shù)量的個(gè)人復(fù)評(píng)試卷分發(fā)給評(píng)卷員進(jìn)行評(píng)卷。
個(gè)人復(fù)評(píng)主要是檢查評(píng)卷員在不同的時(shí)間對(duì)同一份試卷評(píng)判是否一致,并將比較結(jié)果寫入統(tǒng)計(jì)結(jié)果庫(kù),以此來檢查評(píng)卷老師在評(píng)卷過程中的“穩(wěn)定性”。 其中個(gè)人復(fù)評(píng)的結(jié)果分?jǐn)?shù)不作為有效評(píng)分。
相關(guān)文章
昌吉應(yīng)用【品科】網(wǎng)上閱卷系統(tǒng)閱卷模式
阜康【品科網(wǎng)上閱卷系統(tǒng)】依托電子掃描技術(shù)實(shí)現(xiàn)快速閱卷
阿圖什【品科】網(wǎng)上閱卷系統(tǒng)掃描識(shí)別中考高考及各類考試