第三節(jié) 認(rèn)知診斷評(píng)價(jià)理論的興起

每一種新的測(cè)量學(xué)理論的興起總是伴隨著原有理論研究的深入和社會(huì)發(fā)展的進(jìn)步。認(rèn)知診斷評(píng)價(jià)理論在項(xiàng)目反應(yīng)理論深入研究的基礎(chǔ)上，順應(yīng)了社會(huì)對(duì)評(píng)價(jià)信息更加精細(xì)的需求。

一、認(rèn)知診斷評(píng)價(jià)理論的主要優(yōu)勢(shì)

隨著社會(huì)大眾和教育工作者對(duì)測(cè)量分析信息要求的轉(zhuǎn)變，一個(gè)更加關(guān)注測(cè)量的特質(zhì)內(nèi)容本身意義的理論——認(rèn)知診斷評(píng)價(jià)理論（cognitive diagnostic assessment theory，CDAT）逐步受到研究者關(guān)注。認(rèn)知診斷評(píng)價(jià)理論由于強(qiáng)調(diào)了一個(gè)核心的概念——屬性模式的作用，而被研究者認(rèn)為是一個(gè)相對(duì)獨(dú)立的測(cè)量學(xué)理論架構(gòu)。認(rèn)知診斷評(píng)價(jià)理論在形成性評(píng)價(jià)（formative assessment）中具有獨(dú)特的優(yōu)勢(shì)。

認(rèn)知診斷評(píng)價(jià)理論代表了心理測(cè)量學(xué)理論一個(gè)新的蓬勃發(fā)展的領(lǐng)域，它具有發(fā)展成為擁有諸多優(yōu)勢(shì)的理論的潛力。

認(rèn)知診斷評(píng)價(jià)理論的一個(gè)主要優(yōu)勢(shì)，是能夠在給被試特質(zhì)賦值時(shí)提供更加深入細(xì)致的診斷性信息。認(rèn)知診斷評(píng)價(jià)理論在給被試特質(zhì)賦值時(shí)，不是給其賦一個(gè)籠統(tǒng)的觀察總分（如CTT）或潛在特質(zhì)水平分?jǐn)?shù)（如IRT），而是根據(jù)被試的不同作答模式，提供出現(xiàn)這種作答模式的內(nèi)隱的、潛在的認(rèn)知結(jié)構(gòu)分析。根據(jù)對(duì)被試認(rèn)知結(jié)構(gòu)的分析，我們可以知道被試在被測(cè)量的領(lǐng)域里認(rèn)知發(fā)展的優(yōu)勢(shì)和劣勢(shì)，知道被試哪些方面的認(rèn)知水平發(fā)展得比較好，哪些方面發(fā)展得不足。因此，我們稱這種賦值模式為認(rèn)知診斷，支撐這種賦值模式的各種理論假設(shè)、數(shù)學(xué)模型、分析技術(shù)和分析方法構(gòu)成了認(rèn)知診斷評(píng)價(jià)理論的基本內(nèi)容。

二、認(rèn)知診斷評(píng)價(jià)理論的主要發(fā)展歷程

認(rèn)知診斷評(píng)價(jià)理論還非常“年輕”，然而其理論架構(gòu)卻已經(jīng)非常“健壯”。認(rèn)知診斷評(píng)價(jià)的思想在20世紀(jì)八九十年代被提出并逐步發(fā)展。1989年，羅伯特·林（Robert Linn）編輯的《教育測(cè)量》（Educational Measurement）中的兩個(gè)章節(jié)的作者塞繆爾·梅西克（Samuel Messick）和理查德·斯諾（Richard Snow）、戴維·洛曼（David Lohman）提出了認(rèn)知心理學(xué)與教育測(cè)量學(xué)結(jié)合的意義。另外，有一些代表性的文章和著作專門研究和討論了認(rèn)知診斷評(píng)價(jià)的問題，如弗雷德里克森、格拉澤、萊斯格德、沙夫特（Frederiksen，Glaser，Lesgold，Shafto）在1990年出版的書《技能與知識(shí)獲得過程診斷》（Diagnostic Monitoring of Skill and Knowledge Acquisition）；尼科爾斯（Nichols）在1994年發(fā)表的文章《認(rèn)知診斷評(píng)價(jià)的一般過程》（A Framework for Developing Cognitively Diagnostic Assessments）；尼科爾斯、奇普曼、布倫南（Nichols，Chipman，Brennan）在1995年出版的書《認(rèn)知診斷評(píng)價(jià)》（Cognitively Diagnostic Assessment）。進(jìn)入21世紀(jì)后，以美國(guó)2001年發(fā)布的《不讓一個(gè)孩子掉隊(duì)法案》為標(biāo)志，教育與心理測(cè)量學(xué)研究者開始大規(guī)模地關(guān)注和研究認(rèn)知診斷評(píng)價(jià)問題，使認(rèn)知診斷評(píng)價(jià)理論在各個(gè)方向上都取得了快速的發(fā)展。在這一時(shí)期，各種認(rèn)知診斷評(píng)價(jià)模型、模型參數(shù)估計(jì)方法、認(rèn)知診斷計(jì)算機(jī)化自適應(yīng)測(cè)驗(yàn)、測(cè)驗(yàn)屬性定義等領(lǐng)域的研究成果大量出現(xiàn)。這一時(shí)期的代表性成果如龍岡（Tatsuoka）在2009年出版的書《認(rèn)知評(píng)價(jià)：規(guī)則空間方法》（Cognitive Assessment：An Introduction to the Rule Space Method）；萊頓、吉爾（Leighton，Gierl）在2007年出版的書《基于認(rèn)知診斷的教育評(píng)價(jià)》（Cognitive Diagnostic for Education Assessment）；以及各種代表性認(rèn)知診斷模型如DINA模型（Junker & Sijtsma，2001）、RRUM模型（Hartz，2002）、GDINA模型（de la Torre，2011）、GDM模型（von Davier，2008）等。認(rèn)知診斷計(jì)算機(jī)化自適應(yīng)測(cè)驗(yàn)研究也受到了極大關(guān)注（Cheng，2009；Cheng，2010；Hsu，Wang，& Chen，2013；Kang，Zhang，& Chang，2017；Kaplan，de la Torre，Barrada，2015；Liu，Ying，Zhang，2015）。當(dāng)然，在這一時(shí)期，國(guó)內(nèi)學(xué)者在認(rèn)知診斷評(píng)價(jià)理論的各個(gè)領(lǐng)域也做了大量卓有成效的基礎(chǔ)研究和實(shí)踐應(yīng)用工作，取得了大量原創(chuàng)性成果，在部分領(lǐng)域的研究甚至走在了世界前沿，在國(guó)內(nèi)外發(fā)表了一系列研究成果，并出版了一批學(xué)術(shù)著作，培養(yǎng)了一批青年學(xué)者。

三、認(rèn)知診斷評(píng)價(jià)理論的主要研究?jī)?nèi)容

認(rèn)知診斷評(píng)價(jià)理論的主要研究?jī)?nèi)容有以下幾個(gè)方面。

（一）領(lǐng)域認(rèn)知模型的構(gòu)建

領(lǐng)域認(rèn)知模型定義了該領(lǐng)域的知識(shí)、技能、加工策略等，以及這些知識(shí)技能之間的結(jié)構(gòu)關(guān)系。領(lǐng)域認(rèn)知模型是測(cè)量和評(píng)價(jià)的內(nèi)容目標(biāo)，也是進(jìn)行認(rèn)知診斷評(píng)價(jià)的基礎(chǔ)工作，定義了認(rèn)知診斷測(cè)驗(yàn)結(jié)構(gòu)效度評(píng)估的目標(biāo)架構(gòu)。

（二）如何命制一份具有良好質(zhì)量的認(rèn)知診斷測(cè)驗(yàn)

測(cè)驗(yàn)的信度和效度是衡量測(cè)驗(yàn)質(zhì)量的主要標(biāo)準(zhǔn)。認(rèn)知診斷測(cè)驗(yàn)要能夠穩(wěn)定、精確、精細(xì)地區(qū)分不同被試在目標(biāo)領(lǐng)域中的掌握狀態(tài)。測(cè)驗(yàn)結(jié)構(gòu)應(yīng)該與領(lǐng)域認(rèn)知模型一致，同時(shí)能夠在盡量精簡(jiǎn)的情形下，穩(wěn)定地區(qū)分被試的發(fā)展水平。

（三）測(cè)驗(yàn)屬性矩陣的定義

在定義了領(lǐng)域認(rèn)知模型后，要保證測(cè)驗(yàn)編制過程中和編制結(jié)束后，測(cè)驗(yàn)及其題目能夠很好地反映領(lǐng)域認(rèn)知模型，測(cè)驗(yàn)題目與測(cè)量目標(biāo)屬性之間的關(guān)系定義是合適的。

（四）選擇一個(gè)擬合良好的認(rèn)知診斷模型或方法

該模型或方法能夠基于測(cè)試數(shù)據(jù)和測(cè)驗(yàn)屬性矩陣，估計(jì)每個(gè)被評(píng)價(jià)被試對(duì)領(lǐng)域認(rèn)知目標(biāo)的掌握狀態(tài)。

（五）提供一份具有很好輔導(dǎo)作用的診斷性評(píng)價(jià)結(jié)果

根據(jù)被試的實(shí)際表現(xiàn)和領(lǐng)域認(rèn)知模型，提供被試在該領(lǐng)域上的發(fā)展水平剖析信息，特別是存在不足的方面，并提出合理的改進(jìn)意見。

（六）其他研究主題

認(rèn)知診斷計(jì)算機(jī)化自適應(yīng)測(cè)驗(yàn)、等值。

本書主要圍繞上述內(nèi)容展開敘述，但敘述的順序會(huì)有調(diào)整。

本章小結(jié)

本章簡(jiǎn)要介紹了幾個(gè)典型的心理與教育測(cè)量學(xué)理論的發(fā)展過程，簡(jiǎn)要分析了經(jīng)典測(cè)量理論和項(xiàng)目反應(yīng)理論的主要優(yōu)勢(shì)及存在的不足，并由此分析了認(rèn)知診斷評(píng)價(jià)理論興起的原因，最后還簡(jiǎn)要介紹了認(rèn)知診斷評(píng)價(jià)理論的主要研究?jī)?nèi)容。

思考題

1.經(jīng)典測(cè)量理論和項(xiàng)目反應(yīng)理論的優(yōu)勢(shì)和不足分別是什么？

2.相對(duì)于已有的測(cè)量學(xué)理論，認(rèn)知診斷評(píng)價(jià)理論的優(yōu)勢(shì)是什么？