劉 進(jìn) 高勝寒 林松月

從標(biāo)準(zhǔn)化到數(shù)據(jù)化：基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論轉(zhuǎn)向*

劉 進(jìn)1高勝寒1林松月2[通訊作者]

（1．北京理工大學(xué) 人文與社會(huì)科學(xué)學(xué)院，北京 100081；2．香港中文大學(xué) 教育學(xué)院，香港 999077）

傳統(tǒng)大學(xué)生學(xué)習(xí)評(píng)價(jià)方法面臨嚴(yán)峻的方法論困境，而新的學(xué)習(xí)評(píng)價(jià)理論方法有望在大數(shù)據(jù)時(shí)代形成。文章首先通過(guò)梳理大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的研究現(xiàn)狀，發(fā)現(xiàn)傳統(tǒng)大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論存在一些不足，由此提出基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論。之后，文章提出用大數(shù)據(jù)替代小數(shù)據(jù)、用過(guò)程性數(shù)據(jù)替代橫斷面數(shù)據(jù)、用非參與式數(shù)據(jù)替代參與式數(shù)據(jù)、用多元常模替代簡(jiǎn)單常模、用開(kāi)放式假設(shè)替代封閉式假設(shè)，并根據(jù)上述大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向重點(diǎn)進(jìn)行案例分析，驗(yàn)證了基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法的可行性。最后，文章從大數(shù)據(jù)庫(kù)建設(shè)、新模式開(kāi)發(fā)、研究成果利用等角度，提出大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向策略，以期探求大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法從標(biāo)準(zhǔn)化到數(shù)據(jù)化的轉(zhuǎn)向。

大數(shù)據(jù)；學(xué)習(xí)評(píng)價(jià)；學(xué)業(yè)表現(xiàn)；方法論；獨(dú)立性

大學(xué)生學(xué)習(xí)評(píng)價(jià)是高等教育研究的中心議題。進(jìn)入高等教育普及化階段之后，進(jìn)一步提高質(zhì)量、走內(nèi)涵式發(fā)展道路、精細(xì)化開(kāi)展大學(xué)治理，成為我國(guó)高等教育發(fā)展的主要方向，而在此過(guò)程中能否科學(xué)、精準(zhǔn)、動(dòng)態(tài)、系統(tǒng)、全面地開(kāi)展大學(xué)生學(xué)習(xí)評(píng)價(jià)至關(guān)重要。過(guò)去20年來(lái)，我國(guó)高等教育研究領(lǐng)域開(kāi)展了一大批以標(biāo)準(zhǔn)化量表為主要工具的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究，提升了學(xué)習(xí)評(píng)價(jià)研究的行業(yè)關(guān)注度，在一定程度上提高了中國(guó)高校的教育教學(xué)水平，但這些研究同時(shí)也面臨嚴(yán)峻的方法論困境。進(jìn)入大數(shù)據(jù)時(shí)代，新的大學(xué)生學(xué)習(xí)評(píng)價(jià)技術(shù)、方法和理論體系有望形成，這將有助于從根本上解決大學(xué)生學(xué)習(xí)評(píng)價(jià)研究的方法論問(wèn)題。

一 大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的相關(guān)研究

學(xué)習(xí)評(píng)價(jià)是對(duì)學(xué)生學(xué)習(xí)發(fā)展和個(gè)人成長(zhǎng)的重要反饋。隨著大學(xué)生學(xué)習(xí)評(píng)價(jià)研究逐漸成為全球高等教育領(lǐng)域的重要議題，相關(guān)研究在數(shù)量上逐年增加，在模式上突破了某一國(guó)家或地區(qū)、單一教育體系的限制，研究方法呈現(xiàn)出新的發(fā)展趨勢(shì)。

1 大學(xué)生學(xué)習(xí)評(píng)價(jià)研究的主要方法

社會(huì)科學(xué)研究中的具體方法和技術(shù)是指在研究過(guò)程中研究者使用的各種資料收集方法、資料分析方法、特定的操作程序和技術(shù)，具有專(zhuān)門(mén)性、技術(shù)性、操作性的特點(diǎn)[1]。其中，用于大學(xué)生學(xué)習(xí)評(píng)價(jià)研究的主要方法有：

①調(diào)查研究，是指針對(duì)正在發(fā)生或剛剛發(fā)生過(guò)的教育現(xiàn)象、教育觀念進(jìn)行的實(shí)證研究[2]。當(dāng)前，學(xué)習(xí)評(píng)價(jià)領(lǐng)域“標(biāo)準(zhǔn)化問(wèn)卷——基于問(wèn)卷的多維度分析”的基本思路較為普遍。例如，美國(guó)加州大學(xué)伯克利分校SERU調(diào)查組設(shè)計(jì)的“研究型大學(xué)學(xué)生就讀經(jīng)歷調(diào)查問(wèn)卷”，經(jīng)漢化后形成了包括學(xué)術(shù)參與、生活和目標(biāo)、個(gè)人背景三大核心問(wèn)題在內(nèi)的大學(xué)生學(xué)習(xí)標(biāo)準(zhǔn)化問(wèn)卷。

②訪談研究，是指研究者通過(guò)研究性的“交談”和“詢(xún)問(wèn)”，從被研究者一方收集或建構(gòu)第一手資料的研究方法[3]，通常與扎根理論共同使用。例如，王媛等[4]通過(guò)對(duì)訪談大學(xué)師生的文本材料依次進(jìn)行開(kāi)放式、關(guān)聯(lián)式、核心式編碼，探索了學(xué)習(xí)投入與大學(xué)生發(fā)展之間的聯(lián)系。

③文獻(xiàn)計(jì)量研究，是指使用Citespace、VOSviewer等文獻(xiàn)計(jì)量分析軟件，實(shí)現(xiàn)梳理研究基礎(chǔ)、分析學(xué)科結(jié)構(gòu)、了解主流作者和機(jī)構(gòu)、展望研究前沿任務(wù)的過(guò)程[5]。例如，曾家延[6]通過(guò)文獻(xiàn)計(jì)量研究，嘗試構(gòu)建中國(guó)語(yǔ)境的大學(xué)生學(xué)習(xí)評(píng)價(jià)標(biāo)準(zhǔn)化測(cè)量工具。

④案例研究，適合用于回答“為什么”和“怎么樣”類(lèi)型的問(wèn)題[7]。案例研究可以深入校園情境，更系統(tǒng)地分析大學(xué)生的學(xué)習(xí)評(píng)價(jià)活動(dòng)。例如，謝曉宇[8]以美國(guó)威斯康星大學(xué)為個(gè)案，研究大學(xué)生的學(xué)習(xí)結(jié)果評(píng)估計(jì)劃及其實(shí)施過(guò)程。

2 大學(xué)生學(xué)習(xí)評(píng)價(jià)研究的方法論取向

學(xué)術(shù)界對(duì)高等教育領(lǐng)域研究成果的質(zhì)疑長(zhǎng)期存在，甚至出現(xiàn)了本學(xué)科學(xué)者對(duì)某些“領(lǐng)地內(nèi)”問(wèn)題的研究深度不及外行的尷尬情況。因此，研究者在研究高等教育問(wèn)題時(shí)有必要關(guān)注其背后深層次的方法論取向。當(dāng)前，大學(xué)生學(xué)習(xí)評(píng)價(jià)研究主要涉及以下方法論——

①實(shí)證主義方法論：通常被認(rèn)為是被社會(huì)科學(xué)研究領(lǐng)域所接納的主流方法論，試圖以定量和計(jì)量等手段，客觀、實(shí)證、定量地研究社會(huì)議題。在實(shí)證主義方法論的指導(dǎo)下，大學(xué)生學(xué)習(xí)評(píng)價(jià)研究貫徹“大膽假設(shè)”和“小心求證”的思路，相關(guān)研究成果具有一定的科學(xué)性、有效性、可重復(fù)性。但與此同時(shí)，當(dāng)前學(xué)術(shù)界對(duì)實(shí)證主義研究范式也存在批評(píng)意見(jiàn)，認(rèn)為此方法論導(dǎo)向雖然在一定程度上提高了學(xué)術(shù)產(chǎn)出效率，但對(duì)高等教育學(xué)科的理論貢獻(xiàn)甚微，研究更多的是“就事論事”，其積累性、繼承性、延續(xù)性十分薄弱，無(wú)法從根本上推動(dòng)學(xué)科的縱深發(fā)展。

②人文主義方法論：是指研究者使用實(shí)地參與、訪談、觀察等方法研究社會(huì)現(xiàn)象的行為[9]。該類(lèi)研究設(shè)計(jì)和方法在實(shí)施過(guò)程中多遵循以下步驟：明晰分析框架和訪談提綱→確定訪談對(duì)象并最大化以保證代表性→編碼分析訪談文本→歸納研究發(fā)現(xiàn)和結(jié)論。

③批判主義方法論：作為近年來(lái)新出現(xiàn)的社會(huì)研究方法論，體現(xiàn)在教育研究領(lǐng)域主要是指研究者深入每一個(gè)具體的教育活動(dòng)場(chǎng)域，對(duì)其中發(fā)生的實(shí)際教育問(wèn)題進(jìn)行價(jià)值層面和倫理層面的深刻討論，而不是完全站在價(jià)值中立的研究立場(chǎng)。開(kāi)展批判性研究對(duì)科研人員的哲學(xué)思辨能力要求較高：即使在無(wú)法獲得直觀具體研究材料的情況下，科研人員也要能通過(guò)觀察隨處可感的教育現(xiàn)象而獲得深刻的哲學(xué)思考。

除了上述三種方法論取向，大數(shù)據(jù)和人工智能技術(shù)支持下的新型學(xué)習(xí)評(píng)價(jià)方式也逐漸成為研究前沿。例如，桑德拉·米麗根等[10]使用人工智能技術(shù)分析慕課數(shù)據(jù)評(píng)價(jià)大學(xué)生參與度并預(yù)測(cè)學(xué)業(yè)表現(xiàn)。這種學(xué)習(xí)評(píng)價(jià)方式既彌補(bǔ)了已有研究方法的短板，也體現(xiàn)了研究方法論的新轉(zhuǎn)向。

二 大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向發(fā)生

1 傳統(tǒng)大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的不足

傳統(tǒng)大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論多為實(shí)證主義方法論，通過(guò)主觀引入相應(yīng)的理論，采用一定的計(jì)量方法對(duì)有限數(shù)據(jù)進(jìn)行小樣本分析，容易導(dǎo)致研究結(jié)論的科學(xué)性不強(qiáng)、研究結(jié)果出現(xiàn)偏差等問(wèn)題。雖然近年來(lái)以標(biāo)準(zhǔn)化量表為代表的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究大幅提高了教育研究的科學(xué)性水平，實(shí)現(xiàn)了對(duì)高校教育教學(xué)管理的直接指導(dǎo)，但從方法論層面來(lái)看，其仍然存在一些不足：

①對(duì)研究目標(biāo)的達(dá)成度不足。標(biāo)準(zhǔn)化量表往往試圖通過(guò)成組變量的設(shè)定，分類(lèi)考察大學(xué)生的主動(dòng)與合作學(xué)習(xí)、生師互動(dòng)、支持性的校園環(huán)境、學(xué)業(yè)挑戰(zhàn)度等情況[11]。但由于標(biāo)準(zhǔn)化量表嚴(yán)重受限于問(wèn)卷篇幅，而問(wèn)卷調(diào)查往往只涵蓋大學(xué)生學(xué)習(xí)的某些方面，且問(wèn)卷在畢業(yè)生能力測(cè)評(píng)方面也存在嚴(yán)重困難。另外，用少數(shù)變量涵蓋大學(xué)生學(xué)習(xí)的某些方面如同“隔靴搔癢”而無(wú)法直接觸及學(xué)生學(xué)習(xí)動(dòng)機(jī)、過(guò)程和結(jié)果本質(zhì)，故導(dǎo)致研究目標(biāo)不易達(dá)成。例如，SERU問(wèn)卷中有關(guān)大學(xué)生深層學(xué)習(xí)方面的調(diào)查，就難以完全反映學(xué)生對(duì)知識(shí)學(xué)習(xí)的理解、綜合、創(chuàng)新等情況。

②對(duì)縱向數(shù)據(jù)信息的負(fù)載不足。大學(xué)生的學(xué)習(xí)活動(dòng)本質(zhì)上是一種過(guò)程性變量，其以時(shí)間為軸，往往通過(guò)以年度為單位、橫斷面式的標(biāo)準(zhǔn)化量表來(lái)測(cè)量，既無(wú)法全面反映大學(xué)生動(dòng)態(tài)學(xué)習(xí)狀況，也沒(méi)有時(shí)效性，因此研究者無(wú)法在研究過(guò)程中及時(shí)發(fā)現(xiàn)大學(xué)生的學(xué)習(xí)問(wèn)題并給予合理建議。此外，一些連續(xù)多年的橫斷面標(biāo)準(zhǔn)化問(wèn)卷調(diào)查嘗試通過(guò)跨年度調(diào)查、追蹤、比較得到研究結(jié)論，但往往調(diào)查對(duì)象已經(jīng)完全改變，對(duì)不同人、不同年度大學(xué)生的橫斷面與碎片化信息調(diào)查更是難以還原出大學(xué)生的真實(shí)學(xué)習(xí)狀況，故相關(guān)研究結(jié)論存疑。

③自我填答式調(diào)查的真實(shí)性不足。大學(xué)生學(xué)習(xí)標(biāo)準(zhǔn)化調(diào)查多采取學(xué)生自我填答式調(diào)查的形式，其中除部分客觀性題項(xiàng)之外，絕大多數(shù)是主觀自我評(píng)價(jià)類(lèi)題項(xiàng)，往往通過(guò)四分變量、五分變量方法，讓學(xué)生對(duì)“滿意度”“有效性”等進(jìn)行自我評(píng)價(jià)。這種自我填答式調(diào)查既存在個(gè)體間較大誤差，也存在群體間較大誤差，原因主要在于個(gè)體的學(xué)習(xí)背景、學(xué)習(xí)動(dòng)機(jī)、學(xué)習(xí)過(guò)程和結(jié)果、偶發(fā)性事件等和群體的高校類(lèi)型、層次、年級(jí)、地域等都可能會(huì)影響調(diào)查結(jié)果。

④常模設(shè)置的科學(xué)性不足。一些標(biāo)準(zhǔn)化問(wèn)卷往往試圖通過(guò)常模設(shè)置，對(duì)高校間、學(xué)科間、地域間的差異進(jìn)行比較。常模設(shè)置具有重要的方法論創(chuàng)新價(jià)值，拓寬了傳統(tǒng)問(wèn)卷調(diào)查的分析維度，并實(shí)現(xiàn)了對(duì)院校教育教學(xué)管理的直接指導(dǎo)。但是，常模設(shè)置的科學(xué)性不足，如簡(jiǎn)單地以“985”高校、“211”高校、工科類(lèi)高?；蛭鞑扛咝５葹閱挝辉O(shè)置常模，而去掉絕大多數(shù)可能影響大學(xué)生學(xué)習(xí)的其他變量，僅對(duì)有常模設(shè)置的高校與其他類(lèi)別的高校進(jìn)行比較，其結(jié)果的科學(xué)性難以保證。

⑤面向未知學(xué)習(xí)規(guī)律的開(kāi)拓性不足。標(biāo)準(zhǔn)化大學(xué)生學(xué)習(xí)評(píng)價(jià)往往囿于問(wèn)卷本身，無(wú)法超越問(wèn)卷框架進(jìn)行開(kāi)拓性研究。尤其是問(wèn)卷調(diào)查為匿名形式，無(wú)法與學(xué)生真實(shí)的學(xué)習(xí)數(shù)據(jù)（如家庭數(shù)據(jù)、學(xué)業(yè)表現(xiàn)數(shù)據(jù)等）進(jìn)行匹配，也無(wú)法開(kāi)展原有理論、假設(shè)、框架之外的其他開(kāi)拓性研究。

事實(shí)上，大學(xué)生學(xué)習(xí)標(biāo)準(zhǔn)化問(wèn)卷已經(jīng)在傳統(tǒng)問(wèn)卷調(diào)查的基礎(chǔ)上進(jìn)行了重大創(chuàng)新，其大規(guī)模連續(xù)性調(diào)查、常模設(shè)計(jì)與比較等已經(jīng)代表了問(wèn)卷調(diào)查的前沿理念。上述五個(gè)方面不足的產(chǎn)生不是大學(xué)生學(xué)習(xí)標(biāo)準(zhǔn)化問(wèn)卷本身的問(wèn)題，而是問(wèn)卷調(diào)查這一傳統(tǒng)方法面臨的方法論困境。但是，在大學(xué)生學(xué)習(xí)領(lǐng)域，標(biāo)準(zhǔn)化問(wèn)卷面臨的方法論困境并非無(wú)法被破解——本研究認(rèn)為，基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論將有望全面消除上述不足。

2 基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的提出

伴隨現(xiàn)代信息技術(shù)的發(fā)展，大數(shù)據(jù)、人工智能等技術(shù)逐漸應(yīng)用于教育領(lǐng)域，形成了海量的教育數(shù)據(jù)。對(duì)這些教育數(shù)據(jù)加以分析，可有效提升學(xué)習(xí)評(píng)價(jià)的效率。而基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論主要指通過(guò)非參與方式方法，客觀收集大學(xué)生學(xué)習(xí)的各類(lèi)數(shù)據(jù)資源，實(shí)現(xiàn)對(duì)大學(xué)生學(xué)習(xí)研究問(wèn)題的數(shù)據(jù)化追蹤、挖掘、匹配、計(jì)算和分析，得到各類(lèi)相關(guān)性、（準(zhǔn)）因果性、（準(zhǔn)）實(shí)驗(yàn)性乃至開(kāi)拓性研究結(jié)論[12]。在教育實(shí)踐中，開(kāi)展基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)能較好地呈現(xiàn)學(xué)生的學(xué)業(yè)表現(xiàn)、進(jìn)展和成效，有助于提升學(xué)習(xí)效果和教學(xué)質(zhì)量；而注重過(guò)程化評(píng)價(jià)和個(gè)性化學(xué)習(xí)有助于實(shí)現(xiàn)教育公平，形成的學(xué)習(xí)過(guò)程數(shù)據(jù)、學(xué)情數(shù)據(jù)等為學(xué)習(xí)評(píng)價(jià)與分析提供了豐富的原始資料[13]。因此，基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論轉(zhuǎn)向的發(fā)生具有合理性。

三 大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向方向

1 大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向重點(diǎn)

在大數(shù)據(jù)、人工智能等技術(shù)的支持下，大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向應(yīng)重點(diǎn)關(guān)注：

①用大數(shù)據(jù)替代小數(shù)據(jù)。運(yùn)用大數(shù)據(jù)技術(shù)有望系統(tǒng)收集學(xué)生的各類(lèi)數(shù)據(jù)信息（包括家庭背景、寢室分配等客觀性信息，從中學(xué)、高考一直到大學(xué)入校后的各科學(xué)業(yè)表現(xiàn)信息，以及消費(fèi)習(xí)慣、就醫(yī)狀況、圖書(shū)館借閱記錄、社會(huì)活動(dòng)等學(xué)習(xí)生活信息），形成包含全方位信息的大數(shù)據(jù)庫(kù)，取代以往只圍繞某項(xiàng)條目如學(xué)業(yè)成績(jī)?yōu)閱挝凰杉男颖緮?shù)據(jù)，以此作為分析學(xué)情的核心依據(jù)。以某“雙一流”高校為例，本項(xiàng)目組對(duì)其4個(gè)書(shū)院學(xué)生的各類(lèi)數(shù)據(jù)進(jìn)行采集，數(shù)據(jù)量接近1億條。對(duì)這些海量數(shù)據(jù)進(jìn)行收集、清洗、匹配等，可以得到大量有用信息用于研究。

②用過(guò)程性數(shù)據(jù)替代橫斷面數(shù)據(jù)。運(yùn)用大數(shù)據(jù)技術(shù)可以全過(guò)程動(dòng)態(tài)采集大學(xué)生的各類(lèi)學(xué)習(xí)數(shù)據(jù)資源，并實(shí)現(xiàn)對(duì)這些資源的長(zhǎng)線追蹤，也可以大幅提高研究的時(shí)效性，還可以在教育教學(xué)活動(dòng)中動(dòng)態(tài)發(fā)現(xiàn)和解決大學(xué)生的學(xué)習(xí)問(wèn)題。以同伴關(guān)系與大學(xué)生的學(xué)業(yè)表現(xiàn)為例，通過(guò)對(duì)學(xué)生整個(gè)學(xué)期中日常就餐、出入圖書(shū)館、出入寢室等方面的全過(guò)程數(shù)據(jù)進(jìn)行分析，可以清晰地刻畫(huà)出某同學(xué)與其他室友的日常關(guān)聯(lián)，從而對(duì)“不合群”“被孤立”的學(xué)生及時(shí)做出寢室調(diào)整；同時(shí)，可以有效預(yù)測(cè)某些寢室成員學(xué)習(xí)成績(jī)集體下滑的趨勢(shì)，及時(shí)進(jìn)行原因分析并提出解決方案；也可以通過(guò)對(duì)不同時(shí)間段內(nèi)的實(shí)時(shí)數(shù)據(jù)進(jìn)行分析，探討學(xué)生各類(lèi)狀態(tài)的動(dòng)態(tài)變化。用過(guò)程性數(shù)據(jù)替代以往研究中圍繞某個(gè)時(shí)間的橫斷面數(shù)據(jù)（如期末考試成績(jī)），通過(guò)全線采集的過(guò)程性、實(shí)時(shí)性數(shù)據(jù)，可以有效開(kāi)展全方位、動(dòng)態(tài)性的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究。

③用非參與式數(shù)據(jù)替代參與式數(shù)據(jù)。大數(shù)據(jù)技術(shù)在采集數(shù)據(jù)的過(guò)程中不直接接觸學(xué)生，避免出現(xiàn)學(xué)生的應(yīng)激反應(yīng)或“霍桑效應(yīng)”。將收集的這種非參與式數(shù)據(jù)用于分析，得到的結(jié)論更具客觀性，有望提升傳統(tǒng)自我填答式調(diào)查結(jié)果的科學(xué)水平。例如，通過(guò)分析學(xué)生與室友共同進(jìn)餐的情況，可以對(duì)學(xué)生與他人的伙伴關(guān)系在一定程度上進(jìn)行定義，無(wú)需通過(guò)問(wèn)卷調(diào)查、深度訪談等問(wèn)詢(xún)學(xué)生關(guān)于其對(duì)同伴關(guān)系的看法，從而降低學(xué)生參與式數(shù)據(jù)的主觀性。

④用多元常模替代簡(jiǎn)單常模。運(yùn)用大數(shù)據(jù)技術(shù)可以根據(jù)研究需要，動(dòng)態(tài)構(gòu)建各類(lèi)常模模型，從而突破了傳統(tǒng)標(biāo)準(zhǔn)化問(wèn)卷簡(jiǎn)單常模模型的弊端。具體而言，可以寢室為單位構(gòu)建常模模型，比較不同寢室學(xué)生的學(xué)習(xí)表現(xiàn)；也可基于學(xué)科、專(zhuān)業(yè)、年級(jí)、年齡、性別、高校類(lèi)別、籍貫所在地、高考表現(xiàn)等構(gòu)建常模模型，為高校大學(xué)生學(xué)習(xí)分類(lèi)的比較研究提供精細(xì)化證據(jù)支持。

⑤用開(kāi)放式假設(shè)替代封閉式假設(shè)。基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論與其他方法論的最大不同，在于其可以采取開(kāi)放式假設(shè)方法展開(kāi)各類(lèi)研究活動(dòng)，即不需要借助傳統(tǒng)的理論基礎(chǔ)、文獻(xiàn)綜述等也可提出假設(shè)，并運(yùn)用大數(shù)據(jù)資源進(jìn)行驗(yàn)證，這大大突破了傳統(tǒng)研究活動(dòng)“理論（文獻(xiàn)）—假設(shè)—證據(jù)—驗(yàn)證”等基于封閉式假設(shè)的研究方法論。未來(lái)真正進(jìn)入大數(shù)據(jù)時(shí)代之后，甚至可能會(huì)逐漸瓦解、坍塌傳統(tǒng)的學(xué)生學(xué)習(xí)理論基礎(chǔ)，而進(jìn)入無(wú)理論、碎片化的時(shí)代，基于大數(shù)據(jù)技術(shù)形成新的研究范式。

2 大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的案例分析

為進(jìn)一步呈現(xiàn)基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向方向，本研究根據(jù)上述大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向重點(diǎn)，以基于校園卡大數(shù)據(jù)進(jìn)行的大學(xué)生獨(dú)立性行為研究為例進(jìn)行案例分析。該案例基于學(xué)生在食堂刷卡信息模擬學(xué)生的獨(dú)立性行為，通過(guò)分析其是否與室友一起進(jìn)餐進(jìn)行獨(dú)立性評(píng)價(jià)，并據(jù)此分析學(xué)生獨(dú)立性與學(xué)業(yè)表現(xiàn)之間的關(guān)系。

本研究以2020年9月～2021年6月期間北京市B大學(xué)全體在校本科生的所有一卡通消費(fèi)記錄為研究樣本，共提取10,285,494條數(shù)據(jù)進(jìn)行大數(shù)據(jù)分析。根據(jù)研究需要，本研究從中篩選出563,683條食堂刷卡記錄作為研究大學(xué)生獨(dú)立行為的數(shù)據(jù)樣本。在此基礎(chǔ)上，本研究運(yùn)用Python語(yǔ)言對(duì)這些數(shù)據(jù)樣本進(jìn)行處理：①定義三餐時(shí)間范圍，抓取同一寢室學(xué)生在三餐時(shí)間范圍內(nèi)的消費(fèi)記錄；②以寢室為單位，分別篩選三餐時(shí)間范圍內(nèi)每人的第一條刷卡信息，剔除同一進(jìn)餐時(shí)間范圍內(nèi)的其他刷卡記錄；③觀測(cè)每位學(xué)生該條刷卡信息時(shí)間前后10分鐘是否有其他室友的消費(fèi)記錄，每有一位室友在同一地點(diǎn)進(jìn)行過(guò)消費(fèi)則計(jì)分為1（該大學(xué)本科生寢室為4人間，每名學(xué)生有3位室友，因此該計(jì)分項(xiàng)最低得分為0、最高得分為3）。

按上述三個(gè)步驟對(duì)B大學(xué)1.6萬(wàn)名本科生的相關(guān)數(shù)據(jù)進(jìn)行處理，共累計(jì)10個(gè)月的數(shù)據(jù)信息，得到每名學(xué)生的獨(dú)立性得分——分?jǐn)?shù)越低，說(shuō)明該學(xué)生的獨(dú)立性越強(qiáng)、其與室友的親密關(guān)系越弱，反之亦然。對(duì)相關(guān)數(shù)據(jù)進(jìn)行分析，本研究得出以下結(jié)論：女生獨(dú)立性比男生高、漢族學(xué)生獨(dú)立性比少數(shù)民族學(xué)生高、單親家庭學(xué)生獨(dú)立性比非單親家庭學(xué)生高、轉(zhuǎn)專(zhuān)業(yè)學(xué)生獨(dú)立性較低，具體如圖1、表1所示。此外，為探討大學(xué)生同伴關(guān)系與學(xué)業(yè)表現(xiàn)的深層次聯(lián)系，本研究進(jìn)一步將學(xué)生獨(dú)立性與學(xué)業(yè)表現(xiàn)進(jìn)行相關(guān)性分析，結(jié)果表明：學(xué)生的獨(dú)立性得分與學(xué)業(yè)平均分呈顯著正相關(guān)關(guān)系（Sig.值為0.000），即獨(dú)立性得分越高（說(shuō)明獨(dú)立性越弱、與室友的親密關(guān)系越強(qiáng)），其學(xué)業(yè)表現(xiàn)越好。

圖1 學(xué)生獨(dú)立性得分差異情況

表1 學(xué)生獨(dú)立性得分差異的相關(guān)性分析

獨(dú)立性評(píng)價(jià)性別是否漢族是否單親家庭是否轉(zhuǎn)專(zhuān)業(yè) 斯皮爾曼Rho獨(dú)立性評(píng)價(jià)相關(guān)系數(shù)1.000-.081**-.036**-.065**0.057** Sig.(雙尾)---0.0000.0000.0000.000 N103891038910031340810031

注：**表示在0.01水平上顯著。

本研究通過(guò)具體的案例分析，驗(yàn)證了基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法的可行性，為促進(jìn)大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向提供了一個(gè)參考方向，有利于激發(fā)并豐富未來(lái)大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向策略。

四 促進(jìn)大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向策略

基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論，有望成為未來(lái)大學(xué)生學(xué)習(xí)評(píng)價(jià)研究的基礎(chǔ)性方法，研究者應(yīng)切實(shí)采取相關(guān)策略推動(dòng)大學(xué)生學(xué)習(xí)評(píng)價(jià)研究方法論的轉(zhuǎn)向。

1 盡快建設(shè)大學(xué)生學(xué)習(xí)評(píng)價(jià)研究大數(shù)據(jù)庫(kù)

基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究的基礎(chǔ)，在于大數(shù)據(jù)庫(kù)建設(shè)。系統(tǒng)收集各類(lèi)大數(shù)據(jù)資源，形成動(dòng)態(tài)大數(shù)據(jù)庫(kù)，是未來(lái)大學(xué)生學(xué)習(xí)評(píng)價(jià)研究的關(guān)鍵所在。當(dāng)前，不同高校對(duì)大數(shù)據(jù)評(píng)價(jià)的重視程度不同，高校不同部門(mén)之間的數(shù)據(jù)壁壘仍然較為堅(jiān)固，少數(shù)部門(mén)的數(shù)據(jù)信息化收集手段仍然落后，個(gè)別部門(mén)的某些年份數(shù)據(jù)已經(jīng)丟失，這為后續(xù)研究工作帶來(lái)了困難。為此，各高校應(yīng)盡快構(gòu)建學(xué)生學(xué)習(xí)大數(shù)據(jù)框架，搶救性保護(hù)各類(lèi)數(shù)據(jù)資源，全面引入信息化數(shù)據(jù)管理手段，建成以學(xué)號(hào)為單位的全樣本、全過(guò)程、全周期大數(shù)據(jù)庫(kù)，為大學(xué)生學(xué)習(xí)評(píng)價(jià)提供基礎(chǔ)性支持。

2 系統(tǒng)開(kāi)發(fā)基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)新模式

當(dāng)前，運(yùn)用大數(shù)據(jù)開(kāi)展大學(xué)生學(xué)習(xí)評(píng)價(jià)研究仍在起步階段，既缺乏規(guī)范化的操作標(biāo)準(zhǔn)、流程和技術(shù)，也缺乏專(zhuān)業(yè)化的研究人員。為此，研究者應(yīng)將理論與實(shí)踐緊密結(jié)合，系統(tǒng)開(kāi)發(fā)基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)新模式，涉及的內(nèi)容主要包括：①基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)基本框架；②主要評(píng)價(jià)方法、評(píng)價(jià)維度、技術(shù)手段；③評(píng)價(jià)結(jié)果可視化呈現(xiàn)相關(guān)方法與技術(shù)；④評(píng)價(jià)結(jié)果使用的科學(xué)流程與規(guī)范；⑤大數(shù)據(jù)評(píng)價(jià)與傳統(tǒng)評(píng)價(jià)方法的融合使用方法與技術(shù)。

3 切實(shí)利用好基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)研究成果

①應(yīng)不斷提升基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)結(jié)果的科學(xué)性。具體來(lái)說(shuō)，應(yīng)不斷擴(kuò)大數(shù)據(jù)源，以提高相關(guān)評(píng)價(jià)模型的訓(xùn)練質(zhì)量；應(yīng)引入不同大數(shù)據(jù)源，對(duì)有關(guān)框架、方法、技術(shù)等進(jìn)行交叉驗(yàn)證；應(yīng)開(kāi)發(fā)基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)結(jié)果有效性評(píng)價(jià)指標(biāo)體系；應(yīng)注意大數(shù)據(jù)研究方法與傳統(tǒng)研究方法的混合使用，以多方驗(yàn)證大數(shù)據(jù)方法的可靠性。②應(yīng)穩(wěn)步推進(jìn)基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)結(jié)果在高等教育管理中的日常使用，通過(guò)“大數(shù)據(jù)模型訓(xùn)練→實(shí)踐結(jié)果檢驗(yàn)→高教管理運(yùn)用”形成良性閉環(huán)，反向促進(jìn)基于大數(shù)據(jù)的大學(xué)生學(xué)習(xí)評(píng)價(jià)系統(tǒng)的構(gòu)建與完善。

[1]風(fēng)笑天.社會(huì)研究方法(第五版)[M].北京:中國(guó)人民大學(xué)出版社,2018:10.

[2]劉良華.教育研究方法專(zhuān)題與案例[M].上海:華東師范大學(xué)出版社,2007:8.

[3]陳向明.質(zhì)的研究方法與社會(huì)科學(xué)研究[M].北京:教育科學(xué)出版社,2000:165.

[4]王媛,劉陽(yáng).自我選擇與環(huán)境塑養(yǎng):本科生學(xué)習(xí)投入的養(yǎng)成邏輯——基于H區(qū)高校本科生的實(shí)證考察[J].當(dāng)代教育與文化,2020,(5):106-116.

[5]韓雙淼,謝靜,肖曉飛.國(guó)際高等工程教育研究方法與主題的演進(jìn)[J].高等工程教育研究,2020,(6):148-155.

[6]曾家延.指向大規(guī)模測(cè)量建構(gòu)的學(xué)生參與研究評(píng)析[J].比較教育研究,2017,(4):46-53.

[7](美)羅伯特·K.殷著.周海濤,史少杰譯.案例研究:設(shè)計(jì)與方法(第5版)[M].重慶:重慶大學(xué)出版社,2010:10.

[8]謝曉宇.美國(guó)大學(xué)學(xué)生學(xué)習(xí)結(jié)果評(píng)估個(gè)案研究——以威斯康辛大學(xué)麥迪遜分校為例[J].比較教育研究,2017,(4):54-60.

[9]陳向明.王小剛為什么不上學(xué)了——一位輟學(xué)生的個(gè)案調(diào)查[J].教育研究與實(shí)驗(yàn),1996,(1):35-45.

[10](澳大利亞)桑德拉·米麗根,張忠華,高文娟.大數(shù)據(jù)、人工智能與學(xué)習(xí)評(píng)價(jià)方式[J].北京大學(xué)教育評(píng)論,2019, (4):45-57、185.

[11]何明炳.校園支持對(duì)大學(xué)生學(xué)習(xí)收獲的影響:生師互動(dòng)的中介效應(yīng)[J].高校教育管理,2016,(5):99-106.

[12]趙磊磊.人工智能賦能高校數(shù)據(jù)治理:邏輯、挑戰(zhàn)與實(shí)踐[J].重慶高教研究,2022,(1):71-79.

[13]顧小清,鄭隆威,簡(jiǎn)菁.獲取教育大數(shù)據(jù):基于xAPI規(guī)范對(duì)學(xué)習(xí)經(jīng)歷數(shù)據(jù)的獲取與共享[J].現(xiàn)代遠(yuǎn)程教育研究,2014,(5):13-23.

From Standardization to Digitalization: The Research Methodology Turn for College Students’ Learning Evaluation Based on Big Data

LIU Jin1GAO Sheng-han1LIN Song-yue2[Corresponding Author]

The traditional college students’ learning evaluation methods face severe methodological difficulties, and new theoretical methods for learning evaluation are expected to be formed in the era big data. Firstly, this paper sorted out the research status of the research methodology for college students’ learning evaluation, and it was found that there were some shortcomings in the traditional research methodology for college students’ learning evaluation. Thus, the research methodology for college students’ learning evaluation based on big data was put forward. Then, this paper proposed to replace small data with big data, replace cross-sectional data with process data, replace participatory data with non-participatory data, replace simple norm with multivariate norm, and replace closed hypothesis with open hypothesis. In addition, a case study was conducted according to the mentioned transformation emphases of the research methodology for college students’ learning evaluation, and the feasibility of research methods for college students’ learning evaluation based on big data technology were verified. Finally, from the perspective of large database construction, new model development and research results utilization, this paper put forward the turning strategy of the research methodology for college students’ learning evaluation, expecting to explore the turn of the research methodology for college students’ learning evaluation from standardization to digitalization.

big data; learning evaluation; academic performance; methodology; independence

G40-057

A

1009—8097（2022）09—0031—07

10.3969/j.issn.1009-8097.2022.09.003

本文受?chē)?guó)家自然科學(xué)基金面上項(xiàng)目“政府獎(jiǎng)學(xué)金能否提升來(lái)華留學(xué)生質(zhì)量——基于機(jī)器學(xué)習(xí)方法的‘一帶一路’國(guó)家因果推斷”（項(xiàng)目編號(hào)：71974012）、國(guó)家自然科學(xué)基金面上項(xiàng)目“‘一帶一路’學(xué)術(shù)人才向中國(guó)流動(dòng)的開(kāi)放式‘推-拉模型研究——人工智能方法的運(yùn)用’”（項(xiàng)目編號(hào)：71774015）資助。

劉進(jìn)，副研究員，博士，研究方向?yàn)楦叩冉逃龂?guó)際化、教育大數(shù)據(jù)與人工智能，郵箱為liujinedu@bit.edu.cn。

2022年1月24日

編輯：小米