沈欣憶 吳健偉 張艷霞 李營(yíng) 馬昱春

【摘要】中國(guó)慕課大學(xué)先修課（MOOCAP）是采用大規(guī)模開(kāi)放在線課程（Massive Open Online Course， MOOC）和中國(guó)大學(xué)先修課程（Chinese Advanced Placement， CAP）相融合的方式，借助高等教育領(lǐng)域和基礎(chǔ)教育領(lǐng)域的學(xué)科專家、資深教師，根據(jù)高中生的特點(diǎn)將大學(xué)課程進(jìn)行重新設(shè)計(jì)的在線課程，是慕課大學(xué)先修課。本研究充分利用學(xué)習(xí)者在MOOCAP中的在線學(xué)習(xí)行為數(shù)據(jù)，采用德?tīng)柗品ā＜遗判蚍?、專家工作坊等多種研究方法，構(gòu)建MOOCAP在線學(xué)習(xí)行為和學(xué)習(xí)評(píng)價(jià)模型，對(duì)MOOCAP課程的學(xué)習(xí)評(píng)價(jià)工作具有較強(qiáng)的指導(dǎo)性和可操作性，彌補(bǔ)了以往單憑學(xué)習(xí)成績(jī)進(jìn)行評(píng)價(jià)，或者僅依靠單一學(xué)習(xí)行為得出一些描述性結(jié)論的弊端，更具有全面性和系統(tǒng)性，為學(xué)生個(gè)性化的發(fā)展提供充分的過(guò)程評(píng)價(jià)數(shù)據(jù)依據(jù)，挖掘出學(xué)習(xí)者各自的學(xué)習(xí)特性，實(shí)現(xiàn)有針對(duì)性的“因材施教”。

【關(guān)鍵詞】? 大規(guī)模開(kāi)放在線課程;中國(guó)慕課大學(xué)先修課;中國(guó)大學(xué)先修課程;慕課;教育公平;教育改革;課程改革;學(xué)堂在線;在線學(xué)習(xí);學(xué)習(xí)評(píng)價(jià)

【中圖分類號(hào)】? G420? ? ? ?【文獻(xiàn)標(biāo)識(shí)碼】? A? ? ? ?【文章編號(hào)】? 1009-458x（2019）7-0038-09

一、引言

教育質(zhì)量與教育公平一直是關(guān)系中國(guó)社會(huì)長(zhǎng)遠(yuǎn)發(fā)展的核心問(wèn)題。在資源有限的情況下如何讓兩者都實(shí)現(xiàn)？教育經(jīng)費(fèi)的投入是遵守權(quán)利優(yōu)先還是效率優(yōu)先，到底是誰(shuí)的學(xué)習(xí)需求應(yīng)被優(yōu)先滿足？這是亙古難題，而信息技術(shù)為教育改革和這些問(wèn)題的解決提供了方向和出路：在面對(duì)龐大的用戶量的時(shí)候，大數(shù)據(jù)可以幫助其實(shí)現(xiàn)個(gè)性化學(xué)習(xí)。中小學(xué)的教育信息化逐漸深化，大學(xué)的在線教育風(fēng)生水起，但是各個(gè)階段的教育還是停留在各自的層面，初等教育、中等教育和高等教育之間的壁壘問(wèn)題日漸凸顯，如何銜接好高中和大學(xué)，解決當(dāng)前中學(xué)生進(jìn)入大學(xué)之后由于課程內(nèi)容、學(xué)習(xí)節(jié)奏和學(xué)習(xí)方式變化等原因造成的不適應(yīng)問(wèn)題，是當(dāng)前教育的難點(diǎn)與盲點(diǎn)。

針對(duì)上述問(wèn)題，全國(guó)40多所高水平大學(xué)和重點(diǎn)中學(xué)聯(lián)合發(fā)起建立中國(guó)慕課大學(xué)先修課（MOOCAP），采用大規(guī)模開(kāi)放在線課程（MOOC）和中國(guó)大學(xué)先修課程（CAP）相融合的方式，根據(jù)高中生的特點(diǎn)重新設(shè)計(jì)大學(xué)課程，將其精心制作成開(kāi)放在線課程，向全國(guó)學(xué)生開(kāi)放。MOOCAP實(shí)質(zhì)上是一種有特定服務(wù)對(duì)象的MOOC，充分利用大學(xué)和中學(xué)的自主發(fā)展空間，結(jié)合互聯(lián)網(wǎng)信息平臺(tái)，形成的一套優(yōu)質(zhì)教育資源體系（清華大學(xué)招生辦主任， 2016; 于世潔， 2016）。在我國(guó)，MOOCAP率先由北京大學(xué)于2013年推出。清華大學(xué)領(lǐng)銜的MOOCAP項(xiàng)目、edX領(lǐng)銜的High School Initiative項(xiàng)目代表了當(dāng)前全球MOOCAP實(shí)踐發(fā)展的前沿。

在現(xiàn)階段，我國(guó)MOOCAP課程評(píng)價(jià)沿用MOOC組織認(rèn)證方式，由MOOC教師根據(jù)平時(shí)成績(jī)、期末考試成績(jī)給出學(xué)生的最終成績(jī)，這種方式基本上屬于一種結(jié)果性評(píng)價(jià)，并沒(méi)有在學(xué)習(xí)者的在線學(xué)習(xí)行為與學(xué)習(xí)效果間建立緊密聯(lián)系。特別是僅依靠學(xué)習(xí)成績(jī)?nèi)ピu(píng)價(jià)一個(gè)學(xué)生的學(xué)習(xí)效果存在一定的片面性，無(wú)法全面反映出作為即將進(jìn)入大學(xué)的中學(xué)生對(duì)MOOCAP所持有的態(tài)度和他的在線學(xué)習(xí)習(xí)慣。然而，MOOCAP作為一種新型在線學(xué)習(xí)課程，可以全面記錄學(xué)習(xí)者的學(xué)習(xí)和交流過(guò)程，形成學(xué)生學(xué)習(xí)的大數(shù)據(jù)。為此，本研究充分利用學(xué)習(xí)者在MOOCAP中的在線學(xué)習(xí)行為數(shù)據(jù)，采用德?tīng)柗品?、專家排序法、專家工作坊等多種研究方法，構(gòu)建MOOCAP在線學(xué)習(xí)行為和學(xué)習(xí)評(píng)價(jià)模型，對(duì)MOOCAP的課程評(píng)價(jià)工作具有較強(qiáng)的指導(dǎo)性和可操作性，彌補(bǔ)了以往單憑學(xué)習(xí)成績(jī)進(jìn)行評(píng)價(jià)，或者僅依靠單一學(xué)習(xí)行為得出描述性結(jié)論的片面性，更具全面性和系統(tǒng)性。研究者希望本研究能為MOOCAP課程學(xué)習(xí)效果評(píng)價(jià)工作提供借鑒，為每一個(gè)學(xué)生個(gè)性化的發(fā)展提供充分的過(guò)程評(píng)價(jià)數(shù)據(jù)依據(jù)，挖掘?qū)W習(xí)者的特性，實(shí)現(xiàn)“因材施教”。

二、文獻(xiàn)綜述

（一）有關(guān)MOOCAP的研究

MOOCAP自啟動(dòng)以來(lái)，完成了官方網(wǎng)站（http：//www. moocap.org.cn）的建設(shè)，首批開(kāi)設(shè)的6門(mén)課程已有5萬(wàn)多人選修（李強(qiáng)， 2016）。MOOCAP課程建設(shè)和準(zhǔn)入機(jī)制、學(xué)習(xí)過(guò)程評(píng)價(jià)和成績(jī)考核方式是MOOCAP理事會(huì)重點(diǎn)研究的兩個(gè)課題，也是其教師重點(diǎn)關(guān)注的兩個(gè)問(wèn)題（李強(qiáng)， 2016）。北師大實(shí)驗(yàn)中學(xué)教師孫兆前在談到自己對(duì)MOOCAP的看法時(shí)說(shuō)道：“只要內(nèi)容好，我們都是歡迎的。但關(guān)鍵還要看先修課如何評(píng)價(jià)以及學(xué)分如何使用。”（鄧暉， 2015）中國(guó)教育報(bào)記者萬(wàn)玉鳳（2015）指出“國(guó)內(nèi)大學(xué)先修課在梯度設(shè)置、考核方式以及與大學(xué)招生銜接等方面還都存在進(jìn)步空間”?？梢?jiàn)，在MOOCAP建設(shè)和使用中，如何對(duì)學(xué)習(xí)者的學(xué)習(xí)過(guò)程、學(xué)習(xí)行為和成績(jī)進(jìn)行評(píng)價(jià)和考核仍然是MOOCAP吸引學(xué)習(xí)者和獲得持續(xù)發(fā)展的過(guò)程中需要重點(diǎn)解決的問(wèn)題。

MOOCAP既不同于傳統(tǒng)課程，也不同于一般的網(wǎng)絡(luò)課程。它是MOOC和CAP的融合，既具有MOOC開(kāi)放、在線、大量等特點(diǎn)，同時(shí)又能讓學(xué)有余力或?qū)Υ髮W(xué)課程有興趣的高中生及早接觸大學(xué)課程內(nèi)容，接受大學(xué)階段的思維方式、學(xué)習(xí)方法，使學(xué)生真正享受符合其能力和興趣水平的教育，助力其大學(xué)階段的學(xué)習(xí)乃至未來(lái)的職業(yè)生涯。另外，MOOCAP也深化了我國(guó)高中教育教學(xué)改革和我國(guó)人才培養(yǎng)模式改革（CAP大學(xué)先修課， 2016）。因此，對(duì)于MOOCAP這種新型的課程形式，傳統(tǒng)教學(xué)模式下的線下課程以及一般的網(wǎng)絡(luò)課程的評(píng)估標(biāo)準(zhǔn)顯然已經(jīng)不適用。因此，構(gòu)建適用于MOOCAP的學(xué)習(xí)者學(xué)習(xí)效果評(píng)價(jià)指標(biāo)體系與評(píng)價(jià)量規(guī)勢(shì)在必行。

目前，研究者對(duì)MOOCAP的研究還集中在對(duì)其內(nèi)涵、作用及其發(fā)起機(jī)構(gòu)的介紹（張晏慧， 2015; 全國(guó)40余所大學(xué)和中學(xué)聯(lián)合啟動(dòng)慕課大學(xué)先修課， 2015; 潘超， 2016），具體到學(xué)習(xí)者學(xué)習(xí)績(jī)效評(píng)價(jià)的研究基本上還沒(méi)有出現(xiàn)。作為在線大學(xué)先修課，MOOCAP在課程內(nèi)容呈現(xiàn)形式、在線學(xué)習(xí)過(guò)程等方面與MOOC存在較大的相似性，因此本研究認(rèn)為可以從已有的MOOC學(xué)習(xí)者學(xué)習(xí)效果、學(xué)習(xí)績(jī)效評(píng)價(jià)等相關(guān)研究中借鑒經(jīng)驗(yàn)。

（二）MOOC的學(xué)習(xí)評(píng)價(jià)研究

MOOC于2012年興起，國(guó)外關(guān)于MOOC學(xué)習(xí)評(píng)價(jià)的研究較為具體和深入。不少研究者指出要關(guān)注對(duì)學(xué)習(xí)者學(xué)習(xí)過(guò)程和學(xué)習(xí)行為的評(píng)價(jià)，通過(guò)對(duì)學(xué)習(xí)者在MOOC學(xué)習(xí)過(guò)程中的各種學(xué)習(xí)行為進(jìn)行評(píng)價(jià)描述學(xué)習(xí)者的學(xué)習(xí)狀態(tài)。庫(kù)珀和沙哈米（Cooper， S.， & Sahami， M.， 2013）指出應(yīng)關(guān)注評(píng)價(jià)學(xué)生的過(guò)程和行為，要將專家評(píng)價(jià)融入同行評(píng)價(jià)中。哈維、格林斯基和洛（Harey， L. A.， Glisky， J. V.， & Lowe， R. A.，2014）對(duì)如何評(píng)估學(xué)習(xí)者在MOOC上的參與度和滿意度進(jìn)行了研究。安德森等（Anderson， A.， Huttenlocher， D.， Kleinberg， J.， & Leskovec， J.， 2014）根據(jù)學(xué)習(xí)者學(xué)習(xí)行為數(shù)據(jù)（觀看視頻、完成作業(yè)、成績(jī)等）描述其參與MOOC 學(xué)習(xí)的情況。吉拉尼（Gilani， N.， 2013）分析了Coursera上一門(mén)名為“商業(yè)策略基礎(chǔ)”的課程，結(jié)果表明討論區(qū)的積極參與者多數(shù)是學(xué)業(yè)成績(jī)較好的學(xué)習(xí)者，這說(shuō)明學(xué)習(xí)者討論區(qū)參與度這一在線學(xué)習(xí)行為與其學(xué)業(yè)成績(jī)之間會(huì)存在一定的相關(guān)性。庫(kù)切等（Coetzee， D.， Fox， A.， Hearst， M. A.， & Hartmann， B.， 2014）研究了課程論壇的使用對(duì)課程通過(guò)率的影響，研究發(fā)現(xiàn)經(jīng)常參與課程論壇的學(xué)生其課程通過(guò)率遠(yuǎn)高于那部分極少光顧課程論壇的學(xué)生，這說(shuō)明課程論壇參與行為與學(xué)生學(xué)習(xí)效果之間存在相關(guān)性。

自MOOC在國(guó)內(nèi)備受關(guān)注開(kāi)始，其評(píng)價(jià)也一直是國(guó)內(nèi)研究者重點(diǎn)關(guān)注的問(wèn)題。國(guó)內(nèi)關(guān)于MOOC評(píng)價(jià)的研究從對(duì)MOOC本身的評(píng)價(jià)逐漸轉(zhuǎn)向?qū)W(xué)習(xí)者在線學(xué)習(xí)行為的評(píng)價(jià)。大量研究者認(rèn)為可以利用學(xué)習(xí)者的行為數(shù)據(jù)分析學(xué)習(xí)效果，結(jié)合成績(jī)分析更好地揭示學(xué)習(xí)者的課程參與程度和努力程度?；趯W(xué)習(xí)行為的特征分析能有效地判別學(xué)習(xí)者能否成功完成學(xué)習(xí)任務(wù)，研究者希望通過(guò)對(duì)在線學(xué)習(xí)行為的評(píng)價(jià)來(lái)間接反映或預(yù)測(cè)學(xué)習(xí)者的學(xué)習(xí)績(jī)效。姜藺等（2013）指出學(xué)習(xí)參與度是影響學(xué)習(xí)者學(xué)習(xí)效果的主要因素之一。學(xué)習(xí)者的參與度在很大程度上會(huì)影響其學(xué)習(xí)效果，并最終影響其通過(guò)率。危妙等（2015）從課程的訪問(wèn)情況、視頻觀看情況、作業(yè)完成情況、討論四個(gè)方面分析學(xué)習(xí)行為以及與學(xué)習(xí)成績(jī)、完成率、輟學(xué)率間的相關(guān)性，研究結(jié)果表明具有不同學(xué)習(xí)行為的學(xué)習(xí)者在學(xué)習(xí)成績(jī)、完成率、輟學(xué)率等方面會(huì)存在顯著的差異。薛宇飛等（2015）基于edX平臺(tái)數(shù)據(jù)，按文化背景選取美國(guó)、印度、英國(guó)的學(xué)習(xí)者，對(duì)其學(xué)習(xí)行為進(jìn)行對(duì)比分析，以了解學(xué)習(xí)者群體在學(xué)習(xí)投入、學(xué)習(xí)活躍度、學(xué)習(xí)持續(xù)性等方面的異同，研究發(fā)現(xiàn)不同文化背景的學(xué)習(xí)者其學(xué)習(xí)行為存在較大差異，進(jìn)而會(huì)引起其學(xué)習(xí)投入、學(xué)習(xí)活躍度以及學(xué)習(xí)持續(xù)性的不同。賈積有等（2014）對(duì)北大在Coursera平臺(tái)上的6門(mén)課程82，352位注冊(cè)學(xué)習(xí)者的學(xué)習(xí)行為數(shù)據(jù)進(jìn)行了匯總與分析，試圖發(fā)現(xiàn)課程層面上學(xué)習(xí)者的網(wǎng)上學(xué)習(xí)行為及其對(duì)學(xué)習(xí)者學(xué)業(yè)成績(jī)的影響，研究表明學(xué)習(xí)者的學(xué)習(xí)成績(jī)與在線時(shí)間、觀看視頻次數(shù)、觀看網(wǎng)頁(yè)次數(shù)、瀏覽和下載講義次數(shù)、平時(shí)測(cè)驗(yàn)成績(jī)之和、論壇參與程度（發(fā)帖、回帖）等在線學(xué)習(xí)行為呈顯著正相關(guān)。

綜上所述，隨著MOOC的不斷發(fā)展以及廣泛使用，MOOC學(xué)習(xí)評(píng)價(jià)已經(jīng)成為國(guó)內(nèi)外研究者關(guān)注的重點(diǎn)。并且已經(jīng)對(duì)“MOOC學(xué)習(xí)中，學(xué)習(xí)者的在線學(xué)習(xí)行為與其學(xué)習(xí)績(jī)效或?qū)W習(xí)結(jié)果之間存在顯著的相關(guān)性，可以通過(guò)對(duì)學(xué)習(xí)者在線學(xué)習(xí)行為的評(píng)價(jià)來(lái)反映或預(yù)測(cè)其對(duì)MOOC的完成情況”這一觀點(diǎn)達(dá)成共識(shí)。MOOCAP作為MOOC在大學(xué)先修課中的應(yīng)用，其本質(zhì)上還是一種MOOC，只是在對(duì)課程內(nèi)容進(jìn)行設(shè)計(jì)時(shí)需要考慮高中生的特點(diǎn)。因此，本研究認(rèn)為可以建立起MOOCAP在線學(xué)習(xí)行為與MOOCAP學(xué)習(xí)效果之間的聯(lián)系，即通過(guò)評(píng)價(jià)學(xué)習(xí)者在MOOCAP中的在線學(xué)習(xí)行為來(lái)反映學(xué)習(xí)者的MOOCAP學(xué)習(xí)效果。

目前，雖然國(guó)內(nèi)外研究者認(rèn)為在MOOC學(xué)習(xí)中學(xué)習(xí)者的在線學(xué)習(xí)行為與其學(xué)習(xí)效果之間存在一定的相關(guān)性，但這些結(jié)論往往是基于某一項(xiàng)或某幾項(xiàng)在線學(xué)習(xí)行為，如論壇參與情況、課程訪問(wèn)情況、視頻觀看情況、瀏覽和下載講義次數(shù)、作業(yè)完成情況等?；谀骋豁?xiàng)或者某幾項(xiàng)在線學(xué)習(xí)行為得出的結(jié)論雖然能夠在一定程度上說(shuō)明在線學(xué)習(xí)行為與學(xué)習(xí)績(jī)效之間的關(guān)系，但其全面性還有待考察。另外，現(xiàn)有的研究并沒(méi)有對(duì)這些在線學(xué)習(xí)行為進(jìn)行明確的分類，也沒(méi)有進(jìn)行具體的權(quán)重和分值分配，基于此得出的結(jié)論往往是描述性的結(jié)論，雖然能夠讓讀者較為直觀地了解MOOC在線學(xué)習(xí)行為和學(xué)習(xí)績(jī)效之間關(guān)系的現(xiàn)狀，但對(duì)具體MOOC學(xué)習(xí)評(píng)價(jià)實(shí)踐的可操作性指導(dǎo)水平還有待提高。對(duì)于MOOCAP來(lái)說(shuō)，目前還處于初步實(shí)踐和探索階段，同樣存在與MOOC學(xué)習(xí)評(píng)價(jià)相同的問(wèn)題。因此，有必要基于學(xué)習(xí)者在MOOCAP學(xué)習(xí)過(guò)程中的在線學(xué)習(xí)行為，研究對(duì)學(xué)習(xí)者學(xué)習(xí)效果的多角度、多層次評(píng)價(jià)指標(biāo)體系，開(kāi)發(fā)出適用于MOOCAP的學(xué)習(xí)效果評(píng)價(jià)量規(guī)。

三、研究設(shè)計(jì)

（一）研究目標(biāo)

在傳統(tǒng)的教學(xué)模式中，對(duì)學(xué)習(xí)效果的評(píng)價(jià)往往單純以一次或者多次作業(yè)以及測(cè)驗(yàn)成績(jī)?yōu)樵u(píng)價(jià)標(biāo)準(zhǔn)，即主要依賴基于結(jié)果的評(píng)價(jià)，而缺乏面向過(guò)程的學(xué)習(xí)行為和學(xué)習(xí)效果的分析評(píng)價(jià)模型。MOOCAP學(xué)習(xí)平臺(tái)利用信息化手段將學(xué)習(xí)的過(guò)程真實(shí)而有效地記錄下來(lái)，從而使得對(duì)學(xué)習(xí)者的過(guò)程分析成為可能，因此本研究基于MOOCAP平臺(tái)的學(xué)習(xí)者行為，研究學(xué)習(xí)者學(xué)習(xí)績(jī)效的多角度、多層次評(píng)價(jià)指標(biāo)體系，從而開(kāi)發(fā)出MOOCAP學(xué)習(xí)的評(píng)價(jià)適用量規(guī)。

（二）研究?jī)?nèi)容和研究方法

以清華大學(xué)學(xué)堂在線MOOCAP學(xué)習(xí)者為對(duì)象，構(gòu)建評(píng)價(jià)MOOCAP學(xué)習(xí)者學(xué)習(xí)效果的學(xué)習(xí)行為指標(biāo)，并對(duì)每個(gè)學(xué)習(xí)行為指標(biāo)進(jìn)行定級(jí)得到評(píng)價(jià)量規(guī)，該成果可定量評(píng)價(jià)學(xué)生MOOCAP成效。

要定量評(píng)價(jià)學(xué)生MOOCAP成效，需要找到學(xué)習(xí)效果的相關(guān)學(xué)習(xí)行為指標(biāo)，并給行為指標(biāo)定級(jí)賦值，因此本研究主要有三部分研究?jī)?nèi)容：

（1）通過(guò)三輪德?tīng)柗品?gòu)建MOOCAP學(xué)習(xí)者學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系。

（2）通過(guò)專家排序法設(shè)定每個(gè)不同類別學(xué)習(xí)行為指標(biāo)的權(quán)重。

（3）通過(guò)專家工作坊的方式對(duì)每個(gè)學(xué)習(xí)行為指標(biāo)進(jìn)行定級(jí)，得到評(píng)價(jià)量規(guī)。

本研究的專家組由10人組成，分別選取了對(duì)學(xué)堂在線MOOCAP的整體架構(gòu)、需求、產(chǎn)品都非常了解的學(xué)堂在線MOOCAP項(xiàng)目組成員3人，在MOOC及遠(yuǎn)程教育領(lǐng)域方面的高校專家3人，使用過(guò)學(xué)堂在線MOOCAP平臺(tái)并且教學(xué)經(jīng)驗(yàn)豐富的中學(xué)一線教師4人。研究采用的德?tīng)柗品?、專家排序法和專家工作坊，都是由這10位專家來(lái)支持開(kāi)展。在前兩種方法中，與專家的溝通以在線形式為主;在專家工作坊中，10位專家與項(xiàng)目組成員面對(duì)面開(kāi)展研討，對(duì)指標(biāo)進(jìn)行定級(jí)并得到評(píng)價(jià)量規(guī)。

四、研究過(guò)程

（一）構(gòu)建MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系

通過(guò)文獻(xiàn)調(diào)研，課程組成員了解了學(xué)習(xí)者學(xué)習(xí)行為與學(xué)習(xí)效果評(píng)價(jià)的關(guān)系，在梳理現(xiàn)有學(xué)習(xí)績(jī)效評(píng)價(jià)模型的基礎(chǔ)之上得到了MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系（初稿）。將學(xué)生的在線學(xué)習(xí)行為評(píng)價(jià)分為四個(gè)層面，分別是學(xué)習(xí)風(fēng)格、學(xué)習(xí)成績(jī)、綜合能力和學(xué)習(xí)態(tài)度。其中，學(xué)習(xí)風(fēng)格包括心智維度、社會(huì)維度、生理維度和其他偏好，學(xué)習(xí)成績(jī)包括過(guò)程性行為和結(jié)果性成績(jī)，綜合能力包括協(xié)作能力、創(chuàng)新能力和表達(dá)能力，學(xué)習(xí)態(tài)度包括學(xué)習(xí)積極性、學(xué)習(xí)參與度和學(xué)術(shù)誠(chéng)信。這里需要說(shuō)明一點(diǎn)，該評(píng)估模型的構(gòu)建有兩個(gè)目的，一個(gè)是能夠直觀評(píng)價(jià)學(xué)生的學(xué)習(xí)情況，另一個(gè)是希望了解學(xué)習(xí)者的特征，比如其學(xué)習(xí)能力、學(xué)習(xí)習(xí)慣等。因此，除了學(xué)習(xí)成績(jī)之外，在模型中加入了學(xué)習(xí)風(fēng)格、學(xué)習(xí)態(tài)度等維度。

在構(gòu)建MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系（初稿）后，開(kāi)展德?tīng)柗蒲芯?，在統(tǒng)計(jì)和聽(tīng)取三輪專家意見(jiàn)的基礎(chǔ)上對(duì)MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系（初稿）進(jìn)行修訂，形成了MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系（修訂稿）。將原有學(xué)習(xí)評(píng)價(jià)四個(gè)層面合并成了兩個(gè)層面，分別為學(xué)習(xí)偏好和學(xué)習(xí)成績(jī)。學(xué)習(xí)偏好反映學(xué)習(xí)者的學(xué)習(xí)習(xí)慣與傾向性，無(wú)法嚴(yán)格進(jìn)行打分及分?jǐn)?shù)比較，主要包括學(xué)習(xí)時(shí)間分布、模塊學(xué)習(xí)時(shí)間分布、視頻學(xué)習(xí)時(shí)間間隔、學(xué)習(xí)序列、論壇交流頻率;學(xué)習(xí)成績(jī)反映學(xué)習(xí)者的學(xué)習(xí)結(jié)果與成效，便于進(jìn)行打分及分?jǐn)?shù)比較，包括結(jié)果性成績(jī)、作業(yè)行為、測(cè)試行為和其他參考指標(biāo)（學(xué)習(xí)積極性、學(xué)習(xí)速度和學(xué)習(xí)效度）。三輪德?tīng)柗品ㄐ抻喞碛杉敖Y(jié)果見(jiàn)圖1。

本研究依據(jù)清華大學(xué)MOOCAP平臺(tái)，深入調(diào)研了多門(mén)MOOCAP的課程，了解學(xué)生學(xué)習(xí)路徑和學(xué)習(xí)行為。學(xué)生在加入課程前的行為包括查找課程和學(xué)校、加課并申請(qǐng)認(rèn)證證書(shū)、查看我的消息、分享、下載APP、意見(jiàn)反饋等。加入課程后學(xué)生的行為分布在各個(gè)功能區(qū)，如課件區(qū)的觀看視頻、下載字幕、完成測(cè)試，課程信息區(qū)的查看課程更新與新聞、打包下載課件;討論區(qū)的查找帖子、發(fā)布預(yù)定、接收更新、添加回復(fù)、評(píng)論、投票等;wiki區(qū)的查看wiki、編輯wiki、添加新文章等;我的主頁(yè)區(qū)的查看我的課程、查看我的證書(shū)、查看優(yōu)惠券等。另外，還有進(jìn)度信息、考試、導(dǎo)學(xué)、教學(xué)大綱等。在了解學(xué)生主要學(xué)習(xí)行為后，結(jié)合MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系（修訂稿），形成MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系（終稿），見(jiàn)表1。

（二）確定權(quán)重

確定指標(biāo)權(quán)重的方法多種多樣，比如因子分析法、相關(guān)系數(shù)法、專家排序法、RSR法、Delphi法、層次分析法、算術(shù)均數(shù)組合賦權(quán)法、連乘累積組合賦權(quán)法、模糊數(shù)學(xué)判斷方法、優(yōu)序圖法等，其中“專家排序法”以其操作簡(jiǎn)便、易于掌握等特點(diǎn)被《教育督導(dǎo)及教育督導(dǎo)評(píng)估（洪煌亮主編）》等教育測(cè)評(píng)類專著所介紹。本研究構(gòu)建的績(jī)效評(píng)價(jià)指標(biāo)體系包括學(xué)習(xí)偏好和學(xué)習(xí)成績(jī)，學(xué)習(xí)偏好不計(jì)成績(jī)，只用來(lái)了解學(xué)生的學(xué)習(xí)風(fēng)格和學(xué)習(xí)習(xí)慣，學(xué)習(xí)成績(jī)中的其他參考指標(biāo)（學(xué)習(xí)積極性、學(xué)習(xí)速度和學(xué)習(xí)效度）用來(lái)參考了解學(xué)生的學(xué)習(xí)能力，而作為分值呈現(xiàn)的是學(xué)習(xí)成績(jī)中的三個(gè)指標(biāo)，分別為結(jié)果性成績(jī)、作業(yè)行為、測(cè)試行為，本研究采用專家排序法對(duì)結(jié)果性成績(jī)、作業(yè)行為、測(cè)試行為以及作業(yè)行為和測(cè)試行為下所包含指標(biāo)的權(quán)重予以確定。

回收10名專家的結(jié)果進(jìn)行數(shù)理統(tǒng)計(jì)，計(jì)算評(píng)價(jià)指標(biāo)的權(quán)值，計(jì)算公式為：aj=2[m（1+n）-Rj]/[mn（1+n）]（式中，aj表示第j項(xiàng)指標(biāo)的權(quán)重，j表示指標(biāo)的序號(hào)，m為專家人數(shù)。本研究中m=10，n為指標(biāo)個(gè)數(shù)，Rj表示第j個(gè)指標(biāo)的秩和。）

學(xué)習(xí)成績(jī)所包含的一級(jí)指標(biāo)的專家排序結(jié)果見(jiàn)表2。

據(jù)此，本研究得到學(xué)習(xí)成績(jī)一級(jí)指標(biāo)和二級(jí)指標(biāo)的權(quán)重，具體情況見(jiàn)表5。

（三）制定MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)量規(guī)

在得到具體的行為指標(biāo)并確定權(quán)重之后，本研究通過(guò)專家工作坊的形式，對(duì)各個(gè)行為指標(biāo)進(jìn)行了詳細(xì)的劃分定級(jí)，得到評(píng)價(jià)學(xué)生MOOCAP成效切實(shí)可行的評(píng)價(jià)量規(guī)。

1. 學(xué)習(xí)偏好行為指標(biāo)

學(xué)習(xí)偏好部分的行為指標(biāo)不計(jì)分?jǐn)?shù)和權(quán)重，只描述學(xué)習(xí)狀態(tài)，通過(guò)數(shù)軸、條形圖、柱狀圖等形式呈現(xiàn)學(xué)習(xí)者的學(xué)習(xí)行為規(guī)律，從而反映學(xué)習(xí)者的學(xué)習(xí)偏好，可作為了解學(xué)生的一個(gè)渠道。時(shí)間偏好以登錄時(shí)間點(diǎn)為行為指標(biāo)，反映學(xué)習(xí)者習(xí)慣于什么時(shí)間段學(xué)習(xí)或者有無(wú)固定學(xué)習(xí)時(shí)間點(diǎn);投入偏好以視頻、作業(yè)、測(cè)試的學(xué)習(xí)時(shí)長(zhǎng)為行為指標(biāo)，以便于了解學(xué)習(xí)者各視頻、作業(yè)、測(cè)試花費(fèi)的時(shí)間分布;節(jié)奏偏好以各視頻點(diǎn)擊時(shí)間點(diǎn)為行為指標(biāo)，反映學(xué)習(xí)者習(xí)慣于連續(xù)性學(xué)習(xí)還是需要一定時(shí)間內(nèi)化再學(xué)習(xí);序列偏好以各單元視頻觀看順序?yàn)樾袨橹笜?biāo)，了解學(xué)習(xí)者各章節(jié)學(xué)習(xí)是否按順序進(jìn)行;交流偏好以發(fā)起話題的帖子數(shù)、對(duì)于自身發(fā)起的話題的回帖數(shù)、在他人話題下的回帖數(shù)為行為指標(biāo)，以統(tǒng)計(jì)學(xué)習(xí)者論壇發(fā)帖和回帖的數(shù)量，了解其論壇行為方式。

2. 學(xué)習(xí)成績(jī)行為指標(biāo)

學(xué)習(xí)成績(jī)部分的行為指標(biāo)分為兩部分：計(jì)分?jǐn)?shù)與權(quán)重的結(jié)果性成績(jī)和行為成績(jī)，不計(jì)分?jǐn)?shù)與權(quán)重的其他參考指標(biāo)。

計(jì)分?jǐn)?shù)與權(quán)重的結(jié)果性成績(jī)和行為成績(jī)的具體內(nèi)容如下：

（1）作業(yè)分?jǐn)?shù)和測(cè)試分?jǐn)?shù)：滿分各100分，共同構(gòu)成了結(jié)果性成績(jī)。其中，作業(yè)與測(cè)試的權(quán)重由授課教師決定。

（2）作業(yè)效能（作業(yè)效能=作業(yè)正確率/花費(fèi)時(shí)間，測(cè)試效能參照作業(yè)效能計(jì)算）：劃分為五個(gè)等級(jí)，作業(yè)效能比平均作業(yè)效能高40%及以上，高20%～40%，低20%～20%之間，低20%～40%，低40%及以上，五種情況分別賦值100分、80分、60分、40分、20分，最終的作業(yè)效能分?jǐn)?shù)為每次作業(yè)效能分?jǐn)?shù)的平均值。

（3）作業(yè)完成率（測(cè)試完成率參照作業(yè)效能計(jì)算）：劃分為五個(gè)等級(jí)，作業(yè)完成數(shù)量/該門(mén)課程作業(yè)總數(shù)的百分比等于100%，大于等于80%且小于100%，大于等于60%且小于80%，大于等于40%且小于60%，小于40%，五種情況分別賦值100分、80分、60分、40分、20分，此得分即為最終的作業(yè)完成率成績(jī)。

（4）作業(yè)時(shí)效性（作業(yè)時(shí)效性即作業(yè)是否按時(shí)完成，考試時(shí)效性參照作業(yè)時(shí)效性計(jì)算）：劃分為五個(gè)等級(jí)，按時(shí)提交作業(yè)數(shù)/該門(mén)課程作業(yè)總數(shù)小于等于20%，大于20%且小于等于40%，大于40%且小于等于60%，大于60%且小于等于80%，大于80%，五種情況分別賦值20分、40分、60分、80分、100分，此得分即為最終的作業(yè)時(shí)效性成績(jī)。

（5）作業(yè)嘗試數(shù)（作業(yè)提交次數(shù)，作業(yè)提交次數(shù)越少分值越高）：劃分為五個(gè)等級(jí)，作業(yè)提交次數(shù)比該門(mén)課程所有人平均作業(yè)提交次數(shù)低40%及以上，低20%～40%，低20%到高20%之間，高20%～40%，高40%及以上，五種情況分別賦值100分、80分、60分、40分、20分，最終所有作業(yè)取平均值即為最終的作業(yè)嘗試數(shù)成績(jī)。

不計(jì)分?jǐn)?shù)與權(quán)重的其他參考指標(biāo)具體內(nèi)容如下：

（1）學(xué)習(xí)積極性的行為指標(biāo)為加課時(shí)間與首次學(xué)習(xí)時(shí)間差，時(shí)間差越短說(shuō)明越積極。

（2）學(xué)習(xí)速度的行為指標(biāo)為視頻觀看視頻時(shí)長(zhǎng)/用時(shí)時(shí)長(zhǎng)，比值越小說(shuō)明學(xué)習(xí)速度越快。

（3）學(xué)習(xí)效度：課程分?jǐn)?shù)×學(xué)習(xí)速度，課程分?jǐn)?shù)為結(jié)果性成績(jī)、作業(yè)行為和測(cè)試行為的加權(quán)分?jǐn)?shù)。

（四）研究成果的應(yīng)用和評(píng)價(jià)

通過(guò)以上研究過(guò)程，得到了MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)模型，包括MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系和評(píng)價(jià)量規(guī)。為檢驗(yàn)研究所形成的MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)模型的可操作性和在幫助學(xué)生挖掘自身的學(xué)習(xí)特點(diǎn)和優(yōu)勢(shì)方面所起的作用，研究者與清華大學(xué)學(xué)堂在線合作，運(yùn)用所開(kāi)發(fā)的評(píng)價(jià)量規(guī)對(duì)MOOCAP學(xué)習(xí)者的學(xué)習(xí)績(jī)效進(jìn)行評(píng)價(jià)，進(jìn)行產(chǎn)品化，形成學(xué)堂在線MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)單，如圖2。

教育部在線教育研究中心、學(xué)堂在線相關(guān)教師表示基于MOOCAP評(píng)價(jià)量規(guī)得到的MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)單可以作為本科教師（尤其是大學(xué)一年級(jí)教師）進(jìn)行因材施教的重要參考。此外，部分教師認(rèn)為MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)單也可以用于MOOCAP學(xué)習(xí)者自查，幫助MOOCAP學(xué)習(xí)者快速了解自己的學(xué)習(xí)偏好和學(xué)習(xí)成績(jī)，挖掘自身的學(xué)習(xí)特點(diǎn)和優(yōu)勢(shì)，診斷學(xué)習(xí)過(guò)程中存在的問(wèn)題。

五、討論和反思

本研究綜合運(yùn)用德?tīng)柗品ā＜遗判蚍?、專家工作坊等多種研究方法構(gòu)建了MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系。該評(píng)價(jià)指標(biāo)體系除了對(duì)學(xué)生的學(xué)習(xí)成績(jī)進(jìn)行定量考查外，還對(duì)學(xué)生的學(xué)習(xí)時(shí)間、學(xué)習(xí)交流、學(xué)習(xí)作息等方面的偏好以及與學(xué)習(xí)成績(jī)相關(guān)的學(xué)習(xí)積極性、學(xué)習(xí)速度等方面的特點(diǎn)進(jìn)行了定性描述，為教師提供了全面了解學(xué)習(xí)者學(xué)習(xí)狀態(tài)的渠道，從而在實(shí)現(xiàn)因材施教的路上又邁進(jìn)了一步。此外，本研究基于MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)指標(biāo)體系，充分利用MOOCAP本身的數(shù)據(jù)優(yōu)勢(shì)，開(kāi)發(fā)出了MOOCAP學(xué)習(xí)績(jī)效評(píng)價(jià)量規(guī)。該評(píng)價(jià)量規(guī)能夠有效實(shí)現(xiàn)基于大數(shù)據(jù)的個(gè)性化評(píng)測(cè)，增加評(píng)測(cè)的有效性和公平性，同時(shí)幫助學(xué)生挖掘自身的學(xué)習(xí)特點(diǎn)和優(yōu)勢(shì)，為實(shí)現(xiàn)“以個(gè)性化評(píng)測(cè)引導(dǎo)個(gè)性化學(xué)習(xí)”提供了工具支撐。

由于本研究的最終成果是要產(chǎn)品化，對(duì)高中學(xué)生在MOOCAP平臺(tái)上的學(xué)習(xí)結(jié)果有一個(gè)定量的評(píng)價(jià)，所以在評(píng)估模型中主要是用學(xué)生在平臺(tái)上的作業(yè)和測(cè)試成績(jī)作為量化評(píng)價(jià)的主要指標(biāo)，而諸如視頻觀看時(shí)長(zhǎng)、學(xué)習(xí)速度、論壇發(fā)言情況作為學(xué)生學(xué)習(xí)情況的參考指標(biāo)。雖然賈積有等（2014）研究者指出學(xué)習(xí)者的學(xué)習(xí)成績(jī)與在線時(shí)間、觀看視頻次數(shù)、觀看網(wǎng)頁(yè)次數(shù)、瀏覽和下載講義次數(shù)、論壇參與程度（發(fā)帖、回帖）等在線學(xué)習(xí)行為呈顯著正相關(guān)，但是較難對(duì)其進(jìn)行量化評(píng)估。視頻觀看5次算是滿分，還是觀看3次算是滿分？在線時(shí)間長(zhǎng)的學(xué)生真的一定是在該網(wǎng)站上學(xué)習(xí)，還是只是打開(kāi)網(wǎng)頁(yè)而已？這些都較難斷定。另外，在德?tīng)柗蒲芯窟^(guò)程中與高校的幾位老師進(jìn)行溝通，了解到他們?cè)贛OOC教學(xué)過(guò)程中發(fā)現(xiàn)很多比較優(yōu)秀的學(xué)生的視頻學(xué)習(xí)時(shí)間往往是短的，他們的在線時(shí)間也沒(méi)有顯著多于其他學(xué)生。從這些有豐富MOOC教學(xué)經(jīng)驗(yàn)的高校教師的角度來(lái)看，評(píng)價(jià)模型的定量評(píng)價(jià)部分不該加入視頻學(xué)習(xí)時(shí)間、在線時(shí)間、下載講義次數(shù)等。但是，如何利用學(xué)習(xí)者在線學(xué)習(xí)的各種學(xué)習(xí)行為，諸如視頻學(xué)習(xí)時(shí)間、論壇參與情況等，構(gòu)建一個(gè)可以量化的評(píng)價(jià)模型，是一件非常有意思的事情，這也是本研究試圖繼續(xù)開(kāi)展的研究方向。

六、展望

MOOCAP作為MOOC的一種應(yīng)用形式，具有MOOC共享教育、促進(jìn)教育公平的優(yōu)勢(shì)，突破了時(shí)空的限制，以其普遍性、便捷性和高效性的特點(diǎn)建立了一套針對(duì)中學(xué)生的教育資源覆蓋機(jī)制，從“地域教育”轉(zhuǎn)變成“共享教育”。此外，突破了“階段教育”之間的壁壘。MOOCAP并不是簡(jiǎn)單地把大學(xué)課程搬到中學(xué)，而是采用更加符合教育規(guī)律的方式，根據(jù)高中生的特點(diǎn)重新精心打造連接中學(xué)教育和大學(xué)教育的課程，從而幫助學(xué)生平滑過(guò)渡，實(shí)現(xiàn)“貫通學(xué)習(xí)”。更為重要的是，MOOCAP秉承以學(xué)習(xí)者為中心的理念，不同學(xué)生可以根據(jù)其自身特點(diǎn)、發(fā)展方向等選取不同類型的課程，在堅(jiān)實(shí)的基礎(chǔ)教育之上讓學(xué)有余力的學(xué)生更早地發(fā)展自身特長(zhǎng)。學(xué)習(xí)交流的過(guò)程會(huì)被全面記錄下來(lái)，為形成一套獨(dú)特的量身定做的學(xué)生學(xué)習(xí)檔案、促進(jìn)學(xué)生個(gè)性化的發(fā)展提供充分的數(shù)據(jù)支持。

MOOCAP作為高中和大學(xué)的連接橋梁，給學(xué)有余力的高中學(xué)生提供了接觸大學(xué)教學(xué)資源的機(jī)會(huì)，而如何使得高校老師更加清晰、直觀地了解即將進(jìn)入大學(xué)的學(xué)生的學(xué)習(xí)績(jī)效、學(xué)習(xí)風(fēng)格、學(xué)習(xí)偏好，這就需要構(gòu)建MOOCAP學(xué)習(xí)者評(píng)價(jià)模型。本文介紹的評(píng)價(jià)模型是研究過(guò)程中的一個(gè)節(jié)點(diǎn)成果，研究仍將繼續(xù)，模型還將利用大數(shù)據(jù)進(jìn)行進(jìn)一步迭代，更加全面地展示MOOCAP學(xué)生學(xué)習(xí)的效果和情況，為學(xué)生進(jìn)入大學(xué)后個(gè)性化學(xué)習(xí)的施展奠定良好的基礎(chǔ)。

[參考文獻(xiàn)]

CAP大學(xué)先修課. 2016. 什么是大學(xué)先修課[EB/OL]. 4-11. http：//www.csecap.com/User_Instructions.aspx？id=43

鄧暉. 2015-12-03（05）. 慕課大學(xué)先修課：能否跑好人才培養(yǎng)的“接力賽”[N/OL]. 光明日?qǐng)?bào). [2015-12-03]. http：//epaper.gmw.cn/gmrb/html/2015-12/03/nw.D110000gmrb_20151203_1-05.htm

賈積有，繆靜敏，汪瓊. 2014. MOOC學(xué)習(xí)行為及效果的大數(shù)據(jù)分析——以北大6門(mén)MOOC為例[J]. 工業(yè)和信息化教育（09）：23-29.

姜藺，韓錫斌，程建鋼. 2013. MOOCs學(xué)習(xí)者特征及學(xué)習(xí)效果分析研究[J]. 中國(guó)電化教育（11）：54-59，65.

李強(qiáng). 2016-4-11. “中國(guó)慕課大學(xué)先修課（MOOCAP）建設(shè)”高峰論壇暨全國(guó)重點(diǎn)中學(xué)校長(zhǎng)教育論壇在西安交大召開(kāi)[EB/OL]. http：//www.moocap.org.cn/announcement/#！/detail/15

潘超. 2016. 2015年度中國(guó)現(xiàn)代遠(yuǎn)程教育十大新聞事件權(quán)威發(fā)布[J]. 中國(guó)遠(yuǎn)程教育（01）：11.

清華大學(xué)招生辦主任. 2016-04-11. MOOCAP：怎樣做到“因材施教”？[EB/OL]. http：//www.moocap.org.cn/announcement/#！/detail/home

全國(guó)40余所大學(xué)和中學(xué)聯(lián)合啟動(dòng)慕課大學(xué)先修課[J]. 物理與工程2015（6）：14.

萬(wàn)玉鳳. 2015. 在線大學(xué)先修課，“先修”什么？[N]. 中國(guó)教育報(bào)，11-30（03）.

危妙，傅霖，黎剛，郭姍姍. 2015. MOOC課程平臺(tái)學(xué)習(xí)行為與學(xué)習(xí)成效大數(shù)據(jù)分析[J]. 教育教學(xué)壇（38）：60-61.

薛宇飛，黃振中，石菲. 2015. MOOC學(xué)習(xí)行為的國(guó)際比較研究——以“財(cái)務(wù)分析與決策”課程為例[J]. 開(kāi)放教育研究（06）：80-85.

于世潔. 2016. 慕課大學(xué)先修課助推教育改革[N]. 光明日?qǐng)?bào)，01-05（13）.

張晏慧. 2015. 中國(guó)慕課大學(xué)先修課理事會(huì)在清華成立[N]. 新清華，12-04（A02）.

Anderson， A.， Huttenlocher， D.， Kleinberg， J.， & Leskovec， J. （2014）. Engaging with massive online courses. 687-698.

Coetzee， D.， Fox， A.， Hearst， M. A.， & Hartmann， B. （2014）. Should your MOOC forum use a reputation system？. in Proceedings of the 17th ACM conference on Computer Supported Cooperative Work & Social Computing， 1176-1187. ACM.

Cooper， S.， & Sahami， M. （2013， February）. Reflections on Stanfords MOOCs. Communications of the ACM. 56（2）， 28-30.

Gillani， N. （2013）. Learner communications in massively open online courses. xCHEPS Occasional Paper， 53.

Harey， L. A.， Glisky， J. V.， & Lowe， R. A. （2014）. Maasive Open Online Course for Teaching Physiotherapy Students and about Spinal Cord injuries. SPINAL CORD. 52（12）， 911-918.

收稿日期：2018-03-14

定稿日期：2018-07-08

作者簡(jiǎn)介：沈欣憶，博士，助理研究員，北京教育科學(xué)研究院（100036）。

吳健偉，碩士，教研員，北京市海淀區(qū)教師進(jìn)修學(xué)校（100195）。

張艷霞，碩士，測(cè)評(píng)研究員，深圳海云天科技有限公司（518057）。

李營(yíng)，碩士，助理工程師，中央財(cái)經(jīng)大學(xué)教學(xué)技術(shù)服務(wù)中心（100081）。

馬昱春，博士，副教授，碩士生導(dǎo)師，清華大學(xué)計(jì)算機(jī)系（100084）。

責(zé)任編輯 郝 丹