王詩(shī)琪 張佳祺 莊 唯
(上海工程技術(shù)大學(xué)數(shù)理與統(tǒng)計(jì)學(xué)院,上海 201620)
受新冠肺炎疫情的影響,2020年1月27日教育部發(fā)布了關(guān)于2020年春季學(xué)期延期開(kāi)學(xué)的通知[1]。2020年2月5日,教育部又印發(fā)《關(guān)于在疫情防控期間做好普通高等學(xué)校在線教學(xué)組織與管理工作的指導(dǎo)意見(jiàn)》,全面保障高校在疫情防控期間的在線教學(xué)[2]。各高校響應(yīng)“停課不停教、停課不停學(xué)”號(hào)召,紛紛開(kāi)展線上教學(xué)活動(dòng),因此學(xué)生在線學(xué)習(xí)的效果引起社會(huì)各界的廣泛關(guān)注。在線學(xué)習(xí)的效果的評(píng)價(jià)顯然不能簡(jiǎn)單依賴于最終考試成績(jī)的評(píng)定,對(duì)學(xué)生學(xué)習(xí)效果的評(píng)價(jià)更應(yīng)注重于學(xué)生的學(xué)習(xí)態(tài)度、心理素質(zhì)等,這些因素能夠體現(xiàn)學(xué)生學(xué)習(xí)能力及適應(yīng)能力的綜合素質(zhì)水平。與此同時(shí),通過(guò)高校學(xué)生在知識(shí)、技能和能力水平的提升程度來(lái)評(píng)價(jià)學(xué)習(xí)質(zhì)量——對(duì)學(xué)習(xí)績(jī)效的評(píng)價(jià),也突顯出它的重要意義。本文基于Kirkpatrick[3]評(píng)估模型、結(jié)合線上教學(xué)的特點(diǎn),對(duì)本科生在線學(xué)習(xí)的學(xué)習(xí)教學(xué)進(jìn)行評(píng)價(jià)。
本文在學(xué)生自評(píng)研究的基礎(chǔ)上,對(duì)本科生線上學(xué)習(xí)達(dá)到的績(jī)效水平進(jìn)行評(píng)價(jià),旨在了解學(xué)生在線學(xué)習(xí)情況、體現(xiàn)本科生在線學(xué)習(xí)的行為狀態(tài),為更好地服務(wù)在線教學(xué)的具體實(shí)施,為后續(xù)網(wǎng)絡(luò)教育和網(wǎng)絡(luò)課堂,例如Mooc等提供參考。
本研究通過(guò)“問(wèn)卷星”發(fā)放(2020年4月23日-4月25日)電子問(wèn)卷展開(kāi)調(diào)研,問(wèn)卷題類目包括:學(xué)生基本情況,關(guān)于學(xué)習(xí)效果的評(píng)價(jià),對(duì)在線學(xué)習(xí)的評(píng)價(jià)等等。最終回收1787份答卷,其中有效問(wèn)卷1707份,涉及全國(guó)學(xué)生13個(gè)專業(yè),其中工學(xué)類學(xué)生及文學(xué)類學(xué)生最多。
問(wèn)卷共設(shè)置18道關(guān)于學(xué)習(xí)效果評(píng)價(jià)的題目。本研究首先對(duì)照問(wèn)卷的18個(gè)題目進(jìn)行分析。通過(guò)對(duì)題目總分取上27%分位數(shù)和下27%分位數(shù)[4],將答卷分為高分組(總分大于上27%分位數(shù))和低分組(總分小于下27%分位數(shù))。將高分組與低分組的每個(gè)題目得分進(jìn)行均值檢驗(yàn)(t-test),發(fā)現(xiàn)p值都小于0.001,每個(gè)題項(xiàng)都具有較高的區(qū)分度。刪掉與總分相關(guān)系數(shù)小于0.4的題目,共剩余參與分析的題項(xiàng)數(shù)為17。樣本的結(jié)構(gòu)性效度分析顯示,Bartlett球形檢驗(yàn)在0.001水平上顯著(卡方統(tǒng)計(jì)量為89213.97,自由度為171),KMO檢驗(yàn)值為0.947,說(shuō)明樣本具有較高的結(jié)構(gòu)性效度,非常適合進(jìn)行因素分析。嘗試抽取一個(gè)公共因子,發(fā)現(xiàn)“請(qǐng)問(wèn)您在這段時(shí)間,課下主要通過(guò)什么途徑鞏固學(xué)習(xí)?”這個(gè)問(wèn)題與其他問(wèn)題的共同度較低(<0.2),故選擇刪掉此問(wèn)題。因此最終保留16個(gè)相關(guān)度較高的題項(xiàng),保留樣本的Cronbach’s系數(shù)為0.931(≥0.8)說(shuō)明具有較好的內(nèi)部一致性。
下面我們將分別對(duì)Kirkpatrick評(píng)估模型的四個(gè)維度進(jìn)行因子分析,以特征值大于1為標(biāo)準(zhǔn)抽取公共因子。結(jié)果顯示,每個(gè)維度下可以抽取1個(gè)公共因子。就分析角度看,我們目的就是尋找1個(gè)指標(biāo)代替該維度下的績(jī)效水平,因而抽取1個(gè)公共因子也是合理的。具體分析如下:
在Kirkpatrick評(píng)估模型中,反應(yīng)層(Reaction Level)主要針對(duì)培訓(xùn)者在自然狀態(tài)下對(duì)學(xué)習(xí)滿意程度的評(píng)價(jià)。問(wèn)卷數(shù)據(jù)顯示,本維度下四個(gè)題項(xiàng)的平均得分在3.02-3.65之間,其中學(xué)生對(duì)于學(xué)校整體在線教學(xué)的組織安排滿意度平均得分為3.65,其他三個(gè)題項(xiàng)平均得分都低于3.5分。對(duì)此維度問(wèn)題進(jìn)行因子分析,抽取一個(gè)公共因子。此因子可以解釋的維度內(nèi)總變異量的64%。因子在各個(gè)題項(xiàng)上的荷載及個(gè)指標(biāo)的共同度范圍如表1。通過(guò)對(duì)權(quán)重的歸一化處理,最終決定對(duì)四個(gè)題項(xiàng)權(quán)重設(shè)置為 0.24,0.27,0.24,0.25 并合成代表反應(yīng)層的維度指標(biāo),整體均值為3.29。
學(xué)習(xí)層(Learning Level)是培訓(xùn)者完成培訓(xùn)后,實(shí)現(xiàn)態(tài)度轉(zhuǎn)變、知識(shí)擴(kuò)充和技能提升的直接及客觀的評(píng)價(jià)。本維度下,四個(gè)題項(xiàng)的平均得分在3.12-3.85之間,其中學(xué)生對(duì)在線學(xué)習(xí)時(shí)狀態(tài)評(píng)價(jià)的平均得分為3.85,說(shuō)明學(xué)生在線學(xué)習(xí)表現(xiàn)出了較高的主動(dòng)性。對(duì)此維度問(wèn)題進(jìn)行因子分析,抽取1個(gè)公共因子,可以解釋的維度內(nèi)總變異量的63%。因子在各個(gè)題項(xiàng)上的荷載及個(gè)指標(biāo)的共同度范圍如如表1。通過(guò)對(duì)權(quán)重的歸一化處理,最終決定對(duì)四個(gè)題項(xiàng)權(quán)重設(shè)置為0.28、0.29、0.26、0.16 并合成代表學(xué)習(xí)層的維度指標(biāo),整體均值為3.3。
表1 因子分析結(jié)果(旋轉(zhuǎn)后,N=1707)
行為層(Behavior Level)是對(duì)培訓(xùn)者在培訓(xùn)中將獲得的知識(shí)、技能、態(tài)度應(yīng)用到實(shí)踐過(guò)程中引起行為變化程度的評(píng)價(jià)。學(xué)生在本維度的四個(gè)題項(xiàng)中的平均得分為3.19-3.8之間,其中學(xué)生在配合完成老師布置的作業(yè)方面評(píng)分均值為3.8,說(shuō)明大多數(shù)學(xué)生在完成作業(yè)方面能夠很好配合老師;其他題項(xiàng)得分均在3.5分以下,均處于一般情況。對(duì)此維度問(wèn)題進(jìn)行因子分析,抽取1個(gè)公共因子。此因子可以解釋的維度內(nèi)總變異量的79.5%。因子在各個(gè)題項(xiàng)上的荷載及個(gè)指標(biāo)的共同度范圍如表1。通過(guò)對(duì)權(quán)重的歸一化處理,最終決定對(duì)四個(gè)題項(xiàng)權(quán)重設(shè)置為 0.22、0.26、0.26、0.25 并合成代表行為層的維度指標(biāo),均值為3.41。
結(jié)果層(Results Level)是培訓(xùn)者接受完培訓(xùn)后,實(shí)現(xiàn)目標(biāo)的評(píng)價(jià)。本維度下四個(gè)題項(xiàng)的平均得分在3.21-3.42之間,均處于一般水平。對(duì)此維度問(wèn)題進(jìn)行因子分析,抽取1個(gè)公共因子。此因子可以解釋的維度內(nèi)總變異量的72%。因子在各個(gè)題項(xiàng)上的荷載及個(gè)指標(biāo)的共同度范圍如如表1。通過(guò)對(duì)權(quán)重的歸一化處理,最終決定對(duì)四個(gè)題項(xiàng)權(quán)重設(shè)置為0.27、0.28、0.28、0.18并合成代表學(xué)習(xí)層的維度指標(biāo),整體均值為 3.28。
通過(guò)對(duì)綜合績(jī)效與性別、年級(jí)、疫情之前是否有在線學(xué)習(xí)經(jīng)歷、學(xué)習(xí)使用設(shè)備、授課方式等因素的單因素分析,結(jié)果顯示:
1.學(xué)生的績(jī)效與性別在0.001水平下顯著相關(guān),并且女生的績(jī)效顯著高于男生約0.15;
2.學(xué)生的學(xué)習(xí)績(jī)效具有城鄉(xiāng)差距,結(jié)果顯示省會(huì)/直轄市、地級(jí)市、縣城學(xué)生的績(jī)效無(wú)明顯差異,但是鄉(xiāng)鎮(zhèn)學(xué)生與其他地區(qū)學(xué)生相比績(jī)效顯著較低;
3.在疫情之前,經(jīng)常使用線上學(xué)習(xí)工具的學(xué)生表現(xiàn)出最高的績(jī)效水平,而疫情之前沒(méi)有使用過(guò)線上教學(xué)工具的學(xué)生績(jī)效水平最差;
4.學(xué)生使用這三種設(shè)備的種數(shù)與學(xué)習(xí)績(jī)效顯著相關(guān)。使用多的,表現(xiàn)出了更強(qiáng)的績(jī)效水平,而電腦、手機(jī)、平板電腦三種設(shè)備都使用的學(xué)生績(jī)效顯著高于其他兩種情況;
5.授課方式顯著影響學(xué)生的學(xué)習(xí)績(jī)效。授課方式為主要以直播為主的學(xué)生展示出的績(jī)效水平最高,其次是授課方式主要以直播和錄播相結(jié)合的學(xué)生。而授課方式主要以錄播為主的學(xué)生顯示了最低的績(jī)效水平。
將學(xué)生按照高分組(大于績(jī)效的上27%分位數(shù)),低分組(低于績(jī)效的下27%分位數(shù))以及中間組,其中高低分組各包含461份問(wèn)卷。本部分我們僅針對(duì)高低分組的學(xué)生進(jìn)行對(duì)比分析。
1.高分組和低分組對(duì)在線學(xué)習(xí)的喜愛(ài)程度有極大的不同
低分組中有74.4%的學(xué)生不喜歡在線學(xué)習(xí),而高分組只有15.84%不喜歡。不喜歡網(wǎng)課的學(xué)生更多的是因?yàn)闆](méi)有學(xué)習(xí)氣氛(72.23%)、長(zhǎng)時(shí)間對(duì)著屏幕、眼睛疲勞(61.17%)、無(wú)法集中精神(60.95%);喜歡網(wǎng)課的學(xué)生大部分認(rèn)為長(zhǎng)時(shí)間對(duì)著屏幕、眼睛疲勞(67.25%)、網(wǎng)絡(luò)卡頓(51.41%)、沒(méi)有課本(49.02%)是最影響自己學(xué)習(xí)效果的因素。
2.高分組和低分組對(duì)在線學(xué)習(xí)認(rèn)知有極大的不同
所有參與調(diào)查的學(xué)生中,41.48%和38.66%學(xué)生覺(jué)得在線學(xué)習(xí)可以更有針對(duì)性地學(xué)習(xí)或者有更多的學(xué)習(xí)資源。而這兩種觀點(diǎn)在高分組和低分組顯示出較大的區(qū)別,高分組分別有55.31%和50.11%的學(xué)生認(rèn)同這兩種觀點(diǎn),而低分組只有24.08%和29.72%的學(xué)生認(rèn)同。所有參與調(diào)查的學(xué)生中有67.25%的人會(huì)通過(guò)上網(wǎng)搜索學(xué)習(xí)資源來(lái)鞏固自己的學(xué)習(xí),其中低分組有57.73%,高分組有75.45%。
3.教師在高低分組學(xué)生中的作用程度不同
調(diào)查73.1%的學(xué)生課下不會(huì)向老師請(qǐng)教問(wèn)題,其中,低分組為87.9%、高分組為58.4%。低分組學(xué)生中有22.34%對(duì)教師的授課方式不滿意,這一比例在高分組只有6.29%;低分組有14.75%的學(xué)生覺(jué)得教師不熟悉操作平臺(tái)對(duì)自己的學(xué)習(xí)產(chǎn)生了影響,這一比例在高分組也有10.2%。
相比于傳統(tǒng)的教學(xué)模式,線上教學(xué)的自由度更高,重視學(xué)生個(gè)體學(xué)習(xí)的自主性。時(shí)空差異也給學(xué)校對(duì)學(xué)生的監(jiān)管、教師與學(xué)生的溝通帶來(lái)了諸多不便,可能導(dǎo)致學(xué)生的學(xué)習(xí)效果呈現(xiàn)兩極分化。為保證在線學(xué)習(xí)的質(zhì)量,授課教師應(yīng)充分考慮學(xué)生的思想行為狀態(tài),進(jìn)行個(gè)性化教學(xué)。