季秀霞 李立早
摘要:教學(xué)質(zhì)量評(píng)價(jià)是高職院校教學(xué)質(zhì)量監(jiān)控體系的重要組成部分。信息時(shí)代,借助大數(shù)據(jù)的支持構(gòu)建高職院校教學(xué)質(zhì)量評(píng)價(jià)體系是必然趨勢(shì)?;诖?,從“搜集數(shù)據(jù)、分析數(shù)據(jù)、利用數(shù)據(jù)”的角度展開研究,提出一種基于大數(shù)據(jù)的教學(xué)質(zhì)量評(píng)價(jià)PSRS模型,指出影響教學(xué)質(zhì)量的關(guān)鍵數(shù)據(jù)來源于過程分析、主體屬性、角色認(rèn)知和環(huán)境因素,并在此基礎(chǔ)上構(gòu)建了基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系。該評(píng)價(jià)體系可以對(duì)大數(shù)據(jù)進(jìn)行深度挖掘和分析,全面合理地對(duì)教學(xué)質(zhì)量進(jìn)行評(píng)價(jià)。
關(guān)鍵詞:高職院校;教學(xué)質(zhì)量評(píng)價(jià);PSRS模型;大數(shù)據(jù)
基金項(xiàng)目:江蘇省高等教育學(xué)會(huì)評(píng)估委員會(huì)重點(diǎn)資助課題“大數(shù)據(jù)在高校教學(xué)質(zhì)量評(píng)價(jià)體系中的運(yùn)用研究”(項(xiàng)目編號(hào):2018-206);江蘇省高校哲學(xué)社會(huì)科學(xué)研究項(xiàng)目“基于能力目標(biāo)矩陣的高職電子信息類綜合課程改革的研究”(項(xiàng)目編號(hào):2016SJB880051)
作者簡(jiǎn)介:季秀霞,女,南京信息職業(yè)技術(shù)學(xué)院電子信息學(xué)院副教授,博士,主要研究方向?yàn)閿?shù)據(jù)挖掘和職業(yè)教育;李立早,男,南京信息職業(yè)技術(shù)學(xué)院電子信息學(xué)院副教授,主要研究方向?yàn)楦叩嚷殬I(yè)教育。
中圖分類號(hào):G712
文獻(xiàn)標(biāo)識(shí)碼:A
文章編號(hào):1674-7747( 2020) 01-0087-06
教學(xué)質(zhì)量評(píng)價(jià)是高職院校教學(xué)質(zhì)量監(jiān)控體系的重要組成部分,客觀公正合理的教學(xué)質(zhì)量評(píng)價(jià)體系可以促使教師關(guān)注學(xué)生,更新教學(xué)觀念,改進(jìn)教學(xué)方法,提高教學(xué)水平。同時(shí),教學(xué)質(zhì)量評(píng)價(jià)也是學(xué)校全面了解教學(xué)的運(yùn)行狀態(tài)和優(yōu)化學(xué)校教務(wù)管理的重要依據(jù)。
一、高職院校教學(xué)質(zhì)量評(píng)價(jià)的現(xiàn)狀
目前,高職院校主要從學(xué)生、同行、督導(dǎo)和領(lǐng)導(dǎo)對(duì)教師的課堂教學(xué)質(zhì)量進(jìn)行評(píng)價(jià),將四個(gè)評(píng)價(jià)分?jǐn)?shù)加權(quán)平均后作為教師的教學(xué)質(zhì)量評(píng)價(jià)結(jié)果。盡管這種教學(xué)質(zhì)量評(píng)價(jià)系統(tǒng)是信息時(shí)代的產(chǎn)物,可以提高教學(xué)管理的效率,但是在實(shí)際應(yīng)用中卻存在一定的問題。由于學(xué)生全程參與教學(xué)過程,所以學(xué)生評(píng)價(jià)較全面,但學(xué)生的主觀性較強(qiáng),尤其當(dāng)教師要求較嚴(yán)、課程較難、學(xué)生成績(jī)不理想的時(shí)候,可能會(huì)出現(xiàn)不客觀、不公正的評(píng)價(jià)。有研究發(fā)現(xiàn):教師給學(xué)生的評(píng)分是影響學(xué)生評(píng)教的重要因素,教師評(píng)分的松緊對(duì)學(xué)生評(píng)教有中等或中等以上的影響[1]。由于同行對(duì)課程知識(shí)點(diǎn)和概念的理解更加準(zhǔn)確透徹,評(píng)價(jià)分?jǐn)?shù)應(yīng)該更加合理,但是礙于情面,目前同行評(píng)價(jià)幾乎流于形式。督導(dǎo)評(píng)價(jià)和領(lǐng)導(dǎo)評(píng)價(jià)關(guān)注更多的是教師的上課準(zhǔn)備情況和課堂狀態(tài)等,但由于聽課次數(shù)有限,無法全程跟蹤教學(xué)課程,用有限的幾節(jié)課認(rèn)定教師的教學(xué)素質(zhì)顯然不夠客觀全面。同時(shí),由于大多數(shù)課堂教學(xué)質(zhì)量評(píng)價(jià)結(jié)果是在期末課程結(jié)束時(shí)公布,沒有辦法對(duì)評(píng)價(jià)結(jié)果進(jìn)行及時(shí)總結(jié)和利用,無法根據(jù)評(píng)價(jià)結(jié)果對(duì)課堂教學(xué)進(jìn)行改進(jìn),所以教學(xué)質(zhì)量評(píng)價(jià)也沒有發(fā)揮“以評(píng)促教”作用。
從上述分析可以看出,高職院校的傳統(tǒng)教學(xué)質(zhì)量評(píng)價(jià)體系存在一定的主觀性與片面性。例如:評(píng)價(jià)主體相對(duì)單一、評(píng)價(jià)指標(biāo)缺乏層次、評(píng)價(jià)實(shí)施過程缺乏客觀性、評(píng)價(jià)結(jié)果缺乏有效利用等。這些問題容易使評(píng)價(jià)流于形式,脫離評(píng)價(jià)初衷。針對(duì)上述普遍存在的教學(xué)質(zhì)量評(píng)價(jià)體系的現(xiàn)狀,許多高職院校進(jìn)行了積極的、有益的改革。例如:曹潔提出一種基于AHP層次分析法的教學(xué)質(zhì)量模糊評(píng)價(jià)方式閉,從教師課前準(zhǔn)備、課堂教學(xué)規(guī)范和課后學(xué)生反饋三個(gè)環(huán)節(jié),通過數(shù)據(jù)分析來構(gòu)建教學(xué)質(zhì)量評(píng)價(jià)體系,具有一定的合理性和科學(xué)性。但是,這種評(píng)價(jià)方式僅僅是一種簡(jiǎn)單的量化行為,根據(jù)制定的評(píng)價(jià)標(biāo)準(zhǔn)進(jìn)行簡(jiǎn)單的打分和匯總,并不能準(zhǔn)確反應(yīng)教師的個(gè)人教學(xué)水平。陳以藏提出一種教考分離、以成績(jī)作為評(píng)教依據(jù)的課堂教學(xué)質(zhì)量評(píng)價(jià)體系[3]。因?yàn)橐詷?biāo)準(zhǔn)化考試成績(jī)作為教學(xué)質(zhì)量評(píng)價(jià)的標(biāo)準(zhǔn),可以有效避免傳統(tǒng)評(píng)教中因個(gè)人主觀因素出現(xiàn)的不公正現(xiàn)象,但是這種評(píng)價(jià)體系的弊端也顯而易見。其一,由于成績(jī)是唯一的評(píng)價(jià)標(biāo)準(zhǔn),所以可能導(dǎo)致應(yīng)試教育的盛行,并不利于學(xué)生其他能力的培養(yǎng)和思想道德教育;其二,由于標(biāo)準(zhǔn)化考試是在課程結(jié)束后進(jìn)行,所以評(píng)價(jià)的結(jié)果并不能發(fā)揮導(dǎo)向和激勵(lì)的作用,教與學(xué)不能形成一個(gè)良好的閉環(huán)系統(tǒng),對(duì)教學(xué)質(zhì)量的提高和學(xué)生學(xué)習(xí)能力的培養(yǎng)起不到積極作用。牛津大學(xué)認(rèn)為,討論評(píng)價(jià)結(jié)果可能是整個(gè)評(píng)價(jià)過程中最重要的一步[4],所以對(duì)教學(xué)質(zhì)量評(píng)價(jià)的結(jié)果進(jìn)行討論并及時(shí)反饋給教師和學(xué)生,教師才能根據(jù)評(píng)價(jià)的結(jié)果反思教學(xué)行為,發(fā)現(xiàn)不足,提高教學(xué)能力,學(xué)生才能根據(jù)評(píng)價(jià)的結(jié)果反思學(xué)習(xí)行為,發(fā)現(xiàn)薄弱環(huán)節(jié),改進(jìn)學(xué)習(xí)方法。
隨著大數(shù)據(jù)時(shí)代的到來,各高職院校經(jīng)過多年的信息化建設(shè),已經(jīng)形成了較好的信息技術(shù)基礎(chǔ)設(shè)施,積累了大量與教學(xué)質(zhì)量相關(guān)的數(shù)據(jù)。利用大數(shù)據(jù)可以評(píng)估教學(xué)質(zhì)量,進(jìn)行關(guān)系分析、診斷問題、預(yù)測(cè)趨勢(shì)等,同樣,利用大數(shù)據(jù)可以對(duì)已經(jīng)出現(xiàn)的問題或即將出現(xiàn)的問題進(jìn)行評(píng)判和解決[5]。通過對(duì)大數(shù)據(jù)的挖掘與分析,能夠全面、合理地對(duì)教學(xué)質(zhì)量進(jìn)行評(píng)價(jià),對(duì)影響教學(xué)質(zhì)量的關(guān)鍵因素挖掘分析,才能更好地對(duì)教學(xué)質(zhì)量進(jìn)行評(píng)估和預(yù)測(cè),從而有效提高高職院校的教學(xué)質(zhì)量。借助大數(shù)據(jù)的支持構(gòu)建高職院校教學(xué)質(zhì)量評(píng)價(jià)體系是必然趨勢(shì)。
二、基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量體系構(gòu)建思路
本文提出的基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系按照“搜集數(shù)據(jù)、分析數(shù)據(jù)、利用數(shù)據(jù)”的基本思路展開研究。首先,按照數(shù)據(jù)產(chǎn)生的主體及場(chǎng)所搜集相關(guān)的數(shù)據(jù)。其次,用聚類、數(shù)據(jù)挖掘等方法及工具,挖掘與教學(xué)質(zhì)量評(píng)價(jià)相關(guān)的數(shù)據(jù),并研究各類數(shù)據(jù)的類型及其之間的關(guān)系,運(yùn)用統(tǒng)計(jì)分析法、內(nèi)容分析法、話語分析法將碎片化的數(shù)據(jù)加以分析、整理和篩選,獲得關(guān)于教學(xué)質(zhì)量的多種規(guī)律性數(shù)據(jù)和特征。最后,構(gòu)建基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系。
基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系的具體構(gòu)建思路如圖1所示。
(一)搜集數(shù)據(jù)
建立基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系的前提是獲取有效的關(guān)于教學(xué)質(zhì)量的大數(shù)據(jù)信息。高等教育質(zhì)量評(píng)價(jià)體系的數(shù)據(jù)來源呈現(xiàn)多元化,既包括按照數(shù)據(jù)產(chǎn)生的主體生成的相關(guān)數(shù)據(jù),如學(xué)生家庭數(shù)據(jù)、師資隊(duì)伍資源、科學(xué)研究水平、人才培養(yǎng)目標(biāo)、課程設(shè)置等信息,也包括按照數(shù)據(jù)產(chǎn)生的場(chǎng)所生成的數(shù)據(jù),如課堂教學(xué)視頻、課堂討論記錄、學(xué)生圖書館打卡記錄、借閱圖書記錄、圖書館監(jiān)控視頻等信息。這里面既有以文字信息為主的結(jié)構(gòu)化數(shù)據(jù),也有以圖片信息為主的半結(jié)構(gòu)化數(shù)據(jù),更有以視頻、音頻為主的非結(jié)構(gòu)化數(shù)據(jù)。數(shù)據(jù)量大,更新速度快,每時(shí)每刻都在產(chǎn)生,數(shù)據(jù)呈現(xiàn)出大數(shù)據(jù)特有的4V特性,即海量性(Volume)、多樣性(Varietv)、高速性(Velocity)、價(jià)值性(Value),因此可以基于大數(shù)據(jù)構(gòu)建高職院校教學(xué)質(zhì)量評(píng)價(jià)體系[6]。
在搜集數(shù)據(jù)時(shí),必須深入了解高職院校教學(xué)管理的規(guī)章制度和教學(xué)活動(dòng)的各個(gè)環(huán)節(jié)和所有的場(chǎng)所,將學(xué)校的教務(wù)管理系統(tǒng)、學(xué)生管理系統(tǒng)、師資管理系統(tǒng)、科研管理系統(tǒng)、人事管理系統(tǒng)等相關(guān)數(shù)據(jù)庫有機(jī)結(jié)合在一起,建立教學(xué)質(zhì)量評(píng)價(jià)的數(shù)據(jù)采集與獲取的平臺(tái)。
(二)分析數(shù)據(jù)
對(duì)大數(shù)據(jù)進(jìn)行多維度、深層次的挖掘與科學(xué)分析.發(fā)現(xiàn)大數(shù)據(jù)背后隱含的關(guān)系與價(jià)值,有助于將高職院校教學(xué)質(zhì)量評(píng)價(jià)體系從基于小樣本數(shù)據(jù)或片段化信息的推測(cè),轉(zhuǎn)向基于全方位、全過程數(shù)據(jù)的證據(jù)性決策。將數(shù)據(jù)挖掘技術(shù)應(yīng)用在教學(xué)質(zhì)量評(píng)價(jià)系統(tǒng)中,從采集到的海量數(shù)據(jù)中提取或挖掘出對(duì)教學(xué)質(zhì)量評(píng)價(jià)有用的知識(shí),對(duì)提高管理者的決策能力和管理水平都具有深遠(yuǎn)的意義。
在分析數(shù)據(jù)時(shí),首先,采用可視化分析技術(shù)將大數(shù)據(jù)的特點(diǎn)直觀地呈現(xiàn)出來,將單一表格變?yōu)樨S富多彩的圖形模式。其次,用聚類、數(shù)據(jù)挖掘的方法,挖掘與教學(xué)質(zhì)量評(píng)價(jià)相關(guān)的數(shù)據(jù),并研究各類數(shù)據(jù)的類型及其之間的關(guān)系。最后,運(yùn)用統(tǒng)計(jì)分析法、內(nèi)容分析法、話語分析法將碎片化的數(shù)據(jù)加以分析、整理和篩選,獲得關(guān)于教學(xué)質(zhì)量的多種規(guī)律性數(shù)據(jù)和特征。
(三)利用數(shù)據(jù)
本部分以學(xué)生為中心,即以學(xué)生的學(xué)習(xí)和發(fā)展為中心,實(shí)現(xiàn)從“以教為中心”向“以學(xué)為中心”轉(zhuǎn)變,構(gòu)建基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)體系。在建立評(píng)價(jià)體系時(shí)需要設(shè)計(jì)評(píng)價(jià)指標(biāo),設(shè)計(jì)的指標(biāo)應(yīng)該簡(jiǎn)單明了、便于收集、并且具有一定的代表性,各個(gè)指標(biāo)之間應(yīng)該有一定的邏輯關(guān)系,指標(biāo)選取時(shí)的計(jì)算量度和計(jì)算方法必須統(tǒng)一,要有很強(qiáng)的現(xiàn)實(shí)可操作性和可比較性。
在利用數(shù)據(jù)時(shí),可以采用層次分析法(Analytical Hierarchv Process,AHP),將與決策相關(guān)的元素分解成目標(biāo)、準(zhǔn)則、方案等層次,在此基礎(chǔ)之上進(jìn)行定性和定量分析。
三、基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)PSRS模型
管理學(xué)中的“MARS模型”認(rèn)為,動(dòng)機(jī)(Motivation)、能力(Ability)、角色認(rèn)知(Role Perception)和環(huán)境因素(Situational Factor)是直接影響公司員工的自發(fā)行為和最終績(jī)效的四個(gè)因素。其中,動(dòng)機(jī)是影響個(gè)人自發(fā)行為方向、強(qiáng)度和持久性的內(nèi)在力量;能力是完成某項(xiàng)任務(wù)所需要的自然天賦和后天知識(shí);角色認(rèn)知是個(gè)人要有清晰的角色認(rèn)知,同時(shí)能得到關(guān)于職位工作的描述和相關(guān)培訓(xùn);環(huán)境因素是超出員工的控制,制約或促進(jìn)員工行為和績(jī)效的條件?!癕ARS模型”認(rèn)為:擁有較高的動(dòng)機(jī)和能力,又明晰角色認(rèn)知,只要環(huán)境支持他們的任務(wù)目標(biāo),員工就可以取得良好的績(jī)效。
員工行為和結(jié)果的“MARS模型”,如圖2所示。
對(duì)應(yīng)到教學(xué)質(zhì)量評(píng)價(jià)體系,教學(xué)質(zhì)量的好壞同樣取決于上述四個(gè)要素。其中,動(dòng)機(jī)和能力是決定教學(xué)質(zhì)量的主要內(nèi)部因素,動(dòng)機(jī)可以體現(xiàn)在學(xué)生的日常生活規(guī)律和教師的教研狀態(tài)數(shù)據(jù)中,即過程分析。能力可以體現(xiàn)在教師和學(xué)生的自身素質(zhì)中,即主體屬性。角色認(rèn)知和環(huán)境因素是影響教學(xué)質(zhì)量的外部因素。為此,本文建立了一個(gè)基于大數(shù)據(jù)的教學(xué)質(zhì)量評(píng)價(jià)“PSRS模型”,即影響教學(xué)質(zhì)量評(píng)價(jià)的數(shù)據(jù)主要來源于過程分析(Process Analvsis)、主體屬性(Subject properties)、角色認(rèn)知(Role Perception)和環(huán)境因素(SituationalFactor),它們共同影響著教學(xué)質(zhì)量的產(chǎn)出,即學(xué)生的績(jī)效評(píng)價(jià)。教學(xué)質(zhì)量評(píng)價(jià)“PSRS模型”如圖3所示。
(一)過程分析
“PSRS模型”中的過程分析對(duì)應(yīng)于“MARS模型”中的動(dòng)機(jī)(即努力的方向、強(qiáng)度、持續(xù)性)。作為教與學(xué)的主體,教師與學(xué)生的努力方向、工作與學(xué)習(xí)的強(qiáng)度、投入的精力以及持續(xù)性對(duì)教學(xué)質(zhì)量的績(jī)效產(chǎn)出起著決定性的因素,這些可以通過分析學(xué)生的日常生活規(guī)律和教師的授課狀態(tài)數(shù)據(jù)得到結(jié)論。學(xué)生的日常生活規(guī)律主要包括學(xué)生的課堂出勤情況、操場(chǎng)鍛煉情況、作業(yè)提交情況、圖書館打卡記錄情況等等,教師的授課狀態(tài)包括教學(xué)準(zhǔn)備、教學(xué)內(nèi)容、教學(xué)方法、教學(xué)管理等等。
(二)主體屬性
“PSRS模型”中的主體屬性對(duì)應(yīng)于“MARS模型”中的能力。由于教學(xué)質(zhì)量評(píng)價(jià)最終的主體是教師和學(xué)生,所以教師和學(xué)生的能力對(duì)最終的績(jī)效產(chǎn)出至關(guān)重要。能力包括完成某項(xiàng)任務(wù)所需要的自然天賦和后天知識(shí),這些可以從學(xué)生的性別、家庭、愛好、高考成績(jī)、專業(yè)成績(jī)等屬性,教師的性別、年齡、職稱、學(xué)歷、學(xué)位、教齡、科研業(yè)績(jī)等屬性中一窺全豹。在教與學(xué)的過程中,能力是一項(xiàng)重要的考慮因素,教師應(yīng)該根據(jù)學(xué)生的能力因材施教,增強(qiáng)其績(jī)效表現(xiàn)。
(三)角色認(rèn)知
“PSRS模型”中的角色認(rèn)知對(duì)應(yīng)于“MARS模型”中的角色認(rèn)知。提高教學(xué)質(zhì)量不僅僅包括必須的動(dòng)機(jī)和能力,還包括教師和學(xué)生對(duì)各自“教”與“學(xué)”任務(wù)重要性的了解,以及自身需要付出怎樣的努力才能完成任務(wù),即教師和學(xué)生必須要有清晰的角色認(rèn)知。增強(qiáng)角色認(rèn)知最基本的方式就是讓教師和學(xué)生得到提高教學(xué)質(zhì)量和學(xué)習(xí)質(zhì)量的相關(guān)培訓(xùn)。
(四)環(huán)境因素
“PSRS模型”中的環(huán)境因素對(duì)應(yīng)于“MARS模型”中的環(huán)境因素。影響教學(xué)質(zhì)量的環(huán)境因素包括超出教師和學(xué)生的控制,制約或促進(jìn)教學(xué)質(zhì)量績(jī)效的條件,如學(xué)校的辦學(xué)經(jīng)費(fèi)投入、實(shí)驗(yàn)室硬件設(shè)施、實(shí)訓(xùn)基地建設(shè)、圖書館圖書資源和課堂教學(xué)條件等等。
(五)績(jī)效評(píng)價(jià)
從“PSRS模型”可知:教師和學(xué)生作為“教”與“學(xué)”的主體,若有較高的學(xué)習(xí)(教學(xué))動(dòng)機(jī)和學(xué)習(xí)(教學(xué))能力,對(duì)自身有明確的角色認(rèn)知,并能得到關(guān)于角色的必要培訓(xùn),學(xué)校提供相應(yīng)的環(huán)境支持,教學(xué)質(zhì)量就可以取得良好的績(jī)效。教學(xué)質(zhì)量評(píng)價(jià)最終的目標(biāo)是學(xué)生獲得學(xué)習(xí)的能力、創(chuàng)新的能力、可持續(xù)發(fā)展的能力等等,具體可以體現(xiàn)在學(xué)生的課程成績(jī)、技能競(jìng)賽表現(xiàn)、畢業(yè)設(shè)計(jì)、創(chuàng)新創(chuàng)業(yè)項(xiàng)目、實(shí)驗(yàn)實(shí)踐能力等方面。
四、基于大數(shù)據(jù)的課堂教學(xué)質(zhì)量評(píng)價(jià)
與管理學(xué)中的“MARS模型”一樣,基于大數(shù)據(jù)的高職院校教學(xué)質(zhì)量評(píng)價(jià)“PSRS模型”也是一個(gè)有效的診斷工具,既可以考評(píng)教師的課堂教學(xué)質(zhì)量情況,也可以通過學(xué)生的日常生活規(guī)律、績(jī)效產(chǎn)出等信息預(yù)測(cè)學(xué)生未來的發(fā)展?fàn)顩r。下面以教師的課堂教學(xué)質(zhì)量評(píng)價(jià)為例進(jìn)行簡(jiǎn)單介紹。