劉麗芳 騫憲忠
(1.山西醫(yī)科大學(xué)教務(wù)處教學(xué)質(zhì)量評(píng)估中心,太原 030001;2.山西醫(yī)科大學(xué)網(wǎng)絡(luò)中心,太原 030001)
隨著我國經(jīng)濟(jì)、社會(huì)、高等教育的發(fā)展轉(zhuǎn)型,大數(shù)據(jù)技術(shù)及信息技術(shù)的快速發(fā)展,以學(xué)校自我評(píng)估、院校評(píng)估、專業(yè)認(rèn)證與評(píng)估、國際評(píng)估、教學(xué)基本狀態(tài)常態(tài)監(jiān)測為主的 “五位一體” 中國特色評(píng)估體系正在逐漸完善中,其中,以大數(shù)據(jù)驅(qū)動(dòng)的監(jiān)測評(píng)估在高等教育質(zhì)量評(píng)估中發(fā)揮的作用越來越重要。國家層面、省級(jí)層面的各類評(píng)估及專業(yè)認(rèn)證均將基本狀態(tài)數(shù)據(jù)作為最重要的參考依據(jù),各高校則將基本狀態(tài)數(shù)據(jù)用于本科教學(xué)年度質(zhì)量報(bào)告撰寫,也依據(jù)年度基本狀態(tài)數(shù)據(jù)分析報(bào)告進(jìn)行自我檢查與反思,從而發(fā)現(xiàn)影響教育教學(xué)發(fā)展的重要問題,以便及時(shí)改進(jìn)。高等醫(yī)學(xué)院校自我評(píng)估作為內(nèi)部質(zhì)量保障體系非常重要的組成部分也須適應(yīng)國家質(zhì)量評(píng)估的新理念和新方法,建立起適合醫(yī)學(xué)院校發(fā)展的、符合醫(yī)學(xué)教育特殊規(guī)律的內(nèi)部教學(xué)質(zhì)量監(jiān)測平臺(tái)與數(shù)據(jù)分析系統(tǒng),充分加強(qiáng)對(duì)日常教育教學(xué)的監(jiān)測,從零散、孤立、片面的數(shù)據(jù)采集與評(píng)估模式轉(zhuǎn)變?yōu)橄到y(tǒng)、關(guān)聯(lián)、全面的教育教學(xué)過程數(shù)據(jù)采集與分析,一方面加強(qiáng)了日常教學(xué)質(zhì)量監(jiān)控的全面性、及時(shí)性、科學(xué)性和有效性,另一方面也為學(xué)校進(jìn)行辦學(xué)質(zhì)量評(píng)估、院校評(píng)估、專業(yè)評(píng)估、課程評(píng)估及學(xué)生學(xué)業(yè)評(píng)估等提供翔實(shí)、豐富、有效、準(zhǔn)確、可定量分析的基礎(chǔ)數(shù)據(jù)。
監(jiān)測評(píng)估是高等教育評(píng)價(jià)研究的前沿課題,是適應(yīng)新時(shí)代教育教學(xué)評(píng)估發(fā)展的必要手段。所謂“監(jiān)測評(píng)估”,是一種數(shù)據(jù)驅(qū)動(dòng)的、支持持續(xù)改進(jìn)和多元判斷的評(píng)估新類型[1],是以現(xiàn)代信息技術(shù)和大數(shù)據(jù)技術(shù)為基礎(chǔ),強(qiáng)調(diào)數(shù)據(jù)的基礎(chǔ)作用,減少依賴專家經(jīng)驗(yàn)的傳統(tǒng)做法,以追求持續(xù)改進(jìn)為根本目標(biāo),為多元利益方進(jìn)行價(jià)值判斷和科學(xué)決策提供可靠依據(jù),是當(dāng)代教育評(píng)估的有效手段之一。監(jiān)測評(píng)估對(duì)高等教育教學(xué)相關(guān)的諸多狀態(tài)信息進(jìn)行持續(xù)收集、動(dòng)態(tài)跟蹤、客觀描述、及時(shí)反饋 、深入挖掘 、系統(tǒng)分析,以便直觀呈現(xiàn)高等教育運(yùn)行狀態(tài)或發(fā)展趨勢的過程[2]。
監(jiān)測評(píng)估的典型特征有3個(gè):一是常態(tài)化,通過實(shí)時(shí)采集教育教學(xué)過程中的關(guān)鍵信息來直觀呈現(xiàn)學(xué)校教育教學(xué)的基本狀態(tài);二是系統(tǒng)性,整合校內(nèi)外各部門數(shù)據(jù)庫,對(duì)接相關(guān)的人事、教務(wù)、學(xué)籍等管理系統(tǒng),甚至校外第三方評(píng)估機(jī)構(gòu)的數(shù)據(jù)采集平臺(tái),充分發(fā)揮所有校內(nèi)外利益方的積極作用,便于學(xué)??焖?、便捷的獲取所需要的教學(xué)相關(guān)信息;三是多元性,體現(xiàn)在監(jiān)測對(duì)象多元化和監(jiān)測主體的多元化,監(jiān)測評(píng)估的對(duì)象是學(xué)校整個(gè)系統(tǒng),采集的信息包括人、財(cái)、物3個(gè)資源及教學(xué)過程中產(chǎn)生的基本信息,涉及校內(nèi)外各相關(guān)單位,監(jiān)測范圍擴(kuò)大,采集信息更廣泛。同時(shí),作為監(jiān)測主體的各利益方均可參與到評(píng)估中,并利用采集到的信息進(jìn)行管理與決策、反饋和改進(jìn)。
國家將教學(xué)質(zhì)量常態(tài)監(jiān)測作為高等教育評(píng)估的重要手段之一,醫(yī)學(xué)院校也須建立校內(nèi)質(zhì)量監(jiān)測數(shù)據(jù)庫,既滿足國家對(duì)高等學(xué)校數(shù)據(jù)采集的需求,又滿足學(xué)校自我評(píng)估、質(zhì)量監(jiān)控及醫(yī)學(xué)教育研究的需要。
《國家中長期教育改革和發(fā)展規(guī)劃綱要(2010-2020年)》中多次提到“監(jiān)測評(píng)估”,明確提出要“完善監(jiān)測評(píng)估體系,定期發(fā)布監(jiān)測評(píng)估報(bào)告”;2011 年頒布的《教育部關(guān)于普通高等學(xué)校本科教學(xué)評(píng)估工作的意見》明確將“教學(xué)基本狀態(tài)數(shù)據(jù)常態(tài)監(jiān)測”作為一項(xiàng)重要的內(nèi)容專門提出,并要求“高等學(xué)校要充分利用信息技術(shù),采集反映教學(xué)狀態(tài)的基本數(shù)據(jù),建立高等學(xué)校本科教學(xué)基本狀態(tài)數(shù)據(jù)庫”;2014年出臺(tái)的《深化教育督導(dǎo)改革轉(zhuǎn)變教育管理方式的意見》,強(qiáng)調(diào)評(píng)估監(jiān)測是三位一體教育督導(dǎo)體系之一。作為高等教育重要組成部分的高等醫(yī)學(xué)院校應(yīng)充分重視質(zhì)量監(jiān)測評(píng)估的重要作用,及時(shí)根據(jù)醫(yī)學(xué)教育的特殊規(guī)律及學(xué)校發(fā)展實(shí)際建立校內(nèi)教學(xué)基本狀態(tài)數(shù)據(jù)監(jiān)測平臺(tái),充分對(duì)接國家高等教育數(shù)據(jù)采集平臺(tái)和要求,對(duì)數(shù)據(jù)庫數(shù)據(jù)及時(shí)更新,分析教學(xué)基本狀況,準(zhǔn)確有效采集相關(guān)信息,為我國高等教育提供基礎(chǔ)數(shù)據(jù)支持。
傳統(tǒng)的校內(nèi)教學(xué)質(zhì)量監(jiān)控主要依據(jù)教學(xué)管理和部分有限的質(zhì)量監(jiān)控手段來進(jìn)行,如教學(xué)督導(dǎo)、教學(xué)檢查、評(píng)教評(píng)學(xué)等,數(shù)據(jù)收集費(fèi)時(shí)、費(fèi)力,采集的信息多數(shù)為抽樣采集和直接觀察為主,獲取的信息不完整、時(shí)效性不強(qiáng),許多數(shù)據(jù)孤立地存在于校內(nèi)校外各單位,能夠表現(xiàn)教學(xué)過程的數(shù)據(jù)更是難以全面采集,質(zhì)量監(jiān)控閉合循環(huán)無法有效形成,影響學(xué)校教學(xué)質(zhì)量的監(jiān)控與評(píng)價(jià)的有效性。醫(yī)學(xué)院校大量教學(xué)基地是臨床教學(xué)的主陣地,對(duì)這些基地的教學(xué)質(zhì)量監(jiān)控學(xué)校往往難以有效地進(jìn)行,尤其是醫(yī)學(xué)教育同質(zhì)化的要求必定需要醫(yī)學(xué)院校加強(qiáng)對(duì)教學(xué)基地的教學(xué)質(zhì)量監(jiān)控。以大數(shù)據(jù)技術(shù)和信息技術(shù)為基礎(chǔ)的質(zhì)量監(jiān)測平臺(tái)可以實(shí)現(xiàn)數(shù)據(jù)的實(shí)時(shí)采集,對(duì)監(jiān)控的主體來說,不僅校內(nèi)利益方可通過便捷的信息技術(shù)手段參與到質(zhì)量監(jiān)控與評(píng)價(jià)中,而且既是臨床教學(xué)主陣地也是用人單位的教學(xué)基地也完全可以參與到教學(xué)質(zhì)量監(jiān)控與評(píng)價(jià)中。獲取的大量數(shù)據(jù)可以通過平臺(tái)系統(tǒng)進(jìn)行自動(dòng)分析與處理,既可以滿足校、院、教研室等不同層級(jí)教學(xué)質(zhì)量監(jiān)控與評(píng)價(jià)的需要,也可滿足校內(nèi)外不同利益方的數(shù)據(jù)采集需求與分析。
目前醫(yī)學(xué)院校內(nèi)部的院校評(píng)估、專業(yè)評(píng)估、課程評(píng)估等自我評(píng)估多數(shù)依靠的是傳統(tǒng)的撰寫報(bào)告的形式,報(bào)告中所引用的數(shù)據(jù)來源不同、采集方式不同,信息不準(zhǔn)確現(xiàn)象時(shí)有發(fā)生,對(duì)于許多教學(xué)問題在客觀定性描述時(shí),往往缺乏定量的數(shù)據(jù)分析,縱向的對(duì)比評(píng)估與研究更無法深入。質(zhì)量監(jiān)測平臺(tái)通過不同類型、不同主體、不同層次的數(shù)據(jù)采集,既能為院系做學(xué)生學(xué)業(yè)評(píng)價(jià)、課程評(píng)估、專業(yè)評(píng)估等提供有力的證據(jù),也可以為學(xué)校對(duì)各專業(yè)的辦學(xué)情況,對(duì)學(xué)生的學(xué)習(xí)進(jìn)展情況進(jìn)行全面的診斷與分析,提供可視化的、個(gè)性化的評(píng)估分析報(bào)告,還可以對(duì)校外教學(xué)基地、畢業(yè)生質(zhì)量等進(jìn)行有效的評(píng)估。
醫(yī)學(xué)教育教學(xué)研究與改革創(chuàng)新是提高學(xué)校人才培養(yǎng)質(zhì)量的重要保障,醫(yī)學(xué)教育研究的功能從研究到提供服務(wù)、評(píng)價(jià)等,發(fā)揮著多元作用。研究課題首先是幫助教師發(fā)現(xiàn)本門課程,本專業(yè)的問題,立題研究,解決問題[4]。但目前醫(yī)學(xué)院校教育教學(xué)研究存在課題關(guān)聯(lián)性不強(qiáng)、涉及面狹窄、縱向的對(duì)比研究相對(duì)較少,導(dǎo)致發(fā)表的研究成果影響力小、有效性不強(qiáng),其中最重要的一個(gè)原因就是缺乏詳實(shí)、全面的數(shù)據(jù)支撐。學(xué)校各級(jí)教學(xué)管理部門和教師在進(jìn)行教育研究時(shí)往往需要自行搜集相關(guān)的數(shù)據(jù)或自行設(shè)計(jì)量表進(jìn)行采集,收集到的信息量小、不夠全面,而統(tǒng)一系統(tǒng)的數(shù)據(jù)采集與分享平臺(tái)既可以將學(xué)校教育教學(xué)發(fā)展的橫向狀態(tài)清晰的呈現(xiàn)出來,更能有效地保存歷年采集的各類數(shù)據(jù),為學(xué)校進(jìn)行縱向比較研究或各種進(jìn)展發(fā)展研究提供可靠的基礎(chǔ)數(shù)據(jù),從而保證研究與改革的科學(xué)性和有效性。
高等醫(yī)學(xué)院校建立監(jiān)測評(píng)估新模式無論是外部教育評(píng)價(jià)的要求還是內(nèi)部質(zhì)量保障的需要都是必然趨勢,其實(shí)現(xiàn)路徑主要通過監(jiān)測評(píng)估的組織模式、數(shù)據(jù)采集與分析及各種保障機(jī)制才能有效實(shí)現(xiàn)。
高校旨在促進(jìn)自身改進(jìn)提升的自我驅(qū)動(dòng)型監(jiān)測評(píng)估活動(dòng)逐漸進(jìn)入大學(xué)辦學(xué)的全過程、全方位和多層面[3]。高等醫(yī)學(xué)院校監(jiān)測評(píng)估的統(tǒng)一組織機(jī)構(gòu)仍然是各學(xué)校建立的評(píng)估中心或數(shù)據(jù)中心,通過現(xiàn)代信息技術(shù)手段整合校內(nèi)各職能部門、院系,甚至校外教學(xué)基地的數(shù)據(jù)管理系統(tǒng),連通信息孤島,形成互通互聯(lián)、開放共享的采集平臺(tái)。作為校內(nèi)利益方的教師、學(xué)生、管理人員和作為校外利益方的畢業(yè)生、用人單位等均是評(píng)價(jià)主體,對(duì)教育教學(xué)全過程甚至畢業(yè)后教育均進(jìn)行實(shí)時(shí)監(jiān)測,廣泛收集數(shù)據(jù),定時(shí)或不定時(shí)根據(jù)不同利益方或不同工作需要對(duì)數(shù)據(jù)進(jìn)行統(tǒng)計(jì)、分析,判斷和預(yù)警等,幫助醫(yī)學(xué)院校及時(shí)準(zhǔn)確地把握教育教學(xué)基本狀態(tài),不斷持續(xù)改進(jìn),從而提高人才培養(yǎng)質(zhì)量。
高等醫(yī)學(xué)院校依據(jù)監(jiān)測評(píng)估的具體目標(biāo),制定出相應(yīng)的實(shí)施方案,學(xué)校評(píng)估中心或數(shù)據(jù)中心根據(jù)需要分類確定采集內(nèi)容,制訂指標(biāo)體系,建立統(tǒng)一的數(shù)據(jù)元和數(shù)據(jù)集,有關(guān)的核心數(shù)據(jù)主要采用”誰主管,誰負(fù)責(zé)“的采集辦法,尤其是涉及學(xué)生、教師、課程、教學(xué)基地等有關(guān)教育教學(xué)質(zhì)量的基本信息要做到及時(shí)更新。我校在2016年建設(shè)了“教學(xué)質(zhì)量中心”數(shù)據(jù)采集與分析平臺(tái),涉及到學(xué)生、教師、課程等基本信息均由相關(guān)管理部門統(tǒng)一采集,數(shù)據(jù)匯總后由教學(xué)質(zhì)量評(píng)估中心統(tǒng)一進(jìn)行分析與處理,最后根據(jù)處理結(jié)果撰寫數(shù)據(jù)分析報(bào)告,及時(shí)向相關(guān)部門和學(xué)校反饋,為教學(xué)質(zhì)量監(jiān)控、評(píng)估、預(yù)警等提供有力的依據(jù),但是目前通過教師和學(xué)生進(jìn)行實(shí)時(shí)動(dòng)態(tài)采集教學(xué)過程中影響教學(xué)質(zhì)量的信息,如學(xué)生學(xué)習(xí)效果,進(jìn)入臨床見習(xí)、實(shí)習(xí)階段的教學(xué)質(zhì)量信息等學(xué)校還未能實(shí)現(xiàn)全面有效地采集,對(duì)數(shù)據(jù)進(jìn)行有效分析處理及可視化等技術(shù)和手段還需不斷改進(jìn)。
監(jiān)測評(píng)估作為一種新的評(píng)估模式,要想有效落實(shí),必須有一系列的具體實(shí)施機(jī)制做保障。數(shù)據(jù)采集是監(jiān)測評(píng)估的基礎(chǔ),醫(yī)學(xué)院校要建立校內(nèi)數(shù)據(jù)采集相關(guān)制度,協(xié)調(diào)好校外教學(xué)基地、用人單位等,保證數(shù)據(jù)來源的全面性、可靠性。建立數(shù)據(jù)開放共享與風(fēng)險(xiǎn)防范機(jī)制,分層分類設(shè)置權(quán)限與管理,既能避免信息孤島現(xiàn)象的存在,減少資源重復(fù)投入,工作重復(fù)進(jìn)行,也可以加大各評(píng)估主體對(duì)信息的使用率,同時(shí)建立信息共享帶來的安全與風(fēng)險(xiǎn)防范機(jī)制非常必要。結(jié)合信息公開要求,定時(shí)進(jìn)行各種專項(xiàng)數(shù)據(jù)分析報(bào)告的公開發(fā)布,以滿足所有利益方的多樣化需要。評(píng)估預(yù)警機(jī)制的建立是保障學(xué)校及時(shí)處理問題,不斷反思,持續(xù)改進(jìn)的重要保證,要盡快建立數(shù)據(jù)預(yù)警模型,針對(duì)關(guān)鍵狀態(tài)要素選定一組變量,建立預(yù)警標(biāo)準(zhǔn),發(fā)現(xiàn)超出警戒范圍的情況應(yīng)及時(shí)反饋[1],以便學(xué)校及時(shí)進(jìn)行處理與改進(jìn)。
高等教育質(zhì)量是永恒的話題,是醫(yī)學(xué)院校賴以生存和發(fā)展的根本。作為高等教育質(zhì)量保障的有效手段,評(píng)估與監(jiān)測的相互促進(jìn)與融合具有不可替代的促進(jìn)和約束效應(yīng)[5]。監(jiān)測評(píng)估作為教育評(píng)估領(lǐng)域的新生事物,將是各醫(yī)學(xué)院校教學(xué)質(zhì)量評(píng)估保障體系建設(shè)的重要內(nèi)容。隨著國家醫(yī)學(xué)教育標(biāo)準(zhǔn)的出臺(tái),醫(yī)學(xué)院校必須依據(jù)國家標(biāo)準(zhǔn)制訂和完善相應(yīng)的校內(nèi)教育教學(xué)質(zhì)量標(biāo)準(zhǔn),將各類標(biāo)準(zhǔn)作為學(xué)校教學(xué)質(zhì)量評(píng)估的依據(jù),分級(jí)分類進(jìn)行監(jiān)測評(píng)估,真正形成促進(jìn)高等醫(yī)學(xué)院校持續(xù)發(fā)展和人才培養(yǎng)質(zhì)量持續(xù)提高的良性閉合式動(dòng)態(tài)監(jiān)測評(píng)估體系。