劉婷 王應密

【摘?要】大數(shù)據(jù)為高等教育改革與創(chuàng)新提供了前所未有的機遇，應用教育數(shù)據(jù)挖掘和學習分析的技術可以全面及時地掌握高校成人教育校外合作單位的辦學狀況，提升質(zhì)量評估工作的科學性和有效性。要達到這個目的，高校需要建設網(wǎng)絡教育綜合服務平臺;研究制定科學的評估指標;構建在線評估與現(xiàn)場督導相結合、實時抽查與階段性評估互補、內(nèi)外部評估并行的辦學質(zhì)量評估保障體系。

【關鍵詞】成人網(wǎng)絡教育;校外合作單位;辦學質(zhì)量評估

【中圖分類號】G72;G434

【文獻標識碼】A

【文章編號】1001-8794（2019）04-0076-05

大數(shù)據(jù)時代的到來給高等教育改革與創(chuàng)新提供了前所未有的大好機遇，大數(shù)據(jù)的思維和理念可以為優(yōu)化教育管理、創(chuàng)新教學模式、提升教育測量與評價水平提供依據(jù)和支撐。近年來，成人網(wǎng)絡教育在辦學過程中積累了大量的數(shù)據(jù)，如何對這些數(shù)據(jù)進行深度挖掘和分析，從而進一步優(yōu)化成人網(wǎng)絡教育校外合作單位（以下簡稱校外合作單位）的辦學質(zhì)量評估工作，這是一個值得深入探討的議題。

一、校外合作單位辦學質(zhì)量評估所面臨的困境

為了強化規(guī)范管理，高校繼續(xù)教育部門一般都會建立一套專門的校外合作單位辦學質(zhì)量評估體系。這套評估體系一般包括準入考核、教學過程監(jiān)督以及綜合性辦學質(zhì)量評估三個組成部分。

準入考核主要是設點評估。由高校繼續(xù)教育管理部門根據(jù)設立的評估指標體系組織專人到現(xiàn)場對校外合作單位進行評估，主要是對辦學資質(zhì)，辦學軟、硬件條件，尤其是擬設專業(yè)所需的師資條件、教學條件、實習條件等重點考察。

教學過程監(jiān)督一般分三種形式：教學督導員對校外合作單位進行日常的教學督導工作，重點對面授課程進行日常檢查;采用校外合作單位自查與檢查小組現(xiàn)場檢查相結合的方式，對校外合作單位辦學質(zhì)量進行階段性評估，一般在期中進行;對校外合作單位整個學期的教學管理完成情況進行總結性評估。

綜合性辦學質(zhì)量評估是對校外合作單位辦學質(zhì)量的一次綜合性評定，一般2—3年為一個評估周期。

評估機制是校外合作單位規(guī)范辦學的有力保障，也是主辦高校履行指導和監(jiān)督責任的有效途徑。但當前的校外合作單位辦學質(zhì)量評估卻存在諸多問題：

（一）評估指標主要集中在辦學基本條件，對教學過程關注不夠

當前，合作單位辦學質(zhì)量評估工作的一個突出特點就是過于注重對辦學的軟硬件條件進行考察，尤其集中在辦學場地、人員配置、師資隊伍等方面（參見表1）。這些辦學基本條件固然是開展教學的物質(zhì)基礎，但對于整個成人網(wǎng)絡教育而言，它們也只是提供了開展教學的基本條件，而教學工作開展狀況如何，這些物質(zhì)條件在教學中應用的情況怎樣，這些直接決定著辦學質(zhì)量的關鍵性因素，卻都未能在評估指標體系中得到充分體現(xiàn)。盡管在日常教學督導中，督導員會對教學過程進行考察，但一方面合作單位數(shù)量較多，分布零散，少量的督導員很難及時跟蹤教學過程;另一方面，督導員對教學過程的評價具有較大的主觀性和隨意性，而且僅憑一兩次的課堂檢查也很難對整個教學工作給出相對客觀的評估。

（二）只注重學生整體狀況的評估，忽視了個性化發(fā)展需求

無論日常教學過程監(jiān)督還是階段性綜合辦學質(zhì)量評估，所考察的重點都是合作單位發(fā)展的整體狀況，包括對課堂教學實施、教學效果、學生學習成效等方面評價都是如此。這與當前高等教育領域中一再強調(diào)的“以生為本”的人才培養(yǎng)理念明顯不符。這種評價方式消弭了學生個體之間學習能力與學習興趣的差異，難以促進有效學習的發(fā)生，更不利于個性化自適應學習方式的推行。再加上現(xiàn)行網(wǎng)絡教育學習平臺智能化程度低、數(shù)據(jù)挖掘“表層化”等問題，使傳統(tǒng)的辦學質(zhì)量評估方式很難滿足學生個性化發(fā)展目標的實現(xiàn)，這也導致“因材施教”“個性化教學”等先進的教學理念難以在合作單位得到落實。

（三）評估對日常教學缺乏有效的引導作用

眾所周知，校外合作單位辦學質(zhì)量評估的目的是為了保證校外合作單位的辦學水平，提升其人才培養(yǎng)質(zhì)量，這顯然離不開對日常教學工作的關注。但是，當前的辦學質(zhì)量評估指標體系卻很少把教學過程納入考核范圍，而且，在評估實踐過程中，評估人員也很少深入教學過程中對教師教的行為和學生學的行為進行專門的分析和評價，日常的教學督導也不過是檢查一下教學秩序和基本的授課情況而已。這樣一來，評估結果對日常教學的影響就可想而知了。這顯然違背了對校外合作單位辦學質(zhì)量開展評估的初衷。

（四）評估手段單一

目前，各省市所開展的校外合作單位抽檢以及主辦高校自行組織的校外合作單位評估，基本都是采取聽取自檢匯報、實地察看辦學場所和設備設施、查閱文檔資料、召開座談會、專家組集中評議等方式。這些評估方式有它的優(yōu)點，如時間集中，評估內(nèi)容較為全面，能短時間內(nèi)了解辦學單位的詳細情況。但其不足也非常明顯，如：辦學是一個動態(tài)變化的過程，在某一個確定的較短時間里全面綜合考察辦學單位近幾年的辦學情況，難度很大;工作量較大，主辦高校往往有幾十個甚至上百個校外合作單位，組織專家逐個進行實地考察、查閱資料、召開座談會、聽取匯報，要花費很多的人力物力;對辦學單位而言，要在短時間內(nèi)集中組織迎評工作，一方面會影響正常的教學秩序，另一方面，臨時拼湊材料、應付評估的情況屢見不鮮。

二、大數(shù)據(jù)分析技術與校外合作單位辦學質(zhì)量評估

大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)相比，具有非結構化、分布式、數(shù)量巨大、數(shù)據(jù)分析由專家層轉變?yōu)橛脩魧?、大量采用可視化展示等特點，而這些特點恰好適應了當前學習方式逐漸向個性化和人性化轉變的需要。當前，大數(shù)據(jù)在教育管理中的應用主要有兩大領域：教育數(shù)據(jù)挖掘（Educational Data Mining，簡稱EDM）和學習分析技術（Learning Analytics，簡稱LA）。[1]

（一）教育數(shù)據(jù)挖掘

教育數(shù)據(jù)挖掘的內(nèi)涵是要對學習行為和學習過程進行量化、分析和建模，其目的是利用統(tǒng)計學、機器學習和數(shù)據(jù)挖掘等方法來分析教與學過程中所產(chǎn)生的大量數(shù)據(jù)。[2]其基本工作原理可以用。??由流程圖可以發(fā)現(xiàn)，教育數(shù)據(jù)挖掘主要包含四個主要環(huán)節(jié)：目標設定、數(shù)據(jù)處理、建立模型、模型修正。

1.目標設定

要開展教育數(shù)據(jù)挖掘，就必然有一定的目標，這是開展教育數(shù)據(jù)挖掘的前提，設定明確的數(shù)據(jù)挖掘目標，才能更好地依據(jù)特定目標選擇和準備數(shù)據(jù)，建立分析模型。

2.數(shù)據(jù)處理

這是整個教育數(shù)據(jù)挖掘的核心環(huán)節(jié)，其目的是通過對數(shù)據(jù)實施過濾、篩選、聚類等技術操作，實現(xiàn)原始數(shù)據(jù)與輸入標準的一致性，它包含四個緊密聯(lián)系的環(huán)節(jié)：

（1）數(shù)據(jù)過濾，從雜亂的數(shù)據(jù)源中篩選出符合教育分析的數(shù)據(jù);

（2）數(shù)據(jù)集成，把來自各子數(shù)據(jù)庫（教師管理數(shù)據(jù)庫、教學數(shù)據(jù)庫、學生學習數(shù)據(jù)庫、教學管理數(shù)據(jù)庫等）的數(shù)據(jù)集成、合并到單一的某一教育主題數(shù)據(jù)庫，并進行數(shù)據(jù)差異調(diào)節(jié)，確保原始數(shù)據(jù)與輸入標準一致;

（3）數(shù)據(jù)分析，對整理后的數(shù)據(jù)開展初步分析，篩選出對數(shù)據(jù)輸出結果影響較大的關鍵字段（數(shù)據(jù)類別），根據(jù)影響作用大小排序;

（4）數(shù)據(jù)準備，明確模型變量，轉換變量，完成數(shù)據(jù)的篩選與析出。

3.建立模型

根據(jù)設定的教育分析目標，在多個可供選擇的模型中找出最佳模型，這個過程可能需要反復多次才能完成，中間可以根據(jù)最終信息呈現(xiàn)的需要調(diào)整數(shù)據(jù)過濾與篩選的標準。

4.模型修正

對數(shù)據(jù)挖掘的質(zhì)量進行評定，好的模型在隨機數(shù)據(jù)的條件下就能得到比較理想的結果，反之，則需要修正原有模型。

（二）學習分析技術

學習分析技術是指利用已有的模型來認識、理解新的學習行為和過程，也就是西蒙（Siemens）教授所說的“關于學習者以及他們的學習環(huán)境的數(shù)據(jù)測量、收集、分析和匯總呈現(xiàn)，其目的是理解和優(yōu)化學習以及學習情境”。[3]由此看來，教育數(shù)據(jù)挖掘是實施學習分析技術的前提和基礎，通過有效的學習分析技術，我們可以監(jiān)測和預測學生的學習情況，及時發(fā)現(xiàn)潛在問題，并據(jù)此作出人為干預，以避免學生在學習中產(chǎn)生風險。

對于校外合作單位辦學質(zhì)量評估而言，通過全面跟蹤學生的學習行為、學習過程、師生互動情況以及教學資源使用情況，微觀持續(xù)性地采集鮮活數(shù)據(jù)，然后運用教育數(shù)據(jù)挖掘、學習分析和可視化數(shù)據(jù)分析等技術對校外合作單位的各種教學信息、軟硬件投入與使用信息以及辦學管理信息等進行綜合處理，就可以突破傳統(tǒng)經(jīng)驗式評估的弊端，更為全面及時地掌握校外合作單位的辦學狀況，強化質(zhì)量評估工作的科學性和有效性。同時，如果有穩(wěn)定的大數(shù)據(jù)源作為支撐，辦學質(zhì)量評估就可以開展得更為深入和細致。例如，通過分析不同學習因素的內(nèi)在特點與聯(lián)系，就可以掌握學生學習和教師教學的全過程。這樣一來，我們不僅可以全面客觀地評價學生的學習效果和教師的教學質(zhì)量，而且可以分析影響學習效果和教學質(zhì)量的因素，有針對性地提供改進教學質(zhì)量的評估建議，從而強化教育管理和質(zhì)量評估的針對性與科學性。

三、校外合作單位辦學質(zhì)量評估改革路徑

校外合作單位辦學質(zhì)量評估是強化校外合作單位辦學管理的重要環(huán)節(jié)，通過對教育大數(shù)據(jù)的挖掘與分析，可以改變過去主要依賴現(xiàn)場定期督導評估來保障校外合作單位辦學質(zhì)量的做法，逐步建立遠程評估與現(xiàn)場評估相結合、內(nèi)部評估與外部評估相呼應、隨時抽查與階段檢查并舉的科學高效的校外合作單位辦學質(zhì)量評估體系。

從教育數(shù)據(jù)挖掘的基本流程可知，基于大數(shù)據(jù)分析的校外合作單位辦學質(zhì)量評估主要有如下環(huán)節(jié)：評估目標制定、數(shù)據(jù)源遴選、辦學綜合數(shù)據(jù)處理、評估標準構建、評估標準修正、評估結果呈現(xiàn)等。由此，我們可以構建基于大數(shù)據(jù)分析的校外合作單位辦學質(zhì)量評估模型。

在實施校外合作單位辦學質(zhì)量評估時，首先需要制定評估的目標，并對評估目標進行精確的定義，明確評估目的與要求;接著根據(jù)評估的具體要求，從成人網(wǎng)絡教育運行數(shù)據(jù)庫中抽取涉及評估指標的數(shù)據(jù)（這些數(shù)據(jù)平時存放在各個數(shù)據(jù)庫中）;然后依據(jù)挖掘算法及預先開發(fā)的數(shù)據(jù)處理模型對相關數(shù)據(jù)進行挖掘與分析;再接下來就會對數(shù)據(jù)挖掘的結果進行評價，判斷其能否實現(xiàn)評估的目標與要求，如果無法實現(xiàn)，則回頭重新收集數(shù)據(jù)，當然，這時就可能會涉及到重新修正評估指標及因子的設定、數(shù)據(jù)挖掘的算法與模型，直至呈現(xiàn)的最終結果達到評估目標的要求（即，具體應用該模型評估某一單位時，評估結果與該單位的真實情況的吻合度高，評估有效，可信）。??對于成人網(wǎng)絡教育主辦高校而言，建立這種新型的校外合作單位辦學質(zhì)量評估體系，需要重點做好以下幾個方面的工作：

（一）開發(fā)建設新型的網(wǎng)絡教育綜合服務平臺

先進的高智能化網(wǎng)絡教育綜合服務平臺對建立更加科學化的校外合作單位辦學質(zhì)量評估體系至關重要。這個平臺不僅為學生提供自適應性的學習內(nèi)容，還全程追蹤學生學習軌跡，實時記錄教師開展教學的信息和師生互動信息，并及時更新校外合作單位的教學管理信息。而且，平臺還應具有一定的開放性，校外合作單位可以隨時通過信息輸入的方式更新調(diào)整后的辦學條件信息。??從校外合作單位辦學質(zhì)量評估工作的角度而言，綜合服務平臺應建立以下幾個常態(tài)數(shù)據(jù)庫：學生學習狀態(tài)數(shù)據(jù)庫、教師教學狀況數(shù)據(jù)庫、師生交流互動數(shù)據(jù)庫、教學管理狀況數(shù)據(jù)庫、合作單位辦學條件數(shù)據(jù)庫、教學資源使用情況數(shù)據(jù)庫，這六個核心數(shù)據(jù)庫所儲存的海量數(shù)據(jù)經(jīng)過濾、集成、聚類、關聯(lián)規(guī)則挖掘后構成了校外合作單位辦學質(zhì)量評估的重要信息源。

（二）研究和構建新型的校外合作單位辦學質(zhì)量評估指標體系

校外合作單位辦學質(zhì)量評估指標體系的構建應綜合考慮辦學基本條件、教學管理隊伍與師資力量、管理規(guī)章制度、教學過程及辦學成效（含畢業(yè)生發(fā)展狀況），提升評價指標的科學性和準確性。在制定這幾個方面的具體評價指標時，應重點突出與教學實施過程相關的因素，尤其是能夠體現(xiàn)師生互動、學生學習參與度、個性化學習、實踐能力培養(yǎng)等相關的內(nèi)容。

（三）構建校外合作單位辦學質(zhì)量在線評估的質(zhì)量保障體系

盡管有大數(shù)據(jù)分析作為技術支撐，但校外合作單位辦學質(zhì)量在線評估也不是萬能的。這是因為，一方面，教學過程中依然存在無法數(shù)據(jù)化的考察內(nèi)容;另一方面，在線評估由于其與教學現(xiàn)場分離的特點，從而導致了這種評估方式不僅無法準確地再現(xiàn)校外合作單位辦學狀況的全貌，同時也難以對發(fā)現(xiàn)的問題給予及時的處理和解決。因而，校外合作單位辦學質(zhì)量在線評估系統(tǒng)的正常運行還需要一套完善的質(zhì)量保障體系。這套質(zhì)量保障體系主要由以下幾個方面構成：

1.在線評估與現(xiàn)場督查相結合的評估方式

在線評估可以作為日常教學監(jiān)控評估方式，但在網(wǎng)絡教育綜合服務平臺所提供的校外合作單位辦學信息出現(xiàn)異常，或者主辦高校認為某些合作單位的辦學需要現(xiàn)場督導時，仍需組織專門人員到現(xiàn)場開展專項的督導與檢查。

2.內(nèi)外部評估并行的評估方式

內(nèi)部評估主要由校外合作單位實施，對在學學生、任課教師、各類工作人員獨立進行評估，評估的具體項目可由主辦高校根據(jù)評估的基本要求制定，評估的全部程序都在網(wǎng)絡教育綜合服務平臺上完成。外部評估主要是由主辦高校來實施，所依據(jù)的評估材料一方面是內(nèi)部評估的結果，另一方面則是從網(wǎng)絡教育綜合服務平臺中提取的校外合作單位運行信息。在這種評估機制下，內(nèi)部評估對校外合作單位辦學質(zhì)量的控制發(fā)揮著更為重要的引導作用，評估其實已經(jīng)演變成了校外合作單位辦學的一種自我約束，自我規(guī)范。外部評估在某種程度上具有了真正意義上的監(jiān)督作用，而不再是直接干預校外合作單位辦學的具體業(yè)務工作，為校外合作單位主動適應終身教育最新要求，探索新型的人才培養(yǎng)方式提供了更大的自由空間。

3.實時抽查與階段性評價相結合的綜合評估機制

借助于網(wǎng)絡教育綜合服務平臺中的大數(shù)據(jù)分析功能，主辦高校隨時可以調(diào)取任一個校外合作單位實時的辦學數(shù)據(jù)及其各個時期的內(nèi)部評估數(shù)據(jù)，尤其是在學學生對校外合作單位的評估數(shù)據(jù)，由此來掌握合作單位的實時運行情況。顯然，實時抽查彌補了階段性評估的不足，能夠及時發(fā)現(xiàn)日常辦學中存在的問題，并給予處理。