學校評價在推動區(qū)域和學校發(fā)展進程中扮演著至關重要的角色。它不僅深入挖掘并整合了教學質量、學生發(fā)展和管理效能的綜合性數據與反饋,還為教育政策的精準制定與動態(tài)調整、資源的科學分配、教育質量的全面提升以及教育公平的穩(wěn)步推進奠定了堅實的基礎。然而,在實際運用評價結果的過程中,許多區(qū)域與學校仍面臨很多現(xiàn)實問題,尤其是教師對數據的解讀能力及學校獲取區(qū)域支持與引導等方面存在明顯缺失??梢酝ㄟ^開發(fā)支持性工具如反饋報告、微課和學校改進計劃模板等解決這些問題,并有效推動評價結果的運用。杭州市西湖區(qū)通過提供這些支持性工具,構建學校改進的多層次反饋機制、搭建資源支持平臺以及設計提升教師數據素養(yǎng)的系統(tǒng)培訓課程等,實踐并形成了多維度保障機制,提升了學校評價結果的實際效用,助推區(qū)域內各學校更優(yōu)發(fā)展。
學校管理;學校評價;評價結果;學習支架理論;問題支架;支持性工具;數據素養(yǎng)
鮑雯雯.區(qū)域學校評價結果運用困境及其破解研究[J].教學與管理,2024(13):72-76.
學校評價是指對學校各個方面的表現(xiàn)進行系統(tǒng)的、綜合性的、科學的、客觀的評價。近年來,學校評價改革受到越來越多國內外學者以及教育行政部門的關注,學校評價作為教育質量保障體系的重要組成部分,對區(qū)域和學校發(fā)展具有重要的意義。區(qū)域通過對學校的各項工作進行全面、系統(tǒng)的評估,揭示學校在學校管理、教育教學、學生發(fā)展等方面的優(yōu)點和不足,為學校改進工作提供有力支持,進一步推動學校的發(fā)展。學校層面能夠利用學校評價結果發(fā)現(xiàn)自身管理中的問題和不足,從而促使學校優(yōu)化管理制度、改進管理方式,有助于學校不斷優(yōu)化教育教學過程,提高教育質量。
杭州西湖區(qū)作為浙江省數據驅動教育教學改進試點區(qū),從2019年起開始設計和架構學校教育質量生態(tài)評價體系,形成了指向“評估—反饋—改進”閉環(huán)的學校發(fā)展模型[1]。在實施學校評價的過程中,區(qū)域層面落實完成“評估”和“反饋”環(huán)節(jié),但是“改進”環(huán)節(jié)仍舊存在困難和挑戰(zhàn)?!案倪M”環(huán)節(jié)指向“如何運用結果”,評價結果的運用是評價工作的“最后一公里”,是學校教育質量生態(tài)評價體系不可分割的重要組成部分[2]。評價結果的運用效果直接影響學校評價目的的達成,科學運用評價結果已成為當下需要高度重視和深入研究的問題。
本文以杭州市西湖區(qū)為例,闡述區(qū)域層面如何針對“改進”閉環(huán)落實難等問題,制定可遷移復制的評價結果運用路徑和模式,從而實現(xiàn)學校評價的目的,助力學校更優(yōu)發(fā)展。
一、學校評價結果運用困境剖析
評價的核心目的是改進,評價結果的解讀和運用對于改進效度具有決定性影響。學校在將評價結果運用到學校教育管理,有效發(fā)揮評價對教育實踐的改進功能,促進結果的有效運用過程中,扮演著重要的角色[3]。許多學校在如何有效運用評價結果方面遇到了難題。評價結果往往被形式化地呈現(xiàn)在報告中,而沒有進一步轉化為驅動學校改進的具體行動。這樣一來,評價便無法為區(qū)域教育質量的提升發(fā)揮實質性作用。為了梳理和制定評價結果運用路徑和模式,解決“閉環(huán)”落實難等問題,區(qū)域對學校和相關教師進行了調研訪談,發(fā)現(xiàn)教師缺乏數據解讀能力以及學校缺乏支持與引導是導致當前學校難以有效運用評價結果的主要原因。
1.教師缺乏數據解讀能力
當前評價結果往往是以報告的形式反饋給學校,通過從數量關系的角度反映學校教育生態(tài)中諸多要素的存在狀態(tài)和相互關系[4]。這些數量關系的表達往往會以較為抽象的數據形態(tài)存在,所以報告中涉及多個評價指標、數據集和維度且均以各種不同的圖表形式展示,如盒須圖、條形圖、折線圖、散點圖等。學校相關方需要將這些抽象的數據還原為學校教育的真實世界,建立報告數據與學校管理和教育教學場景的聯(lián)系,這對學校相關方的數據分析能力和數據解讀能力都提出了較高的要求。國外Hamilton等學者指出許多管理者和教師缺乏數據分析和解讀的能力[5]。即使學校管理者身處豐富的數據環(huán)境中,由于他們缺乏解讀能力,這些數據也難以被有效地用于改進教學方法或學校管理[6]。因此,國內外多位學者呼吁要提高教育工作者的數據素養(yǎng),以便提升教育工作者的數據解讀和決策能力,更好地滿足當代教育環(huán)境中對數據驅動決策的需求[7,8]。
2.學校缺乏支持與引導
評價結果需要與學校管理改進融合,發(fā)揮對學校管理決策的參考作用,以及對問題改進的監(jiān)督、指導和促進作用[9]。但是,如何將評價結果轉化為能夠賦能學校管理改進的行動路徑和有效措施,對于學校相關方而言存在巨大的挑戰(zhàn)。這可能缺乏來自區(qū)域的政策、資源以及技術等方面的支持。在區(qū)域政策支持方面,對評價結果的重視度不足,沒有將其作為促進學校改進的數據佐證,也沒有牽頭開展對評價結果的解讀,導致評價報告被束之高閣,未能發(fā)揮有效作用。在資源和技術支持方面,缺乏有效的支架引導學校將評價結果與自身發(fā)展目標相融合,未能將評價結果作為學校改進計劃的參考依據。這將導致學校改進思路不清,在如何基于數據發(fā)現(xiàn)問題、落實改進措施等方面缺乏清晰的思路和方法。
二、區(qū)域支持學校評價結果有效運用的支持性工具
基于學校相關方缺乏數據解讀能力和缺乏區(qū)域支持與引導這兩大問題,區(qū)域嘗試設計適切的支持性工具,提升教師數據解讀和運用能力,最終破解學校評價結果難讀懂和難應用這兩大問題。
支持性工具來源于維果斯基的“最近發(fā)展區(qū)”理論[10],扮演著橋梁和腳手架的角色,支持和促進學生“踮起腳尖夠一夠”,達到潛在發(fā)展水平。站在區(qū)域角度,通過運用學習支架理論,可以探索設計多種針對學校需求的支持性工具,幫助學校更好地解讀和運用評價結果,建立評價結果與學校管理和教育教學場景的聯(lián)系。學校相關方通過運用支持性工具,逐步提升數據素養(yǎng),做到撤去支持性工具后也能有效運用評價結果,最終促進學校的更優(yōu)發(fā)展?;趯W校需求及面臨的問題和挑戰(zhàn),區(qū)域通過提供反饋報告、學校改進計劃模板、幫助學校填寫改進計劃的問題支架以及微課作為支持性工具,支持學校有效運用評價結果。
1.反饋報告
反饋報告的核心價值是為學校提供關于學校發(fā)展的準確信息。這些信息只有在得到正確解讀和運用時,才能真正為學校教育改進、策略制定以及資源配置提供有力的指導。作為評價數據和分析結果的核心載體,報告的設計和呈現(xiàn)方式直接影響其被學校接受和應用的可能性[11]。正如Hamilton 所指出的,如果教育管理者和教師不能準確地解讀和應用這些數據,那么數據將失去其應有的指導價值[12]。因此,反饋報告的設計需要滿足以下三大特征:首先,目標明確。報告設計之初要明確報告的目標與受眾,了解受眾的需求,考慮他們在解讀報告時可能遇到的問題。其次,報告應強調易讀性。無論是數據展示還是文字描述,都應確保其清晰、簡潔且容易理解。最后,報告應具備支持性。除了作為信息的傳遞工具之外,報告還應助力提升數據素養(yǎng),例如通過嵌入微課和提供策略指導,幫助學校管理者充分利用和理解報告的內容。
2.學校改進計劃模板
學校改進計劃被普遍認為是一種有效工具,它能協(xié)助教育管理者利用評價結果,以系統(tǒng)和科學的方式提高學校的教學和管理水平。不過,部分學者特別強調了學校改進計劃的質量至關重要,只有高質量的學校改進計劃才能對學校發(fā)展和學生學業(yè)成就產生正面影響[13]。因此,區(qū)域有必要為學校提供合適的支架,以確保學校能夠制定出高質量的改進計劃。
高質量的學校改進計劃應涵蓋四大核心要素:一是明確的診斷策略,確保改進計劃能夠針對學校的實際需求而制定;二是高參與度,確保改進計劃的制定和實施涵蓋所有利益相關方,如校長、教師等,并保證他們對此有共同的愿景和目標;三是切實可行的目標設定,避免制定與學校發(fā)展愿景不符的目標,以免資源浪費;四是持續(xù)的監(jiān)控和評估,確保每個目標的標準清晰,并進行定期評估和必要的調整。結合這四大要素,區(qū)域為學校提供了“學校改進計劃模板”,使學校在制定計劃時能有明確的方向。
3.微課
微課,以其短小、精煉和高度針對性的特點,被視為一種有效的技能傳遞工具,適用于多種教育場景,為學校相關方提供了一個隨時隨地可進行針對性學習的機會。首先,微課明確了學習的目標和受眾。區(qū)域能夠基于學校相關方在數據解讀和運用時可能面臨的問題,針對性地設計微課內容來解決問題。其次,微課具備很強的支持性,不僅僅是傳授知識,更是一種策略上的指導,可以幫助學校相關方通過微課中的具體案例和相關策略看懂各種數據分析結果,從而更好地解讀反饋報告和制定高質量的學校改進計劃,使評價結果真正發(fā)揮作用。
三、區(qū)域評價結果運用的行動路徑
基于區(qū)域評價結果運用的可行工具,杭州市西湖區(qū)深入探索并形成了具體的行動路徑(如圖1),展現(xiàn)了區(qū)域支持學校有效運用評價結果的交互過程。區(qū)域通過設計適切的支持性工具,在反饋和改進環(huán)節(jié)中,協(xié)助學校高效地解讀和運用評價結果。學校在運用支持性工具的過程中不斷反饋自身面臨的挑戰(zhàn)和困難,提供實際需求,同時也為區(qū)域提供案例資源。區(qū)域通過實施保障機制,全程基于學校的實際需求提供支持,輔助學校更好地運用評價結果,從而形成良好的聯(lián)動效應。以下以2022年杭州市西湖區(qū)有效運用中小學評價結果的實踐為例,闡述其具體的支持性工具運用和行動路徑。
1.優(yōu)化評價結果反饋報告,助力學校精準解讀數據
區(qū)域通過調研需求、明確要素等步驟,對報告的框架、閱讀邏輯、解讀工具等方面進行了細致的優(yōu)化。
(1)評價結果反饋報告框架的優(yōu)化
基于西湖區(qū)學校質量生態(tài)評價指標框架[14],報告的整體設計體現(xiàn)了“三改一促”核心,即改進管理、改進教學、改進環(huán)境,旨在促進學生發(fā)展的最終目標。報告內容分為七大章。一是概述,主要說明本次評價的目的、工具、方法和樣本情況;二是綜合情況,即學校一級指標概覽,以便學??焖倏傆[一級指標情況;三是預警指標情況,即需要引起學校關注的學業(yè)負擔和校園欺凌指標情況;四至七章是學生發(fā)展、教學效能、環(huán)境效能和管理效能等一級指標,以及細分指標的具體情況。
(2)評價結果反饋報告閱讀邏輯的優(yōu)化
區(qū)域針對報告中的數據類型、展現(xiàn)方式以及評價結果排布邏輯進行了梳理和調整,目的是引導并協(xié)助學校相關方更加便利地閱讀和理解評價報告。首先,結合學校評價過程中采集到的學業(yè)水平數據和問卷數據進行了分析和處理,形成了四大類數據類型。學業(yè)數據進行了均值為500、標準差為100的標準化處理。問卷采集到的數據進行了歸一化處理,使其成為0~100之間的分值,滿分為100。同時,還對指標指數進行了非常高、高、低和非常低的等第劃定,幫助學校更深入地分析各項指標不同等第占比情況。為了學校能夠更好地將學業(yè)水平以及問卷指標指數與區(qū)域比較,錨定自身在區(qū)域中的水平,還對數據進行了效應量指數轉化,形成顯著高于區(qū)域、高于區(qū)域、低于區(qū)域和顯著低于區(qū)域的等級。
其次,在評價結果排布邏輯上遵循遞進式原則。以一級指標“學生發(fā)展”為例,在指標內容排布上從大指標到小指標加以呈現(xiàn);在數值類型展示排布上,考慮從指數到等第水平呈現(xiàn)的模式。通過指數數值呈現(xiàn)能夠讓校長先一目了然地了解某指標各校區(qū)總體水平如何,然后通過等第水平的呈現(xiàn),幫助校長明晰導致指數高或低的具體不同等第水平占比情況,有利于學校進一步歸因分析。同時,報告還會展示從區(qū)域表現(xiàn)情況到學校具體表現(xiàn)的不同對比,每個指標都會呈現(xiàn)區(qū)域情況作為區(qū)域常模參照,便于學校進行對比分析。
(3)評價結果反饋報告解讀工具的優(yōu)化
基于前期需求調研,區(qū)域組織核心教師團隊,對報告中不同類型圖表及閱讀建議進行梳理,形成了系列微課。這些微課內嵌在報告中,通過掃碼便可觀看,從而實現(xiàn)伴隨式的報告解讀支持功能。同時,報告的右側還設計了“小貼士”,用以引導學校更精準地解讀數據,并幫助校長將評價結果與教育教學實踐相結合。
2.提供學校改進計劃模板,協(xié)助學校深度應用數據
(1)區(qū)域研制學校評價改進模板
為了讓學校能夠深度運用評價結果,并將其有效地融入學校的發(fā)展之中,區(qū)域研制了《西湖區(qū)“一校一報告”生態(tài)評價學校改進計劃》的參考模板。這一模板主要分為“學校評價結果基本情況”和“改進目標”兩大部分。在“學校評價結果基本情況”部分,主要是引導學校深入剖析學生發(fā)展、教學效能、環(huán)境效能、管理效能以及學校預警等指標中存在的核心問題。通過對關鍵問題的梳理,引導學校利用調查、研討以及專家論證等多種方式進行深入的歸因分析,以幫助學校洞察自身發(fā)展的優(yōu)勢與不足,進而明確亟待提升的關鍵領域。除了上述幫助學校識別和理解關鍵問題之外,該模板還進一步引導學校提煉評價結果中值得推廣的實踐經驗。
在“改進目標”部分,區(qū)域通過模板輔助學校綜合學校的發(fā)展愿景和目標,明確未來兩年中優(yōu)先需要改進的2~3個方面,并將其轉化為明晰的2~3個改進目標。表1展示了每個目標下,學校需要考慮的行動(思考需要通過哪些具體行動能夠達到該目標)、時間表(該行動需要通過多長的時間周期完成)、負責人(誰主要負責牽頭該行動,負責協(xié)調、監(jiān)督行動的有效性)、所涉及資源(實施該行動可能涉及哪些資源)、監(jiān)督(誰監(jiān)督以及哪些關鍵時間點用來監(jiān)督該行動的有效性)、成功的標準(該行動成功的樣子應該是怎么樣的)以及額外支持(實施該行動的過程中需要哪些第三方的支持)等要素。通過該模板的使用,學校能夠把改進目標細化為切實可行的改進計劃。
(2)區(qū)域提供模板使用問題支架
區(qū)域在提供模板的基礎上,為了解決學校在計劃制定過程中的困難和挑戰(zhàn),額外提供了“如何借助模板幫助學校制定行動改進計劃”的問題支架。這一問題支架針對模板中的目標、行動以及成功標準等可能讓學校感到困惑或難以填寫的要素進行了詳細解釋,并通過問題的方式引導學校與相關方進行研討,以期形成高質量的學校改進計劃。以改進計劃模板中的“成功標準”要素為例,通過“每個行動成功的樣子應該是什么樣的”“我們如何來衡量成功的標準”以及“我們如何發(fā)現(xiàn)我們是否達到了這個標準”等系列遞進式問題作為問題支架,引導學校相關方通過自我提問的方式思考該如何填寫改進計劃模板中的“成功標準”。同時,每個問題支架還配有相應的提示,指導學校相關方研討的方向和需要思考的維度。當學校組織相關方討論“每個行動成功的樣子應該是什么樣的”的時候,可以借助“我們目前在哪里,我們想要達到什么”“我們想要看到哪些改變”“行動采用了之后會對我們的學生和教師有什么影響;他們會看到或者體驗到哪些不同;對于不同的學生群體,最終的行動成功應該是什么樣的,會有什么不同”等討論提示進行研討,最終明確每個行動成功的樣子。當學校討論“如何判斷我們是否達到了這個標準”的時候,討論提示會引導教師思考是否可以從問卷、訪談、課堂觀察、作業(yè)督查、考試結果以及表現(xiàn)性評價等多元的評價方式上選擇設計。
(3)學校運用工具制定改進計劃
通過提供模板和問題支架,全區(qū)70多所中小學校制定了基于反饋報告的改進計劃方案。通過對全區(qū)中小學改進計劃文本的編碼分析,發(fā)現(xiàn)小學在未來兩年的改進目標集中在提升課堂教學主陣地、提升學生學習品質和加強勞動教育實踐效果等方面。對于部分基礎薄弱的學校而言,其改進目標著重于提升勞動教育實踐效果、提高學科合格率以及改善成績較低的后30%學生的學業(yè)成績等。針對初中學校,其改進計劃聚焦于提升課堂教學主陣地、增進師生關系、加強家校關系、提升教師科研能力以及促進學生的身心健康發(fā)展等方面。
在此基礎上,通過對各校改進行動的編碼分析,匯總出一套旨在實現(xiàn)改進目標的策略。成功有效的行動策略能夠在區(qū)域層面得以共享,為各校提供可借鑒的實踐智慧,幫助學校有效學習并遷移他校的有效行動,以達成各自的改進目標。
3.建立多維保障機制,全程支持學校發(fā)展
在提供支持性工具助力學校相關方解讀和運用評價結果的基礎上,區(qū)域構建了一套多維保障機制,全面支持并指導學校在解讀和運用評價結果過程中應對可能的問題和挑戰(zhàn)。
(1)建立改進反饋的機制
為保障學校改進計劃的順利實施,學校除依賴自身能力進行定期自評和調整外,更加需要專業(yè)的外部力量進行持續(xù)監(jiān)控與評估。區(qū)域聯(lián)動督導評估中心的專職督學及教育發(fā)展研究院的教研員、研究員可以為學校改進行動賦能。督學在了解學校運行狀況和需求的基礎上,基于學校改進計劃,提供針對性的專業(yè)知識和策略建議。這些建議旨在解決學校改進計劃實施過程中所遇到的問題。同時,教研員和研究員針對學校在落實改進行動中遇到的問題,給予資源和教研支持。與此同時,這些外部專業(yè)力量與學校之間建立的良好合作關系為學校創(chuàng)造了一個積極、協(xié)同的工作環(huán)境。這種環(huán)境有助于激發(fā)學校內部各個層面的積極性,使之共同參與到學校的持續(xù)改進行動中來。更為重要的是,外部專業(yè)力量在與學校合作的過程中,不僅僅局限于監(jiān)督和檢查的角色,他們更像是學校的合作伙伴和顧問,與學校一同探索最佳的改進路徑。
(2)搭建資源平臺
成熟的數據分析模型和典型案例可以為學校提供實踐參考和啟示。這些模型和案例通過對學校實踐的總結、提煉和結構化梳理,最終轉化為文本或微課,作為支持性工具回饋給學校。區(qū)域借助信息技術的便利性、系統(tǒng)性、數據性,以及覆蓋面廣、突破時空限制等特點,搭建了資源庫平臺,幫助學校能隨時隨地訪問并基于自身需求學習相應資源。比如,根據中小學學校評價結果中的重難點,區(qū)域形成了系列微課,并發(fā)布到資源庫平臺,供全區(qū)教師隨時學習。
(3)建構系統(tǒng)化教師培訓課程
區(qū)域針對校長和教師等不同角色,以數據素養(yǎng)需包含的核心要素為框架,設計指向數據的基本知識、數據工具的使用、數據解讀與運用以及實踐操作等多維度內容,設計分層分類的研訓活動,促進教師數據素養(yǎng)“真發(fā)展”。區(qū)域以“三個‘24學時浙江省教師培訓專業(yè)發(fā)展研修”以及常態(tài)伴隨式研修為閉環(huán),靶向提升教師數據素養(yǎng)。三個“24學時”研修全部指向關鍵對象的培育,第一個“24學時”培訓目標指向教師能力框架的基礎部分,關注教育大數據、數據理論以及數據工具等基礎知識的培育;第二個“24學時”培訓目標指向教師能力框架的中級部分,關注數據采集、數據應用、數據評價以及數據交流等核心技能的培育;第三個“24學時”培訓目標指向教師能力框架的高級部分,關注問題導向、辯證批判以及創(chuàng)新變革思維方法的培育,最終通過線上線下研修相結合的方式,助力教師數據素養(yǎng)的提升。
在區(qū)域學校評價結果支架和保障機制的推進下,全區(qū)學校成功制定了高質量的學校改進計劃,并緊密結合評價結果推動學校的發(fā)展,提升學校相關方的循證治理理念。在這一過程中產生的寶貴經驗、策略方法和典型案例成為優(yōu)質教育資源的源泉,能為更多學校的發(fā)展提供參考。不過,要確保改進計劃的長期性和持續(xù)性,進一步細化和個性化學校改進計劃,以及模式的推廣,依然面臨挑戰(zhàn)。未來的研究和實踐將深入探討這些問題,以期在學校的持續(xù)發(fā)展和改進過程中獲得更多深入的見解和有效的策略,為學生的全面發(fā)展提供更加堅實的基石和保障。
參考文獻
[1][14] 鮑雯雯,鄭健源,孔建美.指向學校評估的區(qū)域教育智慧評價系統(tǒng)研究與實踐[J].浙江考試,2022(01):17-22.
[2] 肖巧玲. 基于區(qū)域教育治理的義務教育質量監(jiān)測結果運用研究[J]. 福建基礎教育研究,2021(04):7-11.
[3] 鄒良,章勇.長沙市、區(qū)、校三級聯(lián)動的義務教育質量監(jiān)測結果應用研究[J].考試研究,2021,17(04):90-95.
[4] 李凌艷,任曉瓊,江照富.我國區(qū)域基礎教育質量監(jiān)測的探索與思考[J].中國教育學刊,2017(12):37-41.
[5][12] Hamilton L,Halverson R,Jackson S,et al.Using student achieve-
ment data to support instructional decision making[J]. NCRRL Reports,2009.
[6][8] Mandinach E B,Gummer E S. Data literacy for educators:Making it count in teacher preparation and practice[M].Teachers College Press, 2016.
[7] 楊現(xiàn)民,李新.中小學教師數據素養(yǎng)的現(xiàn)狀、評價及意義[J].教師教育學報,2021,8(03):12-20.
[9] 宋一丹.高效能教育質量監(jiān)測結果運用的蘇州實踐[J].中小學信息技術教育,2019(09):31-33.
[10] Vygotsky L S,Cole M. Mind in society:Development of higher psychological processes[M]. Harvard university press,1978:86.
[11] Wayman J C,Midgley S,Stringfield S. Leadership for data-based decision-making:Collaborative educator teams[J].The Journal of Educational Research,2006,99(5):321-330.
[13] Curry M M. A study of school improvement plans,school decision-
making and advocacy,and their correlation to student academic achievement[D]. Florida Atlantic University,2007.
【責任編輯? ? 鄭雪凌】