張 偉,柳玉輝

(1.東北大學(xué) 信息科學(xué)與工程學(xué)院， 沈陽 110819; 2.東北大學(xué) 研究院，沈陽 110819)

計算機工程

目標(biāo)導(dǎo)向的課程質(zhì)量評估方法及系統(tǒng)實現(xiàn)

張 偉1,柳玉輝2

(1.東北大學(xué) 信息科學(xué)與工程學(xué)院， 沈陽 110819; 2.東北大學(xué) 研究院，沈陽 110819)

根據(jù)國際工程教育評估組織ABET將評價重點放在學(xué)生“學(xué)到了什么”的精神，本文提出了依據(jù)學(xué)生在各種場合表現(xiàn)出的實際能力來評價一門課程的教學(xué)質(zhì)量的“以目標(biāo)為導(dǎo)向”的方法，并實現(xiàn)了課程評價信息系統(tǒng)。該方法的評價邏輯是：從學(xué)生學(xué)到的能力評價課程目標(biāo)達成度，從課程目標(biāo)達成度評價專業(yè)培養(yǎng)水平。該方法的優(yōu)點是，不需要增加額外的測試，即可以定量評價課程質(zhì)量，并促使教師主動改善課程設(shè)計。

ABET標(biāo)準(zhǔn)；課程質(zhì)量評價系統(tǒng)；專業(yè)質(zhì)量評估

課程建設(shè)是學(xué)校教學(xué)工作的一項經(jīng)常性基本建設(shè)，是學(xué)科專業(yè)建設(shè)的基礎(chǔ)性工程，是教學(xué)工作的核心內(nèi)容之一。加強課程建設(shè)和評估，尤其是專業(yè)學(xué)位課程建設(shè)和評估，對于進一步深化教學(xué)改革，提高教育教學(xué)質(zhì)量和辦學(xué)水平，培養(yǎng)高層次、高素質(zhì)、有創(chuàng)新精神的科學(xué)研究和工程技術(shù)方面的高級專門人才具有重要意義[1]。

隨著我國本科生的數(shù)量逐年提高，高等學(xué)校教學(xué)質(zhì)量問題日益成為全社會關(guān)注的焦點。首先，由于連續(xù)大規(guī)模擴招導(dǎo)致教育資源不足成為制約學(xué)校保證人才培養(yǎng)質(zhì)量的瓶頸；其次，課程評價內(nèi)容單一，特別是只關(guān)注對學(xué)生課程成績的評價，忽視了能力的培養(yǎng)；評價只關(guān)注結(jié)果不關(guān)注過程；有時也忽略了課程目標(biāo)與專業(yè)培養(yǎng)目標(biāo)的聯(lián)系和貢獻。第三，大學(xué)生所學(xué)習(xí)的課程的培養(yǎng)效果和培養(yǎng)質(zhì)量評價標(biāo)準(zhǔn)和方法如何適應(yīng)目前擴招的形式，并且在質(zhì)量評價的“數(shù)據(jù)化、文檔化”方面與國際接軌，都是十分值得探討的課題。本文的研究正是在這樣的背景下開展的[1-3]。

從國外情況看，ABET鑒定要求工程技術(shù)類專業(yè)用直接或者間接的評估方法測量專業(yè)的培養(yǎng)效果。為了保證評估更加可信，評估過程至少需要采用一種以上的直接評估方法來對培養(yǎng)效果進行測量，以避免引入太多的主觀性。這就促使各個學(xué)校積極探索可靠但不復(fù)雜的直接評估方法。在這個探索的過程中，國外很多大學(xué)開發(fā)了一種基于課程評分的直接評估方法，目的是探索專業(yè)培養(yǎng)效果評估的可行性與可靠性。一開始的時候，教師們認(rèn)為課程評分一般來說并不是評價專業(yè)培養(yǎng)效果的理想指標(biāo)，因為教師評分標(biāo)準(zhǔn)與過程的不同會導(dǎo)致評分結(jié)果的變動。但是，事實上成績平均積點(grade point average，GPA)已經(jīng)得到了各高校及企業(yè)雇主的廣泛認(rèn)可，并且它將作為唯一被普遍接受的測量學(xué)生學(xué)業(yè)成就的指標(biāo)而繼續(xù)存在。在這個事實的啟發(fā)下，大學(xué)充分利用課程評分的結(jié)果開發(fā)了對專業(yè)培養(yǎng)效果的直接測量方法。

為了評估學(xué)生的專業(yè)學(xué)習(xí)效果，必須搜集學(xué)生的能力達到了專業(yè)培養(yǎng)目標(biāo)的各種證據(jù)。這些證據(jù)只能是能夠證明學(xué)生能力的作業(yè)、具有特定標(biāo)準(zhǔn)的出口測驗、資格考試等等，不論口試還是筆試。如果專業(yè)培養(yǎng)效果評估與成績平均積點計算之間并不協(xié)調(diào)，那么就說明這兩種評價體系之間出現(xiàn)了脫節(jié)，即專業(yè)培養(yǎng)效果評估更加關(guān)注整體的效果，而課程評價更加關(guān)注課程的學(xué)習(xí)效果。按照ABET體系開展的課程質(zhì)量評估，更注重課程目標(biāo)與專業(yè)培養(yǎng)目標(biāo)的呼應(yīng)，并且強調(diào)數(shù)據(jù)化和文檔化[4-7]。

1 目標(biāo)導(dǎo)向的課程(目標(biāo))描述

本文參考ABET的基本框架，就我校計算機專業(yè)本科生學(xué)位課程培養(yǎng)質(zhì)量評估方法進行改革研究，包括三個方面的內(nèi)容：(1)課程目標(biāo)的識別(文檔化，數(shù)量化)；(2)依據(jù)學(xué)生的學(xué)習(xí)結(jié)果，對課程目標(biāo)的實際達成度進行評價(包括實際能力水平與預(yù)設(shè)培養(yǎng)目標(biāo)的達成度進行測量與分析)；(3)形成文檔化和數(shù)量化的課程質(zhì)量評估報告。

課程目標(biāo)是課程設(shè)計中，期望學(xué)生通過該課程學(xué)習(xí)達到的具體領(lǐng)域的知識和能力的水平，這些目標(biāo)的制訂既依據(jù)專業(yè)培養(yǎng)計劃也依據(jù)企業(yè)用人崗位的要求。

在ABET評估中，重點評估學(xué)生學(xué)到了什么(包括知識、素質(zhì)和能力)，因為課程評估是專業(yè)評估的基礎(chǔ)，所以每門課程都必須有明確的可度量的目標(biāo)。以一門課程為例，其課程目標(biāo)通常以下列方式描述：

課程描述說明：

a.給出了建議的課程大綱的格式，如果采用不同的格式，請注意包含必須的信息。

b.并不要求所有的CS專業(yè)課程都要覆蓋算法、數(shù)據(jù)結(jié)構(gòu)、軟件設(shè)計、編程語言概念、計算機組成與構(gòu)造這5方面的知識。

c.在鑒定專家訪問期間至少要出示如下課程材料，如果這些材料被放在網(wǎng)站上，請指出網(wǎng)址，并且使專家現(xiàn)場鑒定期間可以訪問：

c1、課程名稱、代碼、學(xué)分、周學(xué)時；

c2、教材及其他教學(xué)材料；

c3、教師姓名及聯(lián)系方式；

c4、教學(xué)進程表(書面，如果僅有電子形式請指出URL地址)；

c5、教案(授課目標(biāo)、教學(xué)方法、評估方法，這些是如何有助于培養(yǎng)目標(biāo)實現(xiàn)的)；

c6、本課程的教授政策；

c7、相關(guān)教學(xué)材料及學(xué)習(xí)材料位置說明文件；

c8、為學(xué)生布置的任務(wù)、項目、測試、考試及其他學(xué)習(xí)材料；

c9、學(xué)生的作品、作業(yè)及試卷批改結(jié)果；

c10、給學(xué)生的結(jié)果反饋記錄；

c11、與學(xué)生進行的任何溝通、研討、團隊工作的電子記錄；

c12、課程效果的評價記錄，包括學(xué)生調(diào)查、學(xué)生成績分析等；

c13、調(diào)查結(jié)果分析記錄等。

下面以《面向?qū)ο蟪绦蛟O(shè)計》課程為例，說明如何按照上述標(biāo)準(zhǔn)格式描述課程目標(biāo)。

課程描述(Course Descriptions)舉例：

面向?qū)ο蟪绦蛟O(shè)計 4(3，2)

課程介紹：

本課程旨在介紹當(dāng)代問題的解決方法與編程方法，課程重點為算法概念及軟件生命周期的概念。課程內(nèi)容也包括相應(yīng)工具的使用及對計算機給社會所帶來的影響的研究。主要面向CS專業(yè)或相關(guān)專業(yè)學(xué)生。

課程類別：CS專業(yè)本科生必修課。

課程教材：(略)。

課程目標(biāo)與預(yù)期授課結(jié)果：

學(xué)生修完該課程后將達到如下

1.能夠理解用計算機程序來解決一個實際問題的基本過程；

2.能夠理解面向?qū)ο缶幊痰慕鉀Q問題的基本概念；

3.能夠應(yīng)用一種計算機編程語言尤其是JAVA來實現(xiàn)簡單的計算機程序；

4.能夠在Eclipse環(huán)境中進行JAVA編程.

先修課程：

《離散數(shù)學(xué)》，或者在本校數(shù)學(xué)水平測試中取得滿意的分?jǐn)?shù)，或者由教師同意。

課程主要知識點：

·面向?qū)ο蟪绦蚧A(chǔ)

·對象和類

·理解對象定義

·對象交互

·對象組

·更復(fù)雜的功能

·類設(shè)計

課堂授課與實驗安排：

課堂授課：周3學(xué)時；動手實驗：周2學(xué)時

課程對專業(yè)培養(yǎng)目標(biāo)的貢獻：

·公共教育目標(biāo)1：對計算機科學(xué)與編程的介紹是寬基礎(chǔ)面的計算機相關(guān)專業(yè)的基本部分；

·公共教育目標(biāo)2：課程會介紹給學(xué)生一種高級編程語言為學(xué)生的后續(xù)學(xué)習(xí)和將來工作做準(zhǔn)備；

·公共教育目標(biāo)3：課程會為學(xué)生提供一個書面表達設(shè)計思想的學(xué)習(xí)機會；

·CS專業(yè)本科生專業(yè)教育目標(biāo)1：學(xué)習(xí)本課程使學(xué)生在當(dāng)前和未來的信息化建設(shè)當(dāng)中能夠應(yīng)用理論、技術(shù)、方法、工具和能力構(gòu)建功能有效的、可靠的高質(zhì)量計算機系統(tǒng)；

·CS專業(yè)本科生專業(yè)教育目標(biāo)2：課程中以小組為單位的項目實踐能夠使學(xué)生鍛煉團隊工作的能力。

計算機對社會及職業(yè)道德所帶來的影響：

計算機對社會及職業(yè)道德的影響討論在學(xué)生第一堂課的作業(yè)中就做了要求，學(xué)生可以向有實際項目經(jīng)驗的人去咨詢但一定要由他們自己寫出來。

問題分析與設(shè)計：

學(xué)生需要學(xué)習(xí)根據(jù)面向?qū)ο蠓独ソ忉屝枨?。理解一個方案是如何解決問題的比建立一個方案更重要。

程序?qū)崿F(xiàn)：

學(xué)生要寫9～10個程序，每個程序都要應(yīng)用在課程中學(xué)習(xí)的一個新的設(shè)計要素。一個程序一般要求1周以內(nèi)完成，在每周的實踐課上學(xué)生可以修改他們的程序。

課程負責(zé)人：(略)

課程描述撰寫人及撰寫日期：(略)

可以看出，課程目標(biāo)重點是描述學(xué)生應(yīng)該學(xué)會哪些知識和能力，其標(biāo)準(zhǔn)是課程負責(zé)人根據(jù)業(yè)界與學(xué)術(shù)界的對于工程職業(yè)共同要求制訂的。

2 目標(biāo)導(dǎo)向的課程質(zhì)量評估及系統(tǒng)實現(xiàn)

每一門課程都應(yīng)該有一套定義完善的、文本化的、可測量的學(xué)習(xí)課程學(xué)習(xí)目標(biāo)描述，而且這些目標(biāo)要與專業(yè)培養(yǎng)目標(biāo)相呼應(yīng)：課程目標(biāo)要支持專業(yè)培養(yǎng)目標(biāo)。

課程教學(xué)質(zhì)量(即課程效果)主要通過測量學(xué)生學(xué)到的知識和能力來獲得，測量方法主要包括作業(yè)、測驗、實驗項目以及期中與期末考試，據(jù)此，教師根據(jù)評分?jǐn)?shù)字，測量學(xué)生在每一門課程的每一項課程目標(biāo)的掌握水平和達成度。

《面向?qū)ο蟪绦蛟O(shè)計》課程有4項課程目標(biāo)，分別編號為1到4，課程評分將被用來對專業(yè)培養(yǎng)效果進行評估，表1顯示的是根據(jù)對全體學(xué)生的能力測試計算，得到的各項課程目標(biāo)的達成度。該課程使用的測量手段包括作業(yè)、測驗、實驗項目以及期中與期末考試。由教師確定各項測量手段對于四項課程目標(biāo)學(xué)習(xí)效果的貢獻率(見表2)，并用來指導(dǎo)設(shè)計具體的測試。

表1 各課程目標(biāo)的達成度

表2 各種考核對課程目標(biāo)學(xué)習(xí)效果的影響權(quán)重

注：上表中最后一行“總計”為一個學(xué)生在課程目標(biāo)i上最多可以得到的分?jǐn)?shù)。

課程總體分析：

學(xué)生總體表現(xiàn)是良好。在實驗室中，學(xué)生獲得優(yōu)秀的人數(shù)多于其它考核的人數(shù)，而目前考核的結(jié)果中，對實驗室成績權(quán)重偏低；明年考核應(yīng)提高實驗室成績權(quán)重。

單項課程目標(biāo)分析：

(1)能夠理解用計算機程序來解決一個實際問題的基本過程：

該課程目標(biāo)達成度為81.2%，主要貢獻來自于作業(yè)、實驗和期末考試。學(xué)生表現(xiàn)令人滿意，以后繼續(xù)保持，并進一步提高這項能力。

(2)能夠理解面向?qū)ο缶幊痰慕鉀Q問題的基本概念：

該課程目標(biāo)達成度為42.3%，主要貢獻來自于作業(yè)、期中和期末考試。教學(xué)效果一般。

改進措施：明年應(yīng)強化面向?qū)ο缶幊毯皖惖母拍罱虒W(xué)內(nèi)容，同時調(diào)整Rubrics設(shè)計，也調(diào)整實驗室成績對該課程目標(biāo)的影響度。

(3)能夠應(yīng)用一種計算機編程語言尤其是JAVA來實現(xiàn)簡單的計算機程序：

該課程目標(biāo)達成度為75.5%，主要貢獻來自于作業(yè)、實驗、期中和期末考試。教學(xué)效果中等。

改進措施：明年應(yīng)安排更多教學(xué)課時和實驗題目(尤其是綜合實驗項目)，提高學(xué)生實際編寫JAVA程序的能力。

(4)能夠在Eclipse環(huán)境中進行JAVA編程：

該課程目標(biāo)達成度為85.3%，主要貢獻來自于作業(yè)、實驗和期末考試。教學(xué)效果良好。

以上對課程學(xué)習(xí)效果及專業(yè)培養(yǎng)效果的計算可以通過開發(fā)一個簡單的Excel程序來完成。在評估過程中我們已經(jīng)意識到，要使得評估工作取得成功，首先要想辦法使得評估過程本身不過于繁瑣，盡量減少對教師額外增加的負擔(dān)，因此評估方法要盡量的直接、簡單。

在傳統(tǒng)的評分系統(tǒng)中，教師只要給出一名學(xué)生的總成績即可。而在本文所提出的評估方法中，教師必須對各項評分對于特定課程目標(biāo)的培養(yǎng)效果的分值進行額外的計算。一旦每一門課程的學(xué)習(xí)效果數(shù)值提交到系里，系里的專業(yè)評估委員會就能夠用表3所示的“專業(yè)培養(yǎng)目標(biāo)與課程目標(biāo)的關(guān)系”的方法[7]計算出每一項專業(yè)培養(yǎng)效果的達成程度，并做出評價比較。

表3 專業(yè)目標(biāo)-課程目標(biāo)映射表

這種新的評估方法使我們可以詳細分析哪一項專業(yè)培養(yǎng)效果、甚至哪一門課程需要進一步的提高，這就提高了分析結(jié)果的可用性。

我們按照“以學(xué)生學(xué)習(xí)效果度量課程目標(biāo)達成度”-“以各課程目標(biāo)達成度度量專業(yè)培養(yǎng)目標(biāo)達成度”-“以專業(yè)培養(yǎng)目標(biāo)達成度評估專業(yè)培養(yǎng)質(zhì)量”的數(shù)據(jù)關(guān)系，設(shè)計并實現(xiàn)了一個課程質(zhì)量評估系統(tǒng)[8-14]。

3 結(jié)論

根據(jù)國際工程教育評估組織ABET將評價重點放在學(xué)生“學(xué)到了什么”的精神，本文提出了依據(jù)學(xué)生在各種場合表現(xiàn)出的實際能力來評價一門課程的教學(xué)質(zhì)量的“以目標(biāo)為導(dǎo)向”的方法，并實現(xiàn)了課程評價信息系統(tǒng)。該方法的評價邏輯是：從學(xué)生學(xué)到的能力評價課程目標(biāo)達成度，從課程目標(biāo)達成度評價專業(yè)培養(yǎng)水平。該方法的優(yōu)點是，不需要增加額外的測試，即可以定量評價課程質(zhì)量，并促使教師主動改善課程設(shè)計。

通過上面的評估過程可以看出，本文所提出的評估方法要做到可行、可信，必要前提是課程評分過程的客觀、公正。教師必須緊緊圍繞課程學(xué)習(xí)效果來制定評分方法，必須有能夠有效評價學(xué)生學(xué)習(xí)表現(xiàn)的評分標(biāo)準(zhǔn)。為了使本文所提出的基于課程評分的直接評估結(jié)果更為可靠，教師們必須對于培養(yǎng)目標(biāo)的達成承擔(dān)更多的責(zé)任，并緊緊圍繞專業(yè)培養(yǎng)效果來制定、執(zhí)行其對課程學(xué)習(xí)效果的測量。也許完全按照分?jǐn)?shù)的權(quán)重分配來設(shè)計作業(yè)或問題會有一定困難，但這不是關(guān)鍵因素，只要選定的測量手段能夠相對合理地反映出與權(quán)重分配的一致性。要求教師在制定測量手段的時候更加的積極、主動，承擔(dān)起更多的專業(yè)培養(yǎng)效果評估的重任，這會有效推動教與學(xué)的提高，從而提升整個專業(yè)的培養(yǎng)效果。

[1]李雁冰.課程評價論.上海：上海教育出版社[M].2002:47-65.

[2]顧佩華，沈民奮，陸小華譯.重新認(rèn)識工程教育-國際CDIO 培養(yǎng)模式與方法[M].北京：高等教育出版社，2009:5-40.

[3]代林利.大學(xué)內(nèi)部學(xué)術(shù)質(zhì)量保障體系的系統(tǒng)建構(gòu)(以悉尼大學(xué)為例)[J].比較教育研究，2006(3):32-35.

[4]陳加榮,葛鎖網(wǎng).高校內(nèi)部教育質(zhì)量保障體系構(gòu)建的研究[D].揚州：揚州大學(xué)碩士論文，2005:38-43.

[5]張偉.基于ABET的高校教學(xué)質(zhì)量體系構(gòu)建及教師教學(xué)質(zhì)量評估[J].遼寧大學(xué)學(xué)報，2008,35(4):370-376.

[6]張偉,巫家敏.應(yīng)用型大學(xué)內(nèi)部教學(xué)質(zhì)量保障之組織體系的探索與實踐[J].遼寧大學(xué)學(xué)報，2009，36(1):89-96.

[7]張偉,王麗云.CDIO教學(xué)改革中的教學(xué)質(zhì)量評估系統(tǒng)[J].遼寧大學(xué)學(xué)報，2013，40(3):213-219.

[8]教指委編，高等學(xué)校計算機科學(xué)與技術(shù)專業(yè)發(fā)展戰(zhàn)略研究報告及專業(yè)規(guī)范(試行)[M].北京：高等教育出版社，2006:19-331.

[9]劉乃嘉，劉啟新,蔣東興.高等學(xué)校知識管理系統(tǒng)模型[J].工業(yè)技術(shù)經(jīng)濟，2005,24(1):105-106.

[10]陳華光.知識管理系統(tǒng)的設(shè)計與實現(xiàn)[J].科技資訊，2006,6(17):132.

[11]周曉慶.知識管理系統(tǒng)和CIMS系統(tǒng)的構(gòu)建與設(shè)計[J].計算機應(yīng)用，2005,25(9):2054-2056.

[12]陸晶，賽英.基于C/S體系結(jié)構(gòu)的數(shù)據(jù)挖掘平臺的設(shè)計[J].計算機工程與設(shè)計，2005,26(3):598-600.

[13]Greg Buczek.即時應(yīng)用 SQL Server 2000[M].北京：人民郵電出版社,2001:1-12.

[14]鄭莉，張瑞豐.C++案例教程[M].北京：清華大學(xué)出版社，2005,32(12):601-700.

(責(zé)任編輯：劉劃 英文審校：劉敬鈺)

Anoutcome-orientedcoursequalityevaluationmethodanditssystemimplementation

ZHANG Wei1,LIU Yu-hui2

(1.College of Information Sci.and Eng.,Northeastern University,Shenyang 110819,China; 2.Research Academy,Northeastern University,Shenyang 110819,China)

In accordance with the change of ABET Engineering Criteria 2000(ABET EC2000),which emphasizes what knowledge and skill a student really learns from a course,an outcome-oriented course quality evaluation method is proposed and an evaluation system is implemented in this paper.By integrating the grades of students′ performances in various occasions of a course such as project practices or medterm exams,the outcomes of the course(i.e.,the course quality)is numerically measured in this evaluation method.Not only the course quality evaluation result can be used to effect continuous improvement of the course but also to estimate the extent to which the program educational objectives are being met.

course quality evaluation;ABET engineering criteria;program quality management and evaluation

2014-07-12

東北大學(xué)“985工程”(項目編號：26311005)

張偉(1962-)，男，遼寧沈陽人，教授，主要研究方向：計算機理論，人工智能，E-mail：zhangwei@ise.neu.edu.cn。

2095-1248(2014)05-0061-06

G4，TP319

A

10.3969/j.issn.2095-1248.2014.05.012