王濤 胡旭令

【摘要】國(guó)際航行船舶船員英語(yǔ)考試軟件以無(wú)紙化考試的方式，在題庫(kù)建設(shè)和軟件設(shè)計(jì)分別滿足海事主管機(jī)關(guān)的要求，經(jīng)試點(diǎn)試用表明，該軟件能夠有效地簡(jiǎn)化考試程序、提高考試效率、提升考試的效度和信度，從而反映學(xué)員的真實(shí)水平。

【關(guān)鍵詞】考試軟件船員英語(yǔ)信度效度

【基金項(xiàng)目】山東交通學(xué)院科研基金項(xiàng)目（Z201245）。

【中圖分類號(hào)】G64 【文獻(xiàn)標(biāo)識(shí)碼】A 【文章編號(hào)】2095-3089（2014）03-0027-02

國(guó)際航行船舶船員專業(yè)英語(yǔ)（簡(jiǎn)稱“船員英語(yǔ)”）考試始于2008年，目的在于測(cè)試申請(qǐng)注冊(cè)國(guó)際航行船舶船員的人員的英語(yǔ)能力[1]。該考試借鑒高級(jí)船員專業(yè)英語(yǔ)評(píng)估模式，分為聽力和口語(yǔ)兩部分，最初分別采用傳統(tǒng)的紙面考試和直接口語(yǔ)測(cè)試方式。為提高考試的信度和效度，課題組受主管機(jī)關(guān)委托，研發(fā)專門考試軟件，經(jīng)過(guò)試點(diǎn)試用，基本能夠滿足主管機(jī)關(guān)的考試要求。

一、船員英語(yǔ)考試軟件的研發(fā)

1.軟件及數(shù)據(jù)庫(kù)的研發(fā)

經(jīng)課題組成員通過(guò)對(duì)國(guó)內(nèi)其他考試軟件的借鑒，結(jié)合船員英語(yǔ)考試的特殊要求，開發(fā)了船員英語(yǔ)考試軟件，并通過(guò)相應(yīng)的權(quán)限設(shè)置，使得操作簡(jiǎn)單、界面簡(jiǎn)潔，大大簡(jiǎn)化了考試程序。船員英語(yǔ)考試軟件考生端界面如圖1所示。

圖1 船員英語(yǔ)考試系統(tǒng)界面

（1）軟硬件要求

考慮到目前省內(nèi)各航海院校及培訓(xùn)機(jī)構(gòu)無(wú)紙化考場(chǎng)的配置情況，以及考試的需要，課題組采用微軟公司的Visual Basic 6.0進(jìn)行考試系統(tǒng)的開發(fā)，并使用Access數(shù)據(jù)庫(kù)。對(duì)于服務(wù)器，軟件要求為Microsoft Windows 2000 Server，Microsoft Access 2000；硬件實(shí)際運(yùn)行情況為Intel Pentium 4，2.4GH，內(nèi)存為1G。對(duì)考生終端，軟件要求為Windows XP，硬件實(shí)際運(yùn)行情況為Intel Pentium 4，2.4GH，內(nèi)存1G。

（2）系統(tǒng)安全性要求

對(duì)于安全性，主要體現(xiàn)在考試系統(tǒng)的設(shè)計(jì)上，考慮兩方面內(nèi)容：試題庫(kù)的保密，即考生不能夠通過(guò)網(wǎng)絡(luò)訪問(wèn)到考題數(shù)據(jù)庫(kù)；考試意外終端，重啟后考試信息的保留問(wèn)題。對(duì)于前者，主要采取對(duì)數(shù)據(jù)庫(kù)設(shè)置密碼，對(duì)考生終端進(jìn)行設(shè)置，使考試界面最大化，無(wú)法退出等措施。對(duì)于后者，則采用數(shù)據(jù)即使傳輸方式，答題情況直接存于服務(wù)器，而不是存于終端。

（3）系統(tǒng)穩(wěn)定性問(wèn)題

課題組在對(duì)軟件進(jìn)行試運(yùn)行時(shí)，發(fā)現(xiàn)在考生多于15人同時(shí)參加答卷時(shí)，容易出現(xiàn)系統(tǒng)自動(dòng)退出運(yùn)行。查看原因發(fā)現(xiàn)是在程序訪問(wèn)數(shù)據(jù)庫(kù)時(shí)發(fā)生的，估計(jì)是數(shù)據(jù)庫(kù)訪問(wèn)時(shí)，管理員端反應(yīng)慢的問(wèn)題。解決辦法是，在程序中加入錯(cuò)誤處理程序On Error Goto語(yǔ)句。加入了On Error Goto錯(cuò)誤處理語(yǔ)句后，就再也沒(méi)有發(fā)生程序終止運(yùn)行的問(wèn)題，考試過(guò)程非常順利，軟件方面，系統(tǒng)穩(wěn)定性達(dá)到要求。同時(shí)，在硬件方面，涉及到計(jì)算機(jī)的運(yùn)行的穩(wěn)定性及電源的不間斷供給，目前各院校和培訓(xùn)機(jī)構(gòu)的無(wú)紙化機(jī)房均已滿足不間斷電源的要求。

2.試題庫(kù)的建設(shè)

（1）題型設(shè)計(jì)

根據(jù)該項(xiàng)目考試大綱的要求、培訓(xùn)教學(xué)實(shí)踐經(jīng)驗(yàn)和市場(chǎng)調(diào)研結(jié)果，課題組對(duì)現(xiàn)有試題進(jìn)行遴選、增加，重新建立符合大綱要求和航運(yùn)發(fā)展需要的試題庫(kù)，并由專業(yè)人士進(jìn)行音頻錄音。在題型方面，按照國(guó)家海事局《國(guó)際航行船舶船員專業(yè)英語(yǔ)考試和發(fā)證辦法》的要求，所有試題均經(jīng)過(guò)主管機(jī)關(guān)審核合格。設(shè)計(jì)如表1所示的題型。

表1 船員英語(yǔ)考試題型設(shè)計(jì)

（2）數(shù)量比例

考慮考生基礎(chǔ)以及題型設(shè)計(jì)等因素，試題數(shù)量方面，與考試題目數(shù)量比例基本為15:1，因采用隨機(jī)抽取組合的方式，因此考試信度方面能夠滿足要求。并且，根據(jù)航運(yùn)業(yè)和航海知識(shí)的發(fā)展，定期組織專業(yè)教師進(jìn)行命題和審題，確保題目總數(shù)滿足要求。

二、船員英語(yǔ)考試軟件的試用情況

課題組完成考試軟件之后，在主管機(jī)關(guān)的許可下，選擇威海轄區(qū)兩所航海院校作為試點(diǎn)。這兩所院校均為國(guó)家海事局認(rèn)可的船員培訓(xùn)機(jī)構(gòu)，具有多年的船員培訓(xùn)和考試經(jīng)驗(yàn)，設(shè)施設(shè)備相對(duì)完善，生源穩(wěn)定。選取上述兩所院校2013年度共18期培訓(xùn)班640人作為試用對(duì)象，所有考試均順利完成。

其中前6期172人進(jìn)行第一階段軟件試用，根據(jù)反饋的問(wèn)題，課題組對(duì)軟件和試題庫(kù)進(jìn)行調(diào)整。同時(shí)，選取上述兩所院校2012年度培訓(xùn)的21期共783人，未采用考試軟件的考試情況作為比較。

三、船員英語(yǔ)考試軟件的有效性評(píng)價(jià)

1.船員英語(yǔ)考試軟件的優(yōu)點(diǎn)

（1）簡(jiǎn)化考試程序，考試效率明顯提升

按40人/班的規(guī)模計(jì)算，未采用考試軟件前，要完成一個(gè)班的考試及評(píng)分，大約需要1至1.5天時(shí)間，采用考試軟件后，考試時(shí)間設(shè)定為40分鐘，聽力試題系統(tǒng)直接評(píng)分；口語(yǔ)試題答案，若2名考官同時(shí)評(píng)分，大約僅需要2至3小時(shí)。

（2）增加了考試信度

船員英語(yǔ)考試系統(tǒng)，聽力成績(jī)直接同步地顯示在服務(wù)器和考生終端，公開性明顯增加；口語(yǔ)閱卷采用完全打亂順序、隨機(jī)抽題評(píng)分的方式，考官與考生之間無(wú)直接接觸；同時(shí)，數(shù)據(jù)庫(kù)設(shè)計(jì)方面，成績(jī)直接打印，無(wú)法修改。上述措施均保證了考試的公平公開，考試信度方面明顯提高。

（3）考試效度獲得提高

考試效度是指考試在多大程度上考查了希望考查的內(nèi)容[2]，即考試是否達(dá)到了其預(yù)定目的，成績(jī)能否反映出考生的實(shí)際語(yǔ)言水平。該系統(tǒng)根據(jù)程序中預(yù)先設(shè)置的知識(shí)點(diǎn)分布和難易程度，隨機(jī)抽題組卷，提高了試卷本身的有效性。同時(shí)，人機(jī)對(duì)話，考生不與考官面對(duì)面交流，在一定程度上緩解其緊張情緒，從而能夠更有效地發(fā)揮其語(yǔ)言水平。此外，答案存儲(chǔ)于服務(wù)器，考官閱卷時(shí)可多次調(diào)取語(yǔ)料，能夠更加有效地評(píng)分。因此，考試效度獲得大幅度提高。

2.存在的主要問(wèn)題及解決思路

經(jīng)過(guò)試用，課題組成員發(fā)現(xiàn)該考試軟件也存在一定的不足。在實(shí)踐中，表現(xiàn)出來(lái)的最突出的問(wèn)題是可維護(hù)性。軟件在應(yīng)用中不可避免地要進(jìn)行許多的改進(jìn)，如果僅在管理員端對(duì)軟件做出了改進(jìn)，只需要在管理員端的計(jì)算機(jī)對(duì)軟件進(jìn)行卸載和再次安裝即可；而如果在考生端對(duì)軟件進(jìn)行了部分的改進(jìn)，就要對(duì)考生端的每一臺(tái)計(jì)算機(jī)進(jìn)行軟件的卸載和再安裝，特別耗費(fèi)人力及時(shí)間。所以，最好直接采用B/S結(jié)構(gòu)。這樣，對(duì)軟件部分的任何代碼修改，僅需要在服務(wù)器端對(duì)代碼文件直接替換即可，節(jié)省了人力及時(shí)間。

四、結(jié)束語(yǔ)

實(shí)踐證明，課題組開發(fā)的船員英語(yǔ)考試軟件，能夠滿足國(guó)家海事局對(duì)“國(guó)際航行船舶船員專業(yè)英語(yǔ)”培訓(xùn)的各項(xiàng)要求。系統(tǒng)測(cè)試穩(wěn)定后，一方面用于培訓(xùn)教學(xué)，另一方面用于該項(xiàng)目考試，考試方式和成績(jī)受海事局認(rèn)可，具有很強(qiáng)的應(yīng)用性和使用率。針對(duì)運(yùn)行過(guò)程中發(fā)現(xiàn)的各類問(wèn)題，課題組成員將進(jìn)一步展開研究，使其更加完善。

參考文獻(xiàn)：

[1]中華人民共和國(guó)海事局. 國(guó)際航行船舶船員專業(yè)英語(yǔ)考試和發(fā)證辦法, 2008.

[2]李筱菊. 語(yǔ)言測(cè)試科學(xué)與藝術(shù)[M].長(zhǎng)沙:湖南教育出版社,1997.

作者簡(jiǎn)介：

王濤（1979– ），男，講師，主要從事航海技術(shù)教學(xué)和航海教育研究。