吳曉霞 徐小穎 丁海東
摘要:?jiǎn)柧碚{(diào)查法決定數(shù)據(jù)信度和效度的關(guān)鍵是所設(shè)計(jì)的問(wèn)卷的信效度。文章以某校生物學(xué)教育碩士論文中的部分問(wèn)卷內(nèi)容為例,指出了設(shè)計(jì)問(wèn)卷中常出現(xiàn)的一些問(wèn)題,如題項(xiàng)設(shè)計(jì)隨意、題型設(shè)計(jì)不當(dāng)、題干表述不清等。并以問(wèn)卷編制流程為主線,給出問(wèn)卷設(shè)計(jì)中的一些策略性建議如目標(biāo)分級(jí)法、反饋?zhàn)圆榉ǖ取?/p>
關(guān)鍵詞:教育研究;調(diào)查問(wèn)卷設(shè)計(jì);常見(jiàn)問(wèn)題;反饋?zhàn)圆榉?/p>
中圖分類號(hào):G642.0 ? ? 文獻(xiàn)標(biāo)志碼:A ? ? 文章編號(hào):1674-9324(2020)11-0083-03
問(wèn)卷調(diào)查法是教育研究中廣泛使用的實(shí)證研究方法[1],高信度和效度的調(diào)查問(wèn)卷可以對(duì)選擇教育研究方向及教育決策起到正確的導(dǎo)向作用[2]。由于在調(diào)查報(bào)告及研究論文中通常不出現(xiàn)問(wèn)卷本身,導(dǎo)致問(wèn)卷本身的信度和效度成了問(wèn)卷調(diào)查研究中的隱性問(wèn)題,盡管非常重要,卻常常被忽略[2,4],而問(wèn)卷有效性的基礎(chǔ)就是問(wèn)卷中的問(wèn)題設(shè)計(jì)[3]。
教育碩士論文是教育碩士在教育教學(xué)研究中針對(duì)我國(guó)基礎(chǔ)教育事業(yè)改革與管理及教育教學(xué)實(shí)踐中存在問(wèn)題進(jìn)行的基礎(chǔ)性、實(shí)證性研究結(jié)果的體現(xiàn);由于教育碩士群體多為從本科直接進(jìn)入碩士階段的學(xué)生,對(duì)研究對(duì)象缺乏實(shí)踐性了解,因此調(diào)查問(wèn)卷法就成為其研究的重要手段。但抽樣分析結(jié)果卻表明,教育碩士畢業(yè)論文調(diào)查問(wèn)卷設(shè)計(jì)方面存在的問(wèn)題相當(dāng)突出[2,5]。本文以所收集的某校部分生物學(xué)教育類碩士畢業(yè)論文中的問(wèn)卷為例,歸類分析教育類調(diào)查問(wèn)卷設(shè)計(jì)中常見(jiàn)的問(wèn)題,并結(jié)合教育研究方法論指導(dǎo),提出科學(xué)編制教育類調(diào)查問(wèn)卷的一般原則和策略。
一、常見(jiàn)問(wèn)題分析
(一)問(wèn)題缺乏針對(duì)性
問(wèn)卷的調(diào)查問(wèn)題應(yīng)與調(diào)查目標(biāo)密切關(guān)聯(lián);但分析發(fā)現(xiàn)很多問(wèn)卷中普遍存在的問(wèn)題是問(wèn)題缺乏針對(duì)性,根據(jù)調(diào)查者自己以為相關(guān)而隨意設(shè)計(jì)。如在“初中生物學(xué)實(shí)驗(yàn)教學(xué)改進(jìn)的研究”教師調(diào)查問(wèn)卷中,提問(wèn)“您所在學(xué)校的相關(guān)領(lǐng)導(dǎo)是否了解教科書(shū)中生物學(xué)實(shí)驗(yàn)存在的問(wèn)題?”就很牽強(qiáng);在調(diào)查“生物學(xué)教學(xué)中傳統(tǒng)文化要素分析”時(shí)提問(wèn)“你的生物任課老師是否只強(qiáng)調(diào)記憶,不注重滲透?jìng)鹘y(tǒng)文化教育”等。
(二)題型選擇不當(dāng)
調(diào)查問(wèn)卷一般有三種題型:封閉式、開(kāi)放式和半封閉式(表1),不適當(dāng)?shù)念}型選擇可能影響作答者的真實(shí)作答,常見(jiàn)問(wèn)題為題型選擇不當(dāng),如:“你喜歡/不喜歡生物學(xué)課程的原因是什么?”調(diào)查內(nèi)容為主觀感受,因此開(kāi)放式題型更適應(yīng)本題,但作者設(shè)計(jì)成封閉式選項(xiàng):“A.老師講得不好 B.沒(méi)有實(shí)驗(yàn)課 C.生物課不好玩 D.沒(méi)有原因”,導(dǎo)致調(diào)查對(duì)象的隨意勾選,或推測(cè)調(diào)查者提問(wèn)意圖進(jìn)行選擇,從而會(huì)影響調(diào)查結(jié)果的信度。
(三)題干表述不清
常見(jiàn)問(wèn)題表現(xiàn)為,同一問(wèn)題題干中出現(xiàn)多個(gè)提問(wèn)主體,如“課堂上,學(xué)生自主探究、合作討論的時(shí)間是否大于教師講解的時(shí)間?”中自主探究與合作討論是兩個(gè)不同的問(wèn)題主體。部分問(wèn)卷中問(wèn)題的陳述帶有傾向性或權(quán)威性引導(dǎo),如“你是否具有良好的個(gè)人衛(wèi)生習(xí)慣?”,這里良好的個(gè)人衛(wèi)生習(xí)慣是一種傾向性引導(dǎo),如果改為“你一般多久打掃一次房間?”可能更適宜;部分題干中還會(huì)加入權(quán)威性引導(dǎo),如“中學(xué)生物教育傾向于主動(dòng)探索與合作交流的教學(xué)方式,而現(xiàn)行的教學(xué)方式仍以教師講課為主,你對(duì)此的看法?”中的前半句為權(quán)威性引導(dǎo);有些問(wèn)卷的題干中還會(huì)出現(xiàn)一些有歧義的概念,如“上網(wǎng)對(duì)你的學(xué)習(xí)有影響嗎?”中的“上網(wǎng)”“影響”均為有歧義的概念,上網(wǎng)干什么?影響是正面影響還是負(fù)面影響?……這種題干會(huì)使被調(diào)查者不知如何作答,或者會(huì)按照自己的主觀理解作答;部分問(wèn)卷題干的語(yǔ)言缺乏邏輯性、語(yǔ)意模糊、不通順或冗長(zhǎng)復(fù)雜也會(huì)影響調(diào)查結(jié)果的信度。如“你對(duì)有關(guān)生物教育的評(píng)價(jià)制度如學(xué)生綜合素質(zhì)評(píng)價(jià)和學(xué)分制的看法是”,這一問(wèn)題陳述冗長(zhǎng)復(fù)雜、提問(wèn)主體過(guò)多、語(yǔ)意不清。部分問(wèn)卷中的問(wèn)題還存在對(duì)敏感性問(wèn)題的直接發(fā)問(wèn),這也會(huì)引起調(diào)查對(duì)象反感拒答或不能如實(shí)回答。
二、編制教育類調(diào)查問(wèn)卷的一般流程與實(shí)施策略
(一)問(wèn)卷設(shè)計(jì)前的準(zhǔn)備工作
1.確定調(diào)查目的與調(diào)查對(duì)象:教育類問(wèn)卷調(diào)查目的一般包括對(duì)教育/教學(xué)某一方面的現(xiàn)狀調(diào)查、教學(xué)/教育策略的可行性與存在問(wèn)題的預(yù)測(cè)調(diào)查、被調(diào)查者對(duì)某種教育觀點(diǎn)的認(rèn)同度調(diào)查、對(duì)引起某一教育問(wèn)題或教育現(xiàn)象產(chǎn)生原因的析因調(diào)查等。
無(wú)論哪一類調(diào)查,問(wèn)卷設(shè)計(jì)的第一步都需要對(duì)所調(diào)查的“教育問(wèn)題”進(jìn)行明確的定義,對(duì)于現(xiàn)狀調(diào)查類問(wèn)卷,應(yīng)分析定義問(wèn)題的內(nèi)涵與外延,結(jié)合調(diào)查對(duì)象的實(shí)際情況,盡量窮盡列舉研究問(wèn)題的組成方面;對(duì)于析因問(wèn)題,主要分析影響調(diào)查問(wèn)題的可能影響因素,并設(shè)計(jì)調(diào)查問(wèn)卷,探討“典型問(wèn)題”產(chǎn)生的主要原因。調(diào)查者在確定調(diào)查目的時(shí)可以從以下幾個(gè)問(wèn)題入手:為什么要進(jìn)行調(diào)查?通過(guò)調(diào)查想要獲得哪些信息資料?問(wèn)卷調(diào)查能否幫助你獲得所需資料?利用所獲得的信息資料能做什么?以上幾個(gè)問(wèn)題可以幫助調(diào)查者明確調(diào)查目的,并根據(jù)研究需要,選擇適宜的調(diào)查對(duì)象(抽樣樣本)和確定調(diào)查范圍(抽樣樣本量的大?。?,調(diào)查時(shí)應(yīng)選擇具有代表性的樣本來(lái)代表整體。
2.確定問(wèn)卷題項(xiàng):?jiǎn)柧碇械拿恳活}項(xiàng)(提問(wèn)的項(xiàng)目)都應(yīng)有利于說(shuō)明調(diào)查目標(biāo)中的對(duì)應(yīng)點(diǎn),題項(xiàng)的全面性與針對(duì)性是確定調(diào)查內(nèi)容完整和結(jié)果有效的關(guān)鍵環(huán)節(jié)。
確定題項(xiàng)時(shí)可采用目標(biāo)分級(jí)法,從研究目標(biāo)入手,通過(guò)對(duì)目標(biāo)核心概念分級(jí)分解,認(rèn)識(shí)其內(nèi)涵,并通過(guò)操作性定義的方法使內(nèi)涵的各個(gè)方面具體化,只有具體可操作化的內(nèi)容才是設(shè)計(jì)問(wèn)卷題項(xiàng)的直接依據(jù)。以李志專[6]的“中學(xué)教師情感教學(xué)技能的理論構(gòu)建”問(wèn)卷編制為例(圖1),作者首先確定核心概念“教師情感技能”,接著從中學(xué)教師情感教學(xué)技能的理論構(gòu)建入手,分析得出中學(xué)教師情感技能的四個(gè)維度,然后通過(guò)可操作化分析,提煉能夠體現(xiàn)中學(xué)教師運(yùn)用情感教學(xué)技能的各種可能的具體教學(xué)行為,最后結(jié)合對(duì)教學(xué)技能內(nèi)部結(jié)構(gòu)的理論推演,將所提煉出的115種教學(xué)行為歸納到情感教學(xué)技能的不同維度中,完成了問(wèn)卷框架的系統(tǒng)構(gòu)建,經(jīng)與專家深度訪談,最終確定62個(gè)項(xiàng)目53頂樣例作為問(wèn)卷題項(xiàng)。
3.確定題型:調(diào)查問(wèn)卷的題型中,封閉式因其“方便快捷、簡(jiǎn)潔明了、被調(diào)查者比較愿意配合作答”等優(yōu)點(diǎn)而成為問(wèn)卷調(diào)查中的主體形式,根據(jù)問(wèn)題回答的方式又可以分為多選式(對(duì)于一個(gè)問(wèn)題列舉多個(gè)限定答案)、五步量表式(對(duì)于一個(gè)問(wèn)題列舉被調(diào)查者態(tài)度/觀點(diǎn)由強(qiáng)到弱或由弱到強(qiáng)的5個(gè)答案)以及二分式(把問(wèn)題簡(jiǎn)化成是與否兩種答案)。
在確定問(wèn)題形式時(shí),應(yīng)根據(jù)所問(wèn)問(wèn)題的特點(diǎn)選擇合適的題型(表1),對(duì)于態(tài)度類問(wèn)題建議采用五步量表式,將問(wèn)題設(shè)計(jì)為“非常同意/符合”“同意/符合”“不一定”“不同意/符合”“非常不同意/符合”五種回答,其優(yōu)點(diǎn)在于可以通過(guò)將五個(gè)選頂換位1到5進(jìn)行賦值,根據(jù)受測(cè)者的各個(gè)項(xiàng)目的分?jǐn)?shù)計(jì)算代數(shù)和,得到個(gè)人態(tài)度總得分,有利于進(jìn)行量化分析。
(二)設(shè)計(jì)問(wèn)卷
1.問(wèn)題表述:?jiǎn)柧碚闹械囊幌盗蓄}目,都是圍繞調(diào)查目標(biāo)而設(shè)計(jì)的,要獲取科學(xué)可靠的信息,就必須做到合理地、科學(xué)地、藝術(shù)地提出每一個(gè)問(wèn)題[7],問(wèn)題的陳述應(yīng)盡可能地清晰、中性,不要帶有傾向性或引導(dǎo)性,每一個(gè)問(wèn)題中只能出現(xiàn)一個(gè)調(diào)查事件主體,表述問(wèn)題時(shí)避免使用專業(yè)術(shù)語(yǔ),如果必須出現(xiàn)時(shí)最好先對(duì)術(shù)語(yǔ)給予解釋,語(yǔ)句盡量以簡(jiǎn)潔明了的短句呈現(xiàn);為了激發(fā)被調(diào)查者回答問(wèn)題的興趣,可通過(guò)虛擬情境化設(shè)計(jì)問(wèn)題[8],有時(shí)為了識(shí)別不誠(chéng)實(shí)、不真實(shí)的回答,還可以設(shè)置1—2道必要的重復(fù)性或驗(yàn)證性題目[2]。
2.問(wèn)題排序:編制好的問(wèn)題依據(jù)邏輯性原則[9]重新排列組合,通常第一個(gè)問(wèn)題盡量有趣且容易回答,重要問(wèn)題放在突出的位置,容易的問(wèn)題放在前面,慢慢引入比較難答的問(wèn)題。問(wèn)題要一氣呵成,注意問(wèn)題的前后順序的連貫性,不要讓被調(diào)查者的思緒中斷,如果設(shè)計(jì)有重復(fù)性、驗(yàn)證性的問(wèn)題時(shí)應(yīng)放置于問(wèn)卷的不同部位。
3.指導(dǎo)語(yǔ)的表述:指導(dǎo)語(yǔ)通常包括調(diào)查標(biāo)題、調(diào)查對(duì)象稱謂、研究目的與意義、回答問(wèn)題的要求、易誤解問(wèn)題的解釋以及對(duì)調(diào)查對(duì)象的利益關(guān)系,撰寫(xiě)時(shí)應(yīng)表述簡(jiǎn)明扼要、語(yǔ)言誠(chéng)懇熱情、說(shuō)明保密性與匿名性特點(diǎn)以消除調(diào)查對(duì)象的顧慮。
4.形式審查與測(cè)試修正:對(duì)設(shè)計(jì)好的問(wèn)卷還需要進(jìn)行形式審查和測(cè)試修正,形式審查可以根據(jù)問(wèn)卷設(shè)計(jì)中常出現(xiàn)的問(wèn)題,采用反饋?zhàn)圆榉ǎ▓D2),對(duì)已編制好的問(wèn)卷逐條逐項(xiàng)審查修改。
問(wèn)卷初稿形成后的測(cè)試修正可分為三個(gè)環(huán)節(jié):首先,邀請(qǐng)相關(guān)研究方向的專家或同行對(duì)問(wèn)卷項(xiàng)目及其因子歸屬進(jìn)行評(píng)估,刪除其中不合理的項(xiàng)目;其次,選擇與潛在的研究樣本類似的小樣本,以面對(duì)面的形式,進(jìn)行嘗試性測(cè)試與跟蹤訪談,修改問(wèn)卷中可能存在的問(wèn)題;對(duì)精確性要求較高的調(diào)查,進(jìn)行信度和效度分析[10],并根據(jù)結(jié)果對(duì)問(wèn)卷做出調(diào)整、修訂。
三、問(wèn)卷調(diào)查方式
問(wèn)題調(diào)查通常使用有面對(duì)面發(fā)放問(wèn)卷調(diào)查、發(fā)送郵件調(diào)查等,隨著網(wǎng)絡(luò)運(yùn)用的普及,網(wǎng)絡(luò)調(diào)查被廣泛使用,常用的網(wǎng)絡(luò)調(diào)查網(wǎng)站有問(wèn)卷星、問(wèn)卷網(wǎng)、樂(lè)調(diào)查、微信問(wèn)卷調(diào)查等。其主要優(yōu)勢(shì)有及時(shí)性、交互性、突破時(shí)空性等,且可以節(jié)省傳統(tǒng)調(diào)查中的大量人力和物力。
但是,無(wú)論是傳統(tǒng)調(diào)查還是網(wǎng)絡(luò)調(diào)查,問(wèn)卷調(diào)查的核心均在于調(diào)查者在較短的時(shí)間內(nèi)從一個(gè)相對(duì)較大的研究群體中獲得對(duì)一套精心設(shè)計(jì)的問(wèn)題的回答,教育調(diào)查問(wèn)卷結(jié)果可用于教育決策或檢驗(yàn)教育教學(xué)的效果,但是由于研究者與調(diào)查對(duì)象并非面對(duì)面的交流,被調(diào)查對(duì)象可能會(huì)問(wèn)卷設(shè)計(jì)中存在的各種問(wèn)題而選擇棄答或虛假作答,導(dǎo)致調(diào)查結(jié)果的信度和效度下降,設(shè)計(jì)一份目標(biāo)明確、題量適宜、編制有效的調(diào)查問(wèn)卷才是決定調(diào)查結(jié)果有效性的根本保證。
參考文獻(xiàn):
[1]鐘柏昌,李藝.問(wèn)卷調(diào)查方法在教育研究領(lǐng)域的應(yīng)用狀況分析[J].開(kāi)放教育研究,2012,(18):74-80.
[2]鐘柏昌,黃鋒.問(wèn)卷設(shè)計(jì)的原則與問(wèn)題分析——以某校2011年教育學(xué)碩士學(xué)位論文為例[J].學(xué)位與研究生教育,2012,(3):67-72.
[3]杰克·R.弗林克爾&諾曼·E.瓦倫.教育研究的設(shè)計(jì)與評(píng)價(jià)[M].第4版.蔡永紅,等.譯.北京:華夏出版社,2003
[4]黃娟娟.教育調(diào)查問(wèn)卷設(shè)計(jì)的常見(jiàn)問(wèn)題及應(yīng)對(duì)[J].上海教育科研,2015,(5):51-55.
[5]來(lái)鳳琪.教育研究的方法、步驟、邏輯及其發(fā)展[J].開(kāi)放教育研究,2017,(3):29-36.
[6]李志專.中學(xué)教師情感教學(xué)技能的理論構(gòu)建、問(wèn)卷編制及現(xiàn)狀調(diào)查[J].教育研究與實(shí)驗(yàn),2012,(6):80-83.
[7]王景英.關(guān)于問(wèn)卷調(diào)查研究的幾個(gè)問(wèn)題[J].中小學(xué)教師培訓(xùn),1999,(c1):16-18.
[8]楊玉東.如何運(yùn)用虛擬情境問(wèn)題設(shè)計(jì)專題調(diào)查問(wèn)卷[J].上海教育科研,2010,(1):47-50.
[9]秦一竹,劉長(zhǎng)鑫.調(diào)查問(wèn)卷在大學(xué)英語(yǔ)教學(xué)分析中的應(yīng)用[J].黑龍江高教研究,2015,(3):161-162.
[10]盧家楣.教育科學(xué)研究方法[M].上海:上海教育出版社,2012.