柯樂樂
(華東師范大學(xué) 教育學(xué)部, 上海 普陀 200062)
準(zhǔn)實驗法在教育研究領(lǐng)域的應(yīng)用狀況分析
柯樂樂
(華東師范大學(xué)教育學(xué)部, 上海普陀200062)
摘要:準(zhǔn)實驗法作為教育實驗的主要方式,在教育研究領(lǐng)域中扮演著越來越重要的角色,但其科學(xué)性問題也成了教育理論界關(guān)注的焦點。為了更加具體地揭示準(zhǔn)實驗法在教育研究領(lǐng)域中出現(xiàn)的問題,為準(zhǔn)實驗法的推廣應(yīng)用提供參考依據(jù),以CSSCI來源期刊上近6年刊發(fā)的50篇準(zhǔn)實驗研究論文為研究樣本,在實驗環(huán)節(jié)設(shè)計、自變量選擇、因變量確定、無關(guān)變量控制、統(tǒng)計方法和準(zhǔn)實驗法使用6個方面進行內(nèi)容分析,發(fā)現(xiàn)我國教育研究者在方法使用和結(jié)果呈現(xiàn)方面還存在較多失誤,包括準(zhǔn)實驗環(huán)節(jié)介紹不完整、自變量的選擇不規(guī)范、因變量的分解不明確、忽視無關(guān)變量的控制及統(tǒng)計方法與實驗?zāi)康牟黄ヅ涞取?/p>
關(guān)鍵詞:準(zhǔn)實驗;教育研究;研究規(guī)范;教育實驗
隨著教育改革的深化,教育實驗在全國各大中小學(xué)校開展得如火如荼,這是教育科學(xué)研究中的新氣象。然而,就實驗方法而言,其科學(xué)性問題也一直是教育理論界關(guān)注的焦點。有調(diào)查顯示,教育實驗研究過程的科學(xué)性程度與實驗成效之間存在高度的正相關(guān)。因此,對教育實驗科學(xué)性的認識關(guān)系到教育實驗的質(zhì)量和教育實驗作為一種研究方式的發(fā)展與完善[1]。在閱讀文獻的過程中,筆者也發(fā)現(xiàn)一些并不規(guī)范的準(zhǔn)實驗研究論文,那么這種情況是普遍存在還是特殊個案?是只出現(xiàn)在低水平期刊還是同樣包括高水平期刊?準(zhǔn)實驗研究在教育領(lǐng)域的應(yīng)用到底存在哪些具體的問題和不足?為了回答這些問題,筆者選擇了CSSCI來源期刊上近6年刊發(fā)的相關(guān)論文作為研究樣本進行分析總結(jié)。
一、準(zhǔn)實驗法的內(nèi)涵
教育實驗在復(fù)雜的教育情境中開展,決定了教育實驗不能用嚴(yán)格自然科學(xué)意義上的實驗研究方法進行研究。因此,從嚴(yán)格意義上來說,教育實驗只能是準(zhǔn)實驗[2]。正確了解教育實驗研究法和準(zhǔn)實驗研究法的內(nèi)涵,是規(guī)范實施教育實驗、提高實驗科學(xué)性和實際效果的關(guān)鍵。
(一)教育實驗研究法
教育實驗研究法是指研究者按照研究目的,合理地控制或創(chuàng)設(shè)一定條件,人為地變革研究對象,從而驗證假設(shè),探討教育現(xiàn)象因果關(guān)系的一種研究方法[3]。教育實驗研究有一定的教育主張和理論構(gòu)想,通過主動地控制一些變量來探求教育內(nèi)部諸要素的因果關(guān)系,并做出預(yù)測,指導(dǎo)教育實踐。教育實驗研究應(yīng)包含以下幾個特征:(1)嚴(yán)謹(jǐn)?shù)膶嶒灢襟E和設(shè)計。一個完整的教育實驗應(yīng)該由實驗課題的確定、實驗假設(shè)的建立、實驗方案的設(shè)計、方案的實施和實驗的總結(jié)評價5個環(huán)節(jié)組成。(2)變量之間具有明確的因果關(guān)系。教育實驗的目的就是要揭示變量之間的因果關(guān)系。(3)自變量數(shù)目較少且清晰,可以分解并加以操作。變量的可操作性有利于實驗過程中變量的有序呈現(xiàn),使實驗處理具有有效性。(4)嚴(yán)格控制實驗條件。在實驗中,一旦確定了控制條件,就不再改變。
(二)準(zhǔn)實驗法
實驗研究按實驗被試是否隨機分組分為準(zhǔn)實驗研究和真實驗研究[4]。兩者的差別就在于實驗控制程度不同。真實驗要求對被試進行隨機分組,并在“人工環(huán)境”中進行實驗;準(zhǔn)實驗無須隨機安排被試,運用原始群體,在較為自然的情況下進行實驗處理。因此,教育實驗主要是準(zhǔn)實驗。準(zhǔn)實驗研究的優(yōu)點主要包括:(1)控制水平低。準(zhǔn)實驗研究不要求對被試進行隨機安排,而使用原始的被試群體,在接近現(xiàn)實的條件下進行實驗處理。(2)現(xiàn)實性強。準(zhǔn)實驗研究和實踐間的跨度較小,實驗結(jié)果容易與現(xiàn)實情況相聯(lián)系。(3)外部效度優(yōu)于真實驗。準(zhǔn)實驗研究沒有過多的人工干預(yù),實驗在接近自然的情境下進行,因此外部效度優(yōu)于真實驗研究。但由于準(zhǔn)實驗法使用原始組進行研究,無法證明實驗組的代表性,從而具有內(nèi)部效度低、推廣性不強的缺點。因此,利用準(zhǔn)實驗法實施的研究必須注重研究的效度并對其代表性和可推廣性加以論證,這也是本文的調(diào)查重點之一。
二、樣本的選取與分析方法
首先,筆者在CSSCI來源期刊上使用主題“準(zhǔn)實驗”和“教育實驗”檢索了2009—2014年這6年教育領(lǐng)域的所有文章,獲得初始樣本共計165篇,通過翻閱標(biāo)題和摘要去掉了不是利用準(zhǔn)實驗法實施研究的論文85篇,通過人工閱讀正文又去掉了不符合樣本要求的論文35篇,最終剩余有效樣本50篇。然后,從教育理論與教育管理、高等教育、中等教育、初等教育、學(xué)前教育和特殊教育6個方面對樣本進行歸類和編碼。最后采用內(nèi)容分析法逐一閱讀樣本文本,并用頻數(shù)分布和百分比分布來統(tǒng)計分析,揭示相關(guān)問題。從表1可以看出,2010年和2014年運用準(zhǔn)實驗法實施的研究最多,均占28%。需要指出的是,本文不涉及各項研究的具體內(nèi)容,而是從呈現(xiàn)的結(jié)果出發(fā),分析這50篇樣本論文運用準(zhǔn)實驗法的規(guī)范性情況。
表1 樣本分布情況
三、準(zhǔn)實驗法使用情況的統(tǒng)計與評述
50篇樣本論文從總體上呈現(xiàn)3方面特征:(1)學(xué)科領(lǐng)域外語居多。在50篇樣本論文中,有12%的研究聚焦于英語領(lǐng)域。(2)因變量為學(xué)業(yè)成績居多。16%的樣本論文研究的因變量為學(xué)業(yè)成績或包含學(xué)業(yè)成績。(3)研究角度偏微觀。大部分研究以一所學(xué)校的幾個班級作為被試對象,研究自變量對因變量的影響,從區(qū)域或國家層面出發(fā)的準(zhǔn)實驗研究寥寥無幾。具體而言,本文將從準(zhǔn)實驗環(huán)節(jié)的介紹、自變量的選擇與操縱、因變量的確定與分解、無關(guān)變量的控制、統(tǒng)計方法、準(zhǔn)實驗設(shè)計法的選擇與使用6個方面來進一步分析。
(一)準(zhǔn)實驗環(huán)節(jié)
一個完整的準(zhǔn)實驗應(yīng)該包括以下幾個基本環(huán)節(jié):(1)實驗課題的確定。教育實驗就是一個提出問題、解決問題的過程,課題的確定不僅要立足于現(xiàn)實,還應(yīng)具有科學(xué)性和創(chuàng)新性。(2)實驗假設(shè)的建立。確定實驗課題后,需要通過邏輯推理得出實驗假設(shè)。(3)實驗方案的設(shè)計。這是能否實現(xiàn)實驗?zāi)康牡闹饕WC。(4)實驗方案的實施。即將設(shè)計的方案變成實際行動。(5)實驗的總結(jié)評價。實驗實施結(jié)束后要對實驗結(jié)果進行定量和定性分析,揭示變量之間的規(guī)律[5]。依據(jù)這些核心環(huán)節(jié),筆者對50個研究樣本進行了統(tǒng)計,結(jié)果如表2所示。
表2 準(zhǔn)實驗環(huán)節(jié)的介紹情況
從表2可以看出,研究樣本對于準(zhǔn)實驗環(huán)節(jié)的介紹總體來講較為規(guī)范。50篇論文樣本對準(zhǔn)實驗環(huán)節(jié)的介紹大體存在3種不同的做法:一是比較規(guī)范的做法。這些論文樣本雖然介紹準(zhǔn)實驗環(huán)節(jié)的順序有所不同,但基本能夠非常詳細地涉及上述的5個步驟。二是只簡單提及實驗的環(huán)節(jié)。主要是對方案的設(shè)計和實施的介紹,而忽略了對課題和假設(shè)的介紹。三是完全沒有說明。這些研究通常直接從提出準(zhǔn)實驗研究方法跳到研究結(jié)果,但這類研究所占比例較小。這種缺少對準(zhǔn)實驗研究環(huán)節(jié)介紹的現(xiàn)狀,反映了部分研究者只重研究結(jié)果而缺乏對基本規(guī)范的認識。
(二)自變量的選擇與操作
對自變量的選擇與操縱主要包括3個方面:(1)明確實驗自變量的數(shù)目。根據(jù)實驗研究目的確定自變量的數(shù)目為單個或多個。(2)確定每一個自變量的水平數(shù)目。依據(jù)自變量的性質(zhì)或數(shù)量的差異將自變量劃分為不同的水平和狀態(tài)。(3)將各水平的自變量操作化。比如,潘炳超在研究翻轉(zhuǎn)課堂對大學(xué)教學(xué)效果影響的實驗中,將自變量課堂教學(xué)程序劃分為“傳統(tǒng)教學(xué)”“準(zhǔn)翻轉(zhuǎn)教學(xué)”和“翻轉(zhuǎn)教學(xué)”3個水平,然
表3 自變量的選擇情況
后再將這3個水平分別操作化為“操作演示—分步講解—模仿練習(xí)—分別輔導(dǎo)”“自學(xué)視頻—模仿練習(xí)—答疑解惑—個別輔導(dǎo)”和“自學(xué)視頻—探索發(fā)現(xiàn)—合作學(xué)習(xí)—個別輔導(dǎo)”3個不同的教學(xué)步驟[6]。根據(jù)這一標(biāo)準(zhǔn),筆者對樣本論文進行統(tǒng)計分析,結(jié)果如表3所示。
表3的統(tǒng)計結(jié)果表明,2/3的研究樣本對自變量的選擇與操作進行了精確處理,但還是有部分研究者只對自變量作簡略處理或只是根據(jù)自身已有的資源和經(jīng)驗選取自變量進行統(tǒng)計分析,這也是導(dǎo)致研究偏微觀的主要原因。
(三)因變量的確定與分解
因變量主要跟教育目標(biāo)有關(guān),例如教學(xué)效果的提升、學(xué)業(yè)情緒的調(diào)動、學(xué)習(xí)成績的提高及能力的增長等。它的確立與分解主要分為3個階段:(1)制定實驗?zāi)繕?biāo)。比如《資源、角色結(jié)構(gòu)化對協(xié)作學(xué)習(xí)結(jié)果的影響研究》就認為資源、角色結(jié)構(gòu)化對協(xié)作學(xué)習(xí)是有積極影響的。(2)分解實驗?zāi)繕?biāo)。如將協(xié)作學(xué)習(xí)結(jié)果分解為知識建構(gòu)與合作技能。(3)對目標(biāo)要素進行操作性定義。操作性定義就是將因變量轉(zhuǎn)變得便于觀察、測量和統(tǒng)計。據(jù)此對50篇樣本論文進行統(tǒng)計,結(jié)果如表4所示。
表4 因變量的確立與分解情況
從表4可以看出,50%的樣本論文對于因變量的確立與分解只是簡略提及甚至無說明,分析發(fā)現(xiàn)它們更多的是采用已有的量表或自制的量表將上述步驟全部省略。如《紅色資源融入野外生存生活教育對大學(xué)生就業(yè)理念和心理承受能力影響研究》是采用自制的問卷來測量因變量[7];同樣,《中小學(xué)班主任情感素質(zhì)提升的干預(yù)實驗研究》也是采用自編的《中小學(xué)班主任情感素質(zhì)問卷》作為檢測班主任情感素質(zhì)干預(yù)效果的前后測工具[8]。除了采用自制量表外,采用已有的量表測量因變量的居多,如測量“主觀幸福感”采用“主觀幸福感量表”,測量“心理健康水平”采用“SCL-90癥狀自評量表”等。
(四)無關(guān)變量的控制
為了提高準(zhǔn)實驗的內(nèi)部效度,在設(shè)計實驗方案時,應(yīng)盡可能地控制無關(guān)變量。控制無關(guān)變量的方式主要有:(1)隨機化。隨機化就是將變量的影響平均分配到被試的各個組去。(2)消除法。消除法就是在實驗過程中采取措施消除一些會對實驗結(jié)果產(chǎn)生影響的無關(guān)變量。(3)恒定法。恒定法就是使一些無法消除的無關(guān)變量保持不變。(4)均衡法。均衡法就是使無法消除和均衡的無關(guān)變量對實驗組和對照組產(chǎn)生相同的影響。(5)統(tǒng)計控制。統(tǒng)計控制就是在實驗結(jié)束后對一些偶然發(fā)生的、無法控制的無關(guān)變量進行技術(shù)處理。有效地控制無關(guān)變量是確保準(zhǔn)實驗科學(xué)性的重要保證。50篇樣本論文的分析結(jié)果如表5所示。
表5 無關(guān)變量的控制情況
從表5可以看出,超出一半的研究樣本對無關(guān)變量的控制不重視。筆者認為,部分研究者只是將準(zhǔn)實驗方法作為表征其研究科學(xué)性的工具,主要從研究結(jié)果出發(fā),將實驗組與對照組的研究結(jié)果進行差異分析,進而證明其因果效應(yīng),而并未考慮可能對被試群體起作用的其他因素。此外,簡略提及無關(guān)變量控制的研究主要是闡述被試對象的起點相當(dāng),對因變量的研究不會產(chǎn)生差異影響。其余采用了具體方法對無關(guān)變量控制的研究,是在論文中安排一節(jié)或一段來闡述對無關(guān)變量控制的操作。如喬秀梅等在研究促進小學(xué)生靈敏素質(zhì)的實驗方案中,從5大措施出發(fā)詳細闡述了對無關(guān)變量的控制[9]。
表6 因果效應(yīng)推斷方法分布
(五)統(tǒng)計方法的選擇與使用
在50篇樣本論文中,采用的統(tǒng)計方法達13種之多。這些統(tǒng)計方法大致分為3個層次:第1個層次是簡單的描述性統(tǒng)計方法,如將頻數(shù)、排名等作為解釋自變量與因變量關(guān)系的參考數(shù)據(jù);第2個層次是常用的假設(shè)檢驗,主要包括T檢驗、Z檢驗、X2檢驗、非參數(shù)檢驗、單因素方差分析、協(xié)方差分析、重復(fù)測量方差分析和多元方差分析,這些是推斷性統(tǒng)計的通用方法;第3個層次是具有針對性的統(tǒng)計方法,如傾向分?jǐn)?shù)配對方法、協(xié)作學(xué)習(xí)交互分析方法和質(zhì)性分析等。需要指出的是,不管采用哪種統(tǒng)計方法,選擇能夠解釋自己的研究問題的統(tǒng)計方法就是合適的方法。
從表6可以看出,T檢驗在所有統(tǒng)計方法中處于絕對主導(dǎo)地位,占42%。其余統(tǒng)計方法所占比例為2%~12%。需要注意的是,選用的檢驗方法必須符合其適用條件,如T檢驗的適用條件是獨立性、正態(tài)性和方差齊性。尤其是在樣本規(guī)模普遍不大的準(zhǔn)實驗研究中,對其正態(tài)性的要求就更高。如果不滿足這些條件,就要使用非參數(shù)檢驗代替,所以分析前必須要對數(shù)據(jù)進行正態(tài)性檢驗、F檢驗,并且要明晰抽樣方式。但在樣本論文中發(fā)現(xiàn),依然存在部分研究者未做樣本的適用條件分析,而是直接呈現(xiàn)研究結(jié)果,這是需要改善的。
(六)準(zhǔn)實驗設(shè)計方法的選擇與使用
常用的準(zhǔn)實驗設(shè)計方法有單組前測后測時間系列準(zhǔn)實驗設(shè)計、多組前測后測時間系列準(zhǔn)實驗設(shè)計、不相等實驗組對照組前后測準(zhǔn)實驗設(shè)計、不相等區(qū)組后測準(zhǔn)實驗設(shè)計和修補法準(zhǔn)實驗設(shè)計5種。根據(jù)每種方法的適用條件,筆者對50篇樣本論文進行歸類,結(jié)果如表7所示。
表7 準(zhǔn)實驗設(shè)計方法分布
從表7可以看出,單組前測后測時間系列準(zhǔn)實驗設(shè)計由于缺少對照組,實驗效度不高,所以采用的次數(shù)較少;不相等區(qū)組后測準(zhǔn)實驗設(shè)計由于比較適用于對不同被試的心理特征進行研究,適用范圍不廣,因此采用次數(shù)同樣較低;修補法準(zhǔn)實驗設(shè)計因其適用情況特殊,在50篇樣本論文中無一篇采用。不相等實驗組對照組前后測準(zhǔn)實驗設(shè)計和多組前測后測時間系列準(zhǔn)實驗設(shè)計的采用次數(shù)最多,分別占54%和36%。兩者的主要區(qū)別在于:不相等實驗組對照組前后測準(zhǔn)實驗設(shè)計適用于不能隨機安排哪個是實驗組哪個是對照組時采用,是一種典型的準(zhǔn)實驗設(shè)計方法;多組前測后測時間系列準(zhǔn)實驗設(shè)計是在單組前測后測時間系列準(zhǔn)實驗設(shè)計的基礎(chǔ)上,增加2個及以上的組進行對比的方法,適用于對被試組進行一系列測試的實驗,也是較常用的準(zhǔn)實驗設(shè)計方法。
四、結(jié)語
教育實驗作為一種極力超越思辨局限和經(jīng)驗局限的探索性研究活動,有其存在的獨特價值。教育實驗主要是準(zhǔn)實驗,準(zhǔn)實驗研究是一種在低控制水平條件下進行的研究。若想真正發(fā)揮一種研究方式的獨特價值,就必須提高其實驗效度,在規(guī)范分析的基礎(chǔ)上做出盡可能滿意的技術(shù)處理。但在研究中發(fā)現(xiàn),超過一半的研究者未對無關(guān)變量的控制加以說明。準(zhǔn)實驗雖說是在自然狀態(tài)下進行的實驗,控制也是準(zhǔn)控制,但這并不表示無需控制,我們不應(yīng)該只強調(diào)“準(zhǔn)”,還應(yīng)該知道它是“實驗”法。因此,像教師、課程、被試以及隨機分班等這些能夠控制的無關(guān)變量必須予以控制。準(zhǔn)實驗方法也應(yīng)被作為揭示現(xiàn)象背后規(guī)律的科學(xué)方法,而不應(yīng)被當(dāng)成表征其研究科學(xué)性的一種工具。
參考文獻:
[1]謝幼如,李克東.教育技術(shù)學(xué)研究方法基礎(chǔ)[M].北京:高等教育出版社,2006:85-98.
[2]鄭繼偉.再論準(zhǔn)實驗[J].教育研究與實驗,1990(4):38-41.
[3]裴娣娜.教育研究方法導(dǎo)論[M].合肥:安徽教育出版社,1995:244.
[4]馬紅亮.教育技術(shù)研究中的科學(xué)實證主義和人文主義[J].電化教育研究,2004(3):30-33.
[5]肖第郁.教育實驗的特點及操作方法[J].江西教育科研,2002(11):24-26.
[6]潘炳超.翻轉(zhuǎn)課堂對大學(xué)教學(xué)效果影響的準(zhǔn)實驗研究[J].現(xiàn)代教育技術(shù),2014(12):84-91.
[7]胡達道,陽蕓,彭勇.紅色資源融入野外生存生活教育對大學(xué)生就業(yè)理念和心理承受能力影響研究[J].北京體育大學(xué)學(xué)報,2011(5):93-96.
[8]王俊山,盧家楣.中小學(xué)班主任情感素質(zhì)提升的干預(yù)實驗研究[J].上海教育科研,2014(12):31-34.
[9]喬秀梅,張秀枝,趙煥彬,等.敏感期小學(xué)生靈敏素質(zhì)促進的干預(yù)實驗研究[J].體育學(xué)刊,2013(5):89-92.
(責(zé)任編輯吳朝平敖顯濤)
Analysis on the Application Reality of Quasi-experimental Method in the Field of Educational Research
KE Lele
(Faculty of Education, East China Normal University, Putuo Shanghai 200062, China)
Abstract:As a primary means of education experiment, quasi-experimental method plays an increasingly important role in the field of education research, but the scientificness has also become the focus of educational theorists’ dispute. In order to reveal the problem of quasi-experimental method in the field of education research more specifically and provide a reference basis for the further application of quasi-experimental method, this paper took 50 quasi-experimental research papers published in CSSCI source journals from 2009 to 2014 as the research sample, and content analysis was made from the quasi-experimental arrangements, selection and manipulation of the argument, decomposition of dependent variable, control of unrelated variables, selection of statistical methods and quasi-experimental design. The result shows that there are still many errors in the using of the method and results presenting, such as, the incomplete presentation of quasi-experimental, unstandardized selection of variables, unknown decomposition of dependent variable, and no attention to the control of irrelevant variables and the mismatch between purpose of survey and statistical analysis methods and so on.
Key words:quasi-experimental; educational research; research discipline; educational experiment
收稿日期:2015-10-16
作者簡介:柯樂樂(1992—),女,浙江溫州人,華東師范大學(xué)碩士研究生,主要從事教育經(jīng)濟與管理研究。
DOI:10.15998/j.cnki.issn1673-8012.2016.03.008
[中圖分類號]G40-034
[文獻標(biāo)志碼]A
[文章編號]1673-8012(2016)03-0050-06
引用格式:柯樂樂.準(zhǔn)實驗法在教育研究領(lǐng)域的應(yīng)用狀況分析[J].重慶高教研究,2016,4(3):50-55.
Citation format:KE Lele. Analysis on the application reality of quasi-experimental method in the field of educational research[J].Chongqing higher education research,2016,4(3):50-55.
■ 教育研究方法專題