丁 雪王 芳 劉曉曦 陳永超
中國(guó)醫(yī)學(xué)科學(xué)院醫(yī)學(xué)信息研究所/衛(wèi)生政策與管理研究中心 北京 100020
·公共衛(wèi)生·
基于項(xiàng)目理論的評(píng)估對(duì)兒童健康干預(yù)評(píng)估的啟示
丁 雪*王 芳 劉曉曦 陳永超
中國(guó)醫(yī)學(xué)科學(xué)院醫(yī)學(xué)信息研究所/衛(wèi)生政策與管理研究中心 北京 100020
干預(yù)項(xiàng)目具有長(zhǎng)期性、復(fù)雜性,對(duì)其進(jìn)行適宜的評(píng)估是推動(dòng)其可持續(xù)發(fā)展的關(guān)鍵。基于項(xiàng)目理論的評(píng)估在評(píng)估內(nèi)容和方法上的綜合性,不僅有助于對(duì)項(xiàng)目運(yùn)行過(guò)程“黑匣子”的破解,提升評(píng)估研究的專業(yè)水平,同時(shí)也對(duì)項(xiàng)目評(píng)估研究和項(xiàng)目管理水平的提高有不容忽視的促進(jìn)作用。我國(guó)兒童健康狀況與發(fā)達(dá)國(guó)家仍有一定差距,且地區(qū)間發(fā)展不平衡問(wèn)題較為突出。目前針對(duì)兒童常見(jiàn)疾病、健康生活方式、生長(zhǎng)發(fā)育、兒童看護(hù)人保健認(rèn)知和就醫(yī)行為以及婦幼保健機(jī)構(gòu)基礎(chǔ)能力建設(shè)等開(kāi)展了一系列干預(yù)項(xiàng)目,但項(xiàng)目評(píng)估相關(guān)研究較為欠缺,在評(píng)估思路和方法上存在不足。本文在對(duì)基于項(xiàng)目理論的評(píng)估和國(guó)內(nèi)外兒童健康干預(yù)評(píng)估現(xiàn)狀進(jìn)行梳理和分析的基礎(chǔ)上,提出轉(zhuǎn)變傳統(tǒng)兒童健康干預(yù)評(píng)估觀念、從注重結(jié)果的鑒定性評(píng)估轉(zhuǎn)向重視過(guò)程的診斷性評(píng)估、對(duì)兒童健康干預(yù)評(píng)估結(jié)果及時(shí)進(jìn)行反饋與運(yùn)用、注重加強(qiáng)兒童健康干預(yù)項(xiàng)目評(píng)估能力建設(shè)等建議。
基于項(xiàng)目理論的評(píng)估;兒童健康;干預(yù)項(xiàng)目;評(píng)估
干預(yù)研究是20世紀(jì)80年代中期在國(guó)際社會(huì)學(xué)界興起的一種應(yīng)用研究。近年來(lái),國(guó)內(nèi)社會(huì)學(xué)界也逐漸將這種方法運(yùn)用于扶貧濟(jì)困、艾滋病預(yù)防、健康水平提高等研究項(xiàng)目,以達(dá)到提高被干預(yù)對(duì)象抗擊貧困、抵御疾病或改變自身現(xiàn)狀等方面能力的目的。[1]各行業(yè)的項(xiàng)目促進(jìn)了社會(huì)、經(jīng)濟(jì)、文化、教育等諸多領(lǐng)域的發(fā)展,健康領(lǐng)域也不例外。但如何將有限的資源用于最需要、最有效的領(lǐng)域是目前全社會(huì)共同面臨的課題,對(duì)干預(yù)項(xiàng)目進(jìn)行評(píng)估往往有助于解決此類問(wèn)題,不僅能夠通過(guò)檢驗(yàn)干預(yù)效果,為確定干預(yù)項(xiàng)目未來(lái)走向提供依據(jù),而且有助于合理配置有限資源,推進(jìn)其科學(xué)化進(jìn)程[2-4]。受社會(huì)經(jīng)濟(jì)和衛(wèi)生事業(yè)發(fā)展水平等諸多因素的制約,我國(guó)兒童健康狀況地區(qū)間發(fā)展不平衡的問(wèn)題較為突出。[5-6]目前我國(guó)也針對(duì)兒童常見(jiàn)疾病、健康生活方式、生長(zhǎng)發(fā)育、看護(hù)人保健認(rèn)知和就醫(yī)行為以及婦幼保健機(jī)構(gòu)基礎(chǔ)能力建設(shè)等開(kāi)展了一系列干預(yù)項(xiàng)目[7-8],而對(duì)這些項(xiàng)目進(jìn)行評(píng)估則是推動(dòng)其持續(xù)發(fā)展的基礎(chǔ),但目前對(duì)兒童健康干預(yù)進(jìn)行評(píng)估的思路和方法還存在不足,較少對(duì)干預(yù)措施發(fā)揮作用和產(chǎn)生效果的機(jī)制進(jìn)行探索,忽視了對(duì)干預(yù)措施產(chǎn)生前后變化的中間過(guò)程的研究,因此也就很難將干預(yù)政策/措施進(jìn)行有效的推廣和應(yīng)用。本文旨在通過(guò)梳理和分析基于項(xiàng)目理論的評(píng)估(theory-based evaluation),以期對(duì)兒童健康干預(yù)評(píng)估工作的開(kāi)展提供借鑒和參考。
自20世紀(jì)80年代以來(lái),美國(guó)學(xué)者Carol Hirschon Weiss等紛紛關(guān)注基于項(xiàng)目理論的評(píng)估,出版了一系列論著和主編評(píng)估研究???,擴(kuò)大了基于理論的評(píng)估在評(píng)估實(shí)務(wù)中的影響。近年來(lái),基于項(xiàng)目理論的評(píng)估研究數(shù)量不斷增多,應(yīng)用領(lǐng)域也從最早的保健和風(fēng)險(xiǎn)防范擴(kuò)展到節(jié)能、反腐、軍事和社會(huì)服務(wù)領(lǐng)域。[9]
1.1 項(xiàng)目理論與基于項(xiàng)目理論的評(píng)估
項(xiàng)目理論(program theory)主要是說(shuō)明項(xiàng)目干預(yù)過(guò)程、揭示項(xiàng)目干預(yù)措施及其結(jié)果間因果聯(lián)系的理論[10],即項(xiàng)目理論是項(xiàng)目的內(nèi)在假設(shè),明確在項(xiàng)目執(zhí)行過(guò)程中應(yīng)采取的措施和措施可能產(chǎn)生的結(jié)果,項(xiàng)目下一步應(yīng)如何進(jìn)行,以及可能產(chǎn)生的預(yù)期反應(yīng)等[11]?;陧?xiàng)目理論的評(píng)估是一種以項(xiàng)目理論為基礎(chǔ)、理論驅(qū)動(dòng)、理論導(dǎo)向或理論支撐的評(píng)估研究,是關(guān)于項(xiàng)目設(shè)計(jì)的活動(dòng)及其各個(gè)環(huán)節(jié)之間關(guān)系的一種評(píng)估研究。[12]
1.2 評(píng)估的類型與特點(diǎn)
基于項(xiàng)目理論的評(píng)估是以項(xiàng)目理論為基礎(chǔ)或指導(dǎo)的研究,不是單一的一種評(píng)估方法,而是一類評(píng)估方法的總稱,主要包括理論評(píng)估(theoretical evaluation)、現(xiàn)實(shí)主義評(píng)估(realistic evaluation)、邏輯模式(logic model)和理論驅(qū)使(theory-driven)評(píng)估等類型。[13]理論評(píng)估是對(duì)在項(xiàng)目服務(wù)和干預(yù)過(guò)程中是否發(fā)生了項(xiàng)目理論預(yù)期變化的一種檢驗(yàn),即對(duì)項(xiàng)目運(yùn)行過(guò)程“黑匣子”的破解(圖1);現(xiàn)實(shí)主義評(píng)估的重點(diǎn)不是說(shuō)明項(xiàng)目為什么產(chǎn)生預(yù)期的影響作用,而更加關(guān)注項(xiàng)目作用機(jī)制運(yùn)作的條件和結(jié)果[14];項(xiàng)目邏輯模式更突出項(xiàng)目執(zhí)行過(guò)程中各個(gè)步驟的分析,強(qiáng)調(diào)通過(guò)流程圖顯示資源投放、活動(dòng)和服務(wù)提供以及成效之間的關(guān)系,借此揭示項(xiàng)目過(guò)程的邏輯性和合理性關(guān)系[15](圖2);理論驅(qū)使評(píng)估則是根據(jù)項(xiàng)目理論框架,針對(duì)項(xiàng)目利益相關(guān)者的評(píng)估需要確定評(píng)估策略和方法,收集和分析相關(guān)信息借以回答評(píng)估問(wèn)題。[16]
圖2 項(xiàng)目邏輯規(guī)劃與實(shí)施方向示意圖
在特點(diǎn)方面,從評(píng)估對(duì)象上來(lái)看,基于項(xiàng)目理論的評(píng)估既能檢驗(yàn)項(xiàng)目實(shí)施方按原計(jì)劃落實(shí)項(xiàng)目的情況,也是對(duì)項(xiàng)目?jī)?nèi)在理論機(jī)制的認(rèn)識(shí);從評(píng)估內(nèi)容上來(lái)看,不僅是對(duì)項(xiàng)目研究假設(shè)的論證,同時(shí)也考察項(xiàng)目中各項(xiàng)措施的實(shí)施過(guò)程以及項(xiàng)目實(shí)施后實(shí)際取得的效果;從評(píng)估研究方法上來(lái)看,通過(guò)將項(xiàng)目理論的因果關(guān)系變量操作化,通過(guò)定量統(tǒng)計(jì)分析檢驗(yàn)其假設(shè)成立,而對(duì)項(xiàng)目過(guò)程的評(píng)估和分析則借助于定性描述。因此,基于項(xiàng)目理論的評(píng)估在方法上也呈現(xiàn)出定量研究方法與定性研究方法相結(jié)合的綜合性特點(diǎn)。盡管不同評(píng)估類型在評(píng)估內(nèi)容上各有側(cè)重,但都不同程度地涉及項(xiàng)目背后的理論假設(shè),試圖對(duì)項(xiàng)目干預(yù)及其實(shí)現(xiàn)目標(biāo)之間的聯(lián)系加以證明(表1)。
表1 基于項(xiàng)目理論的評(píng)估類型
1.3 評(píng)估步驟
項(xiàng)目理論在以理論為基礎(chǔ)的評(píng)估研究中占有主導(dǎo)地位,對(duì)評(píng)估研究的實(shí)施具有一定的指引作用。通過(guò)回顧研究文獻(xiàn)和成果、查閱相關(guān)資料、訪談項(xiàng)目利益相關(guān)者、參與項(xiàng)目的具體服務(wù)和管理過(guò)程以及現(xiàn)場(chǎng)觀察等手段構(gòu)建項(xiàng)目理論?;陧?xiàng)目理論的評(píng)估不僅驗(yàn)證有關(guān)項(xiàng)目干預(yù)的內(nèi)在機(jī)制,而且考察項(xiàng)目實(shí)施過(guò)程是否與預(yù)期一致、項(xiàng)目實(shí)施后的影響結(jié)果等,因此它實(shí)際上包括項(xiàng)目過(guò)程評(píng)估、影響評(píng)估和理論機(jī)制評(píng)估三個(gè)部分。項(xiàng)目過(guò)程評(píng)估在評(píng)估項(xiàng)目理論的影響假設(shè)之前,檢驗(yàn)作為該假設(shè)成立基礎(chǔ)的項(xiàng)目服務(wù)或干預(yù)是否得到有效的落實(shí);項(xiàng)目影響評(píng)估主要考察項(xiàng)目實(shí)施對(duì)目標(biāo)對(duì)象帶來(lái)的影響或狀態(tài)的變化;項(xiàng)目理論機(jī)制評(píng)估則驗(yàn)證項(xiàng)目干預(yù)與其預(yù)期目標(biāo)或效果之間的因果假設(shè)關(guān)系是否成立。
1.4 評(píng)估的作用
基于項(xiàng)目理論的評(píng)估研究過(guò)程證明具體項(xiàng)目的理論,其綜合性的特點(diǎn)不僅有助于提升評(píng)估研究的專業(yè)水平,同時(shí)也能在一定程度上提高項(xiàng)目管理水平。第一,基于項(xiàng)目理論的評(píng)估研究有助于對(duì)項(xiàng)目運(yùn)行過(guò)程“黑匣子”的破解,從而掌握項(xiàng)目目標(biāo)實(shí)現(xiàn)的內(nèi)在機(jī)制。第二,干預(yù)對(duì)象及干預(yù)實(shí)施時(shí)間和背景都存在一定的局限性:一方面干預(yù)項(xiàng)目不可能原封不動(dòng)地移植于其他對(duì)象、時(shí)間和背景,另一方面諸多問(wèn)題存在的普遍性以及亟需改善的迫切性,又要求在類似的時(shí)空方位內(nèi)對(duì)特定的對(duì)象不斷采取具有某些相似性的干預(yù)措施或手段,因此,如何借鑒已有項(xiàng)目的成功經(jīng)驗(yàn),提高新項(xiàng)目的設(shè)計(jì)和管理水平、強(qiáng)化項(xiàng)目效果便備受關(guān)注,基于項(xiàng)目理論的評(píng)估研究對(duì)于項(xiàng)目理論的論證有助于項(xiàng)目在不同地區(qū)和不同群體內(nèi)推廣。第三,基于項(xiàng)目理論的評(píng)估不僅需要清晰辨別項(xiàng)目的內(nèi)在假設(shè),而且要對(duì)項(xiàng)目理論假設(shè)進(jìn)行操作進(jìn)而收集相關(guān)的論證所需材料[17],因而對(duì)于評(píng)估研究步驟的設(shè)計(jì)具有一定指導(dǎo)作用。但基于項(xiàng)目理論的評(píng)估是否能夠成功實(shí)施,與如何定義項(xiàng)目理論、項(xiàng)目活動(dòng)是否反映理論假設(shè)以及充足的資金投入與時(shí)間密切相關(guān),因而如果不具備完整實(shí)施基于項(xiàng)目理論的評(píng)估,在實(shí)際操作中可對(duì)其思想加以借鑒。[17]
目前全球兒童健康水平逐步提高,1999—2011年5歲以下兒童發(fā)育遲緩下降了35%(從2.53億下降到1.65億),1990年以來(lái)兒童死亡率下降了41%[18],這與世界各國(guó)政府與國(guó)際組織合作或利用世界銀行等貸款資金,在不同地區(qū),以不同的規(guī)模、不同的方法開(kāi)展了一系列婦幼衛(wèi)生項(xiàng)目密不可分。這些項(xiàng)目的總體目標(biāo)都是改善全球婦女兒童的健康狀況,項(xiàng)目投入大,涉及到國(guó)際組織、政府部門的決策人員、衛(wèi)生管理人員、衛(wèi)生專業(yè)人員、受益人群等,各組織和人員都迫切的希望了解項(xiàng)目的設(shè)計(jì)、執(zhí)行情況、效率和效果及其長(zhǎng)期效應(yīng)等方面的信息,這些信息需要借助科學(xué)的理論和方法予以搜集、整理和分析,即進(jìn)行項(xiàng)目評(píng)價(jià),而項(xiàng)目評(píng)價(jià)也是推動(dòng)項(xiàng)目持續(xù)發(fā)展和推廣的重要基礎(chǔ)。
從總體研究設(shè)計(jì)和思路上來(lái)看,國(guó)外研究通常在項(xiàng)目整體設(shè)計(jì)中包含專門的評(píng)估研究和設(shè)計(jì),從而能夠較早的開(kāi)展項(xiàng)目的評(píng)估,保證評(píng)估工作的前瞻性、時(shí)效性和完整性[19-20];此外,國(guó)外學(xué)者所開(kāi)展的兒童健康干預(yù)相關(guān)的評(píng)估研究,多數(shù)遵循對(duì)比基本思路,如通過(guò)農(nóng)業(yè)干預(yù)手段改善兒童營(yíng)養(yǎng)狀況的“前后”對(duì)比[21]、秘魯通過(guò)小額信貸手段改善貧窮和性別歧視從而改善兒童健康的“有無(wú)”政策對(duì)比[22]等。
從評(píng)估工作具體操作方面,國(guó)外開(kāi)展兒童健康干預(yù)項(xiàng)目評(píng)估的經(jīng)驗(yàn)有以下幾點(diǎn)。一是注重項(xiàng)目執(zhí)行動(dòng)態(tài)過(guò)程的評(píng)估,將過(guò)程評(píng)估與影響評(píng)估放在同等重要的位置,通過(guò)對(duì)項(xiàng)目規(guī)范、程序和目標(biāo)的及時(shí)對(duì)比來(lái)反映項(xiàng)目的實(shí)際進(jìn)展,從而確定在何種程度上能夠達(dá)到或完成項(xiàng)目目標(biāo)。美國(guó)開(kāi)展了預(yù)防兒童肥胖“漫畫健康”項(xiàng)目(“Comics for Health”program),研究者運(yùn)用包括計(jì)劃落實(shí)、服務(wù)提供、服務(wù)接受、目標(biāo)實(shí)現(xiàn)、參與者、背景環(huán)境的六步過(guò)程評(píng)估框架對(duì)該兒童肥胖干預(yù)項(xiàng)目進(jìn)行了評(píng)估,為后續(xù)項(xiàng)目的評(píng)估和推廣奠定了一定的基礎(chǔ)。[23]二是將項(xiàng)目實(shí)施的背景和條件納入項(xiàng)目評(píng)估框架,認(rèn)識(shí)到識(shí)別項(xiàng)目開(kāi)展的不同背景和條件的重要性[24],包括項(xiàng)目參與方、組織機(jī)構(gòu)、歷史、文化、地理、民族、宗教、政治、歷史階段、員工等[25]。荷蘭學(xué)者利用RE-AIM框架從目標(biāo)人群的參與性、學(xué)校基本情況、實(shí)際運(yùn)用、維護(hù)四個(gè)方面對(duì)促進(jìn)兒童體育活動(dòng)的操場(chǎng)計(jì)劃(Playgrounds program)進(jìn)行了評(píng)估,為如何有效將操場(chǎng)計(jì)劃付諸實(shí)踐提供信息。[26]三是國(guó)外研究逐步將其作為項(xiàng)目評(píng)估中的一個(gè)重要組成部分和步驟來(lái)指導(dǎo)評(píng)估工作的開(kāi)展,不僅有助于項(xiàng)目計(jì)劃、修正和行為改變等知識(shí)的積累,而且有助于具體項(xiàng)目評(píng)估工作的實(shí)施,基于項(xiàng)目理論的評(píng)估主要運(yùn)用于營(yíng)養(yǎng)教育[27]、疾病預(yù)防[28-29]等健康促進(jìn)領(lǐng)域。國(guó)外兒童健康干預(yù)評(píng)估工作的特點(diǎn)都與基于項(xiàng)目理論的評(píng)估思想相一致,如注重過(guò)程評(píng)估、作用機(jī)制、項(xiàng)目背景和條件的探索。為便于理解基于項(xiàng)目理論評(píng)估的思想、特點(diǎn)、步驟以及作用,以Jeanine Prommier[30]等人的學(xué)校健康促進(jìn)的現(xiàn)實(shí)評(píng)估研究為例進(jìn)行說(shuō)明。
背景:學(xué)校是開(kāi)展健康促進(jìn)的關(guān)鍵場(chǎng)所,但以什么方法對(duì)學(xué)校開(kāi)展健康促進(jìn)進(jìn)行評(píng)估目前仍然是一個(gè)主要議題。在分析健康促進(jìn)評(píng)估現(xiàn)狀的基礎(chǔ)上,針對(duì)健康促進(jìn)評(píng)估開(kāi)展面臨的挑戰(zhàn)和問(wèn)題,如項(xiàng)目周期的限制不足以反應(yīng)當(dāng)?shù)氐臈l件和困難,事物自身長(zhǎng)期趨勢(shì)無(wú)法從項(xiàng)目影響中剝離,項(xiàng)目效果小于預(yù)期,缺乏解釋干預(yù)與影響之間錯(cuò)綜復(fù)雜關(guān)系的理論等,本案例運(yùn)用現(xiàn)實(shí)評(píng)估方法對(duì)學(xué)校開(kāi)展健康促進(jìn)進(jìn)行評(píng)估。
評(píng)估解決的關(guān)鍵問(wèn)題:根據(jù)現(xiàn)實(shí)評(píng)估的思想和特點(diǎn),研究將學(xué)校健康促進(jìn)評(píng)估細(xì)化為三個(gè)關(guān)鍵問(wèn)題:1.學(xué)校開(kāi)展健康促進(jìn)的機(jī)制和環(huán)境因素是什么?2.制定的方案和策略如何通過(guò)項(xiàng)目影響教師健康促進(jìn)實(shí)踐的開(kāi)展和學(xué)校健康促進(jìn)氛圍的形成?3.健康教育實(shí)踐如何影響學(xué)校所帶來(lái)的幸福感以及開(kāi)展健康促進(jìn)對(duì)學(xué)生掌握生活技能有什么影響?
理論假設(shè):根據(jù)變化理論模型,研究假定在項(xiàng)目特定的背景(教育環(huán)境、社會(huì)環(huán)境、學(xué)?,F(xiàn)狀等)下,學(xué)校健康促進(jìn)的策略(加強(qiáng)教師的培訓(xùn)、獲得學(xué)校團(tuán)隊(duì)的支持、改善資源和工具的供給、提高相關(guān)機(jī)構(gòu)的認(rèn)識(shí))能夠?qū)處熃】荡龠M(jìn)實(shí)踐、學(xué)校健康促進(jìn)氛圍、教師和學(xué)生學(xué)校幸福感、學(xué)生健康知識(shí)態(tài)度和技能、學(xué)校和家庭之間關(guān)系產(chǎn)生積極的作用,進(jìn)而改善學(xué)生的社會(huì)、心理和物理健康。
評(píng)估方法:通過(guò)問(wèn)卷調(diào)查和訪談收集相關(guān)資料,運(yùn)用基于歸納思想的定性方法探討學(xué)校開(kāi)展健康促進(jìn)的機(jī)制和環(huán)境因素,運(yùn)用基于演繹思想的定量方法測(cè)量相關(guān)策略實(shí)施所產(chǎn)生的變化,進(jìn)而對(duì)項(xiàng)目的機(jī)制、過(guò)程和結(jié)果進(jìn)行了分析和評(píng)估。
結(jié)果及其應(yīng)用:研究對(duì)學(xué)校開(kāi)展健康促進(jìn)一般機(jī)制和環(huán)境因素及其所帶來(lái)的結(jié)果進(jìn)行了梳理和分類,為研究者全面評(píng)估學(xué)校健康促進(jìn)項(xiàng)目提供了一個(gè)合適的解決方案,此外,不僅能夠充分展示學(xué)校健康促進(jìn)項(xiàng)目的效果,同時(shí)為后續(xù)項(xiàng)目的開(kāi)展和推廣提供了證據(jù)和基礎(chǔ)。
我國(guó)政府非常重視提高兒童健康水平,幾十年來(lái),我國(guó)兒童健康狀況得到明顯改善,2010年提前實(shí)現(xiàn)了聯(lián)合國(guó)千年發(fā)展目標(biāo)[31-32],但我國(guó)婦幼健康水平與其他國(guó)家相比仍存在較大差距,5歲以下兒童死亡率仍處于世界中等水平[33-34]。
從研究思路和設(shè)計(jì)上來(lái)看,國(guó)內(nèi)學(xué)者所開(kāi)展的相關(guān)研究,多遵循“政策過(guò)程階段理論”的總體框架,前后對(duì)比是其基本思路[35],具體可以分為:簡(jiǎn)單“前—后”對(duì)比分析、“投射—實(shí)施后”對(duì)比分析、“有—無(wú)”政策對(duì)比分析、實(shí)際與規(guī)劃的對(duì)比分析等。但在我國(guó)已頒布并實(shí)施的眾多公共政策項(xiàng)目中,只有部分項(xiàng)目包含專門的評(píng)估研究和設(shè)計(jì),并且多是在項(xiàng)目執(zhí)行較長(zhǎng)時(shí)間后,甚至即將結(jié)束時(shí)才著手展開(kāi)評(píng)估的研究和設(shè)計(jì),項(xiàng)目活動(dòng)終結(jié)之后對(duì)靜態(tài)結(jié)果進(jìn)行評(píng)估且周期較長(zhǎng),研究工作的前瞻性、及時(shí)性較差,因此項(xiàng)目實(shí)施過(guò)程中存在問(wèn)題的最終解決往往滯后。同時(shí)評(píng)估指標(biāo)的設(shè)計(jì)多針對(duì)政策實(shí)施后的效果和產(chǎn)出,較少涉及項(xiàng)目方案和執(zhí)行的動(dòng)態(tài)過(guò)程,評(píng)估范圍較狹窄、重心偏后,較少對(duì)干預(yù)措施發(fā)揮作用和產(chǎn)生效果的機(jī)制進(jìn)行探索,忽視了干預(yù)措施產(chǎn)生變化的中間過(guò)程的研究,因此也就很難對(duì)項(xiàng)目執(zhí)行的改進(jìn)提供有價(jià)值的建議。[36]
從研究?jī)?nèi)容和方法上來(lái)看,目前兒童健康干預(yù)研究大多圍繞如何建立評(píng)估指標(biāo)體系,包括健康指標(biāo)體系的一些方法學(xué)探討和建立指標(biāo)體系的整個(gè)流程,最終產(chǎn)出相應(yīng)的干預(yù)評(píng)估指標(biāo)體系。我國(guó)目前針對(duì)兒童健康狀況所采取的兒童健康干預(yù)措施主要包括實(shí)施發(fā)放營(yíng)養(yǎng)包計(jì)劃、改善孕產(chǎn)婦和兒童營(yíng)養(yǎng)不良[37],開(kāi)展健康教育、營(yíng)養(yǎng)教育提高健康知識(shí)和行為改善兒童健康狀況[38-39],實(shí)施綜合營(yíng)養(yǎng)干預(yù)項(xiàng)目改善兒童健康狀況[40]等,干預(yù)對(duì)象多為需方兒童。常規(guī)做法是將指標(biāo)體系轉(zhuǎn)化為調(diào)查表,然后選擇一些政策/措施的干預(yù)組和對(duì)照組進(jìn)行問(wèn)卷調(diào)查,最后對(duì)收集到的調(diào)查數(shù)據(jù)進(jìn)行數(shù)理統(tǒng)計(jì)分析,并對(duì)數(shù)據(jù)結(jié)果進(jìn)行評(píng)價(jià)。而對(duì)于某種干預(yù)政策/措施的評(píng)價(jià)僅停留于有效或無(wú)效層面,干預(yù)政策/措施并沒(méi)有得到有效的推廣和應(yīng)用,其主要原因是沒(méi)有對(duì)干預(yù)政策/措施發(fā)揮作用的機(jī)制進(jìn)行深入分析和及時(shí)、有效的總結(jié)。
長(zhǎng)期以來(lái),針對(duì)兒童健康改善的干預(yù)項(xiàng)目得到較為廣泛的開(kāi)展,但對(duì)上述干預(yù)項(xiàng)目進(jìn)行評(píng)估的思路和方法還存在一些不足,如對(duì)干預(yù)項(xiàng)目理論的研究不夠重視、評(píng)估周期設(shè)置不當(dāng)、忽視干預(yù)過(guò)程和作用機(jī)制的探索等,相關(guān)研究較為欠缺。
4.1 轉(zhuǎn)變傳統(tǒng)兒童健康干預(yù)評(píng)估觀念
提高對(duì)兒童健康干預(yù)項(xiàng)目理論的重視,轉(zhuǎn)變傳統(tǒng)兒童健康干預(yù)項(xiàng)目評(píng)估的觀念。要構(gòu)建兒童健康干預(yù)項(xiàng)目理論并對(duì)其進(jìn)行驗(yàn)證,這是開(kāi)展兒童健康干預(yù)項(xiàng)目的基礎(chǔ),如所構(gòu)建的項(xiàng)目理論不成立,那么兒童健康干預(yù)項(xiàng)目的實(shí)施可能不會(huì)帶來(lái)所期望的效果,因而就沒(méi)有開(kāi)展該干預(yù)項(xiàng)目的必要或者應(yīng)及時(shí)調(diào)整項(xiàng)目的具體內(nèi)容和實(shí)施過(guò)程。
4.2 從注重結(jié)果的鑒定性評(píng)估轉(zhuǎn)向重視過(guò)程的診斷性評(píng)估
注重對(duì)兒童健康干預(yù)項(xiàng)目實(shí)施過(guò)程和實(shí)現(xiàn)機(jī)制的分析,從注重結(jié)果的鑒定性評(píng)估轉(zhuǎn)向重視過(guò)程的診斷性評(píng)估。因此從兒童健康干預(yù)項(xiàng)目評(píng)估的內(nèi)容分析,不僅是干預(yù)項(xiàng)目實(shí)際產(chǎn)生的效果及影響,同時(shí)應(yīng)包括對(duì)項(xiàng)目機(jī)制運(yùn)作條件如干預(yù)項(xiàng)目實(shí)施的經(jīng)濟(jì)、社會(huì)、地理、文化環(huán)境等;項(xiàng)目干預(yù)的實(shí)施過(guò)程及實(shí)現(xiàn)機(jī)制,如干預(yù)過(guò)程中發(fā)生了什么變化,項(xiàng)目實(shí)施中有關(guān)的社會(huì)各方的參與反應(yīng),不同機(jī)構(gòu)、人群在干預(yù)過(guò)程中發(fā)揮了什么作用以及作用是如何產(chǎn)生的,干預(yù)項(xiàng)目投入和產(chǎn)出之間或者項(xiàng)目干預(yù)是如何實(shí)現(xiàn)最終影響結(jié)果的,項(xiàng)目實(shí)施計(jì)劃落實(shí)情況等。
4.3 對(duì)兒童健康干預(yù)評(píng)估結(jié)果及時(shí)進(jìn)行反饋與運(yùn)用
通過(guò)對(duì)兒童健康干預(yù)項(xiàng)目進(jìn)行綜合評(píng)估,了解現(xiàn)狀、總結(jié)所取得的成效和存在的問(wèn)題,分析項(xiàng)目效果產(chǎn)生的背景、條件和機(jī)制以及問(wèn)題發(fā)生的內(nèi)在原因,從而為動(dòng)態(tài)監(jiān)測(cè)項(xiàng)目實(shí)施效果提供技術(shù)支持。對(duì)兒童健康干預(yù)項(xiàng)目的實(shí)施有不同的背景和條件的分析,及時(shí)對(duì)兒童健康干預(yù)項(xiàng)目評(píng)估的結(jié)果進(jìn)行合理運(yùn)用,不僅有助于解決如何將有限的資源用于最需要、最有效的領(lǐng)域,還有助于及時(shí)將項(xiàng)目進(jìn)行適宜推廣。
4.4 注重加強(qiáng)兒童健康干預(yù)項(xiàng)目評(píng)估能力建設(shè)
目前兒童健康干預(yù)項(xiàng)目評(píng)估工作靜態(tài)多、動(dòng)態(tài)少、結(jié)論多、過(guò)程少,兒童健康干預(yù)項(xiàng)目評(píng)估方法和思路上存在不足,相關(guān)研究較為欠缺,這種現(xiàn)狀非常不利于兒童健康干預(yù)工作的開(kāi)展。應(yīng)該注重加強(qiáng)兒童健康干預(yù)工作評(píng)估能力建設(shè),不斷將一些成熟的理論和方法引入到兒童健康干預(yù)評(píng)估工作中,提升兒童健康干預(yù)評(píng)估工作研究專業(yè)化水平,同時(shí)提高具體的項(xiàng)目評(píng)估研究和項(xiàng)目管理水平。
[1]張勝康.干預(yù)評(píng)估體系的建立與運(yùn)用——關(guān)于青少年艾滋病預(yù)防干預(yù)項(xiàng)目實(shí)施效果的評(píng)估[J].青年探索,2007(2):79-81.
[2]John Ovrevteit.Evaluating Health Intervention[R].Buckinham:Open University Press,1998.
[3]Evaluation Questions and Standards of Effectiveness[R].2005.
[4]白常凱.公共政策評(píng)估程式的研究[D].上海:復(fù)旦大學(xué),2004.
[5]衛(wèi)生部.中國(guó)0-6歲兒童營(yíng)養(yǎng)發(fā)展報(bào)告[R].2012.
[6]趙麗云,于冬梅,劉愛(ài)東.2006年中國(guó)兒童與孕產(chǎn)婦營(yíng)養(yǎng)健康狀況調(diào)查結(jié)果分析[J].衛(wèi)生研究,2008,37(1): 65-67.
[7]王繼紅,Jean Allen,Cath Barker.拉薩市鄉(xiāng)村衛(wèi)生人員兒童發(fā)熱、腹瀉綜合管理的培訓(xùn)效果評(píng)價(jià)研究[J].中國(guó)兒童保健雜志,2011,19(2):187-189.
[8]周婧雅,劉芬,李濤,等.陜西省部分地區(qū)5歲以下兒童健康干預(yù)的效果評(píng)價(jià)[J].中國(guó)兒童保健雜志,2011,19(8):769-771.
[9]方巍,祝建華,何銓.社會(huì)項(xiàng)目評(píng)估[M].上海:上海人民出版社,2012.
[10]Fitz-Gibbon C T,L L Morris.Theory-Based Evaluation[J].Evaluation Practice,1996,17(2):177-184.
[11]Bickman L.Using Program Theory in Evaluation[J].New Directions for Program Evaluation,1987,33:5-18.
[12]Rogers P J.Theory-Based Evaluation:Reflections Ten Years On[J].New Directions for evaluation,2007,114:63-67.
[13]方巍,張暉,何銓.社會(huì)福利項(xiàng)目管理與評(píng)估[M].北京:中國(guó)社會(huì)出版社,2010.
[14]Leone L.Realistic Evaluation of an Illicit Drug Deterrence Programme:Analysis of a Case Study[J].Evaluation,2008,14(1):9-28.
[15]陳錦堂.項(xiàng)目評(píng)估:程序邏輯模式[M].北京:北京大學(xué)出版社,2008.
[16]馬承鵬.層次評(píng)估理論在艾滋病防治項(xiàng)目評(píng)估中的應(yīng)用研究[D].昆明:昆明醫(yī)學(xué)院,2006.
[17]Birckmayer J D,Weiss C H.Theory-based evaluation in practice:What do we learn?[J].Evaluation Review,2000,24(4):407-431.
[18]聯(lián)合國(guó).千年發(fā)展目標(biāo)報(bào)告2013年[R].2013.
[19]Marsh D R,Pachon H,Schroeder D G,et al.Design of a prospective,randomized evaluation of an integrated nutrition program in rural Vietnam[J].Food and Nutrition Bulletin,2002,23(4):34-44.
[20]River J A,Rodriguez G,Shamah T,et al.Implementation,monitoring,and evaluation of the nutrition component of the Mexican Social Programme(PROGRESA)[J]. Food and Nutrition Bulletin,2000,21(1):35-42.
[21]Edoardo Masset research fellow,Lawrence Haddact director,Alecander Comelius research assistant,et al.Effectiveness of agricultural interventions that aim to improve nutritional status of children:Systematic review[J].BMJ,2012,344:d8222.
[22]Harmad R,F(xiàn)ernald L C,karlan D S.Health education for microcredit clients in Peru:a randomized controlled trial[J].BMC Public Health,2011,11:51.
[23]Branscum P,Sharma M,Wang L L,et al.A Process E-valuation of a Social Cognitive Theory-Based Childhood O-besity revention Intervention The Comics for Health Program[J].Health Promot Pract,2013,14(2):189-198.
[24]Woodhead M.Psychosocial impacts of child work:a framework for research,monitoring and intervention[R].2004.
[25]Eisenmann JC,Gentile D A,Welk G J,et al.SWITCH rationale,design,and implementation of a community,school,and family based intervention to modify behaviors related to childhood obesity[J].BMC Public Health, 2008,8:223.
[26]Janssen M,Toussaint H M,van Mechelen W,et al. Translating the PLAYgrounds program into practice A process evaluation using the RE-AIM framework[J].Journal of Science and Medicine in Sport,2012,16(3):211-216.
[27]Brug J,Steenhuis I,Van Assema P,etal.The impactofa computer-tailorednutrition intervention[J].Preventive Medicine,1996,25(3):236-242.
[28]Pentz M A,Dwyer JH,MacKinnon D P,et al.Primary prevention of chronic diseases in adolescence:Effects of the Midwestern prevention project on tobacco use[J].A-merican Journal of Epidemiology,1989,130(4): 713-724.
[29]Feindler E L,Marriott SA,Iwata M.Group anger control training for junior high school delinquents[J].Cognitive Therapy and Research,1984,8(3):299-311.
[30]Prommier J,Guevel M,Jourdan D.Evaluation of health promotion in schools:a realistic evaluation approach using mixed methods[J].BMC Public Health,2010,10:43.
[31]中國(guó)婦幼衛(wèi)生事業(yè)發(fā)展報(bào)告(2011)[J].中國(guó)婦幼衛(wèi)生雜志,2012,3(2):49-58.
[32]衛(wèi)生部.衛(wèi)生部實(shí)施2001-2010年中國(guó)婦女兒童發(fā)展綱要終期評(píng)估報(bào)告[R].2011.
[33]WHO.Trends in Maternal Mortality:1990 to 2008[R].2011.
[34]UNICEF.The State of the World’s Children 2009[R].2009.
[35]謝媛.政策評(píng)價(jià)方法與選擇[J].江西行政學(xué)院學(xué)報(bào),2000(4):19-20.
[36]王永.公共政策評(píng)估方案設(shè)計(jì)若干問(wèn)題初探——以“鄉(xiāng)鎮(zhèn)衛(wèi)生院招聘執(zhí)業(yè)醫(yī)師”試點(diǎn)項(xiàng)目為例[D].濟(jì)南:山東大學(xué),2009.
[37]王麗娟,霍軍生,孫靜,等.營(yíng)養(yǎng)包對(duì)汶川地震后四川省理縣6-23月齡嬰幼兒干預(yù)效果研究[J].衛(wèi)生研究,2011,40(1):61-64.
[38]張丹,楊少萍,張曉明,等.健康教育干預(yù)對(duì)預(yù)防兒童維生素A缺乏的效果評(píng)價(jià)[J].中國(guó)婦幼保健,2012,27(12):1302-1304.
[39]夏時(shí)暢,張新衛(wèi),徐水洋,等.中國(guó)/WHO“以營(yíng)養(yǎng)教育為重點(diǎn)的學(xué)校健康促進(jìn)”項(xiàng)目效果評(píng)價(jià)[J].中國(guó)健康教育,2006,22(9):703-706.
[40]申鴻,李高中.陜西農(nóng)村嬰幼兒綜合營(yíng)養(yǎng)干預(yù)研究[J].中國(guó)臨床研究,2011,24(9):857-858.
Child health intervention:Theory-based evaluation
DING Xue,WANG Fang,LIU Xiao-xi,CHEN Yong-chao
Institute of Medical Information,Center for Health Policy and Management,Chinese Academy of Medical Sciences,Beijing 100020,China
Child health intervention is protracted and complex.Appropriate assessment plays an important role in promoting its sustainable development.The integration including contents and methods of theory-based evaluation contributes to cracking the black box of the project,making evaluation more professional and raising the level of the specific project evaluation and management.There is still a prominent gap between child health in China and in developed countries.Numerous intervention projects are aimed at common diseases in children,healthy lifestyle,growth and development,the cognitive andmedical behavior toward child-watchers,basic capacity building ofmaternal and child health care institutions have been carried out.However,research on evaluation of projects is insufficient,and ideas and methods are also insufficient.This article analyzes theory-based evaluation and status at home and abroad and makes some recommendations,including transforming the concept of traditional evaluation of child health intervention,converting the emphasis of assessment on outcome to process,using the assessment results in time,and strengthening the capacity of evaluation on child health intervention project.
Theory-based evaluation;Child health;Intervention project;Evaluation
R197
A
10.3969/j.issn.1674-2982.2013.10.012
2013-08-26
2013-09-23
(編輯 薛 云)
中央級(jí)公益性科研院所基本科研業(yè)務(wù)費(fèi)(12R0104);國(guó)家衛(wèi)生和計(jì)劃生育委員會(huì)委托項(xiàng)目“云南怒江兒童健康綜合干預(yù)重點(diǎn)聯(lián)系點(diǎn)技術(shù)支持項(xiàng)目”
丁雪,女(1985年—),碩士,研究實(shí)習(xí)員,主要研究方向?yàn)榛鶎有l(wèi)生、衛(wèi)生服務(wù)研究。E-mail:ding.xue@imicams.ac.cn
王芳。E-mail:wang.fang@imicams.ac.cn