摘 要:【目的】探索河南省科技獎(jiǎng)勵(lì)工作后評(píng)估框架和指標(biāo)體系,推進(jìn)科技獎(jiǎng)勵(lì)工作不斷完善?!痉椒ā扛鶕?jù)河南省科技獎(jiǎng)勵(lì)工作的特點(diǎn),基于ATP通用邏輯模型構(gòu)建科技獎(jiǎng)勵(lì)工作后評(píng)估邏輯框架,建立融合相關(guān)性、效率、效果和影響等評(píng)估準(zhǔn)則的科技獎(jiǎng)勵(lì)后評(píng)估指標(biāo)體系,并運(yùn)用隸屬度函數(shù)對(duì)后評(píng)估邏輯框架和指標(biāo)體系在2022年河南省科技獎(jiǎng)勵(lì)工作后評(píng)估中的應(yīng)用效果進(jìn)行檢驗(yàn)。【結(jié)果】2022年河南科技獎(jiǎng)勵(lì)工作評(píng)估結(jié)論為成功,但在獎(jiǎng)種設(shè)置、獎(jiǎng)勵(lì)制度建設(shè)等方面有待提升。【結(jié)論】通過(guò)開(kāi)展后評(píng)估工作,初步建立了科技獎(jiǎng)勵(lì)工作第三方監(jiān)督和評(píng)估結(jié)果反饋機(jī)制,提升了河南省科技獎(jiǎng)勵(lì)工作的質(zhì)量和整體績(jī)效。
關(guān)鍵詞:科技獎(jiǎng)勵(lì);后評(píng)估;ATP通用邏輯模型;評(píng)估準(zhǔn)則;指標(biāo)體系;隸屬度函數(shù)
中圖分類(lèi)號(hào):G322 文獻(xiàn)標(biāo)志碼:A 文章編號(hào):1003-5168(2024)17-0144-06
DOI:10.19968/j.cnki.hnkj.1003-5168.2024.17.030
Construction and Application of the Logical Framework for Post-evaluation of Science and Technology Awards in Henan Province
FENG Wenjun WANG Miao XIANG Yong ZHANG Hui
(Henan Science and Technology Innovation Promotion Center,Zhengzhou 454003, China)
Abstract: [Purposes] This paper aims to explore the post-evaluation framework and index system of science and technology awards in Henan Province, and promote the continuous improvement of science and technology reward work. [Methods] According to the characteristics of science and technology awards in Henan Province, a logical framework applied in post-evaluation of the science and technology awards procedures was constructed on the basis of ATP general logic model. Moreover, the membership function is used to test the application effect of the post-evaluation logical framework and index system in the post-evaluation of science and technology awards in Henan Province in 2022. [Findings] The evaluation conclusion of science and technology award work of Henan Province in 2022 is successful, but it needs to be improved in terms of award setting and reward system construction. [Conclusions] Through the post-evaluation work, a third-party supervision and evaluation result feedback mechanism for science and technology awards was initially established, which improved the quality and overall performance of science and technology awards in Henan Province.
Keywords:science and technology award; post-evaluation; ATP general logical model; evaluation criteria; index system; membership function
0 引言
科技獎(jiǎng)勵(lì)作為我國(guó)科技政策的重要組成部分,代表著政府和社會(huì)對(duì)科技工作者成果及其貢獻(xiàn)的認(rèn)可,在激勵(lì)自主創(chuàng)新、激發(fā)人才活力、營(yíng)造良好創(chuàng)新環(huán)境等方面發(fā)揮著重要作用?!蛾P(guān)于深化科技獎(jiǎng)勵(lì)制度改革的方案》[1]和《河南省深化科技獎(jiǎng)勵(lì)制度改革方案》[2]中明確提出,建立科技獎(jiǎng)勵(lì)工作后評(píng)估制度,每年科學(xué)技術(shù)獎(jiǎng)勵(lì)大會(huì)后,委托第三方機(jī)構(gòu)對(duì)年度獎(jiǎng)勵(lì)工作進(jìn)行評(píng)估,促進(jìn)科技獎(jiǎng)勵(lì)工作不斷完善。《國(guó)務(wù)院辦公廳關(guān)于完善科技成果評(píng)價(jià)機(jī)制的指導(dǎo)意見(jiàn)》[3]在關(guān)于改革完善科技成果獎(jiǎng)勵(lì)體系中同樣提出加強(qiáng)事中事后監(jiān)督,提高科技獎(jiǎng)勵(lì)整體水平。
科技評(píng)估是政府加強(qiáng)科技管理和完善科學(xué)決策的重要舉措。因此,科技獎(jiǎng)勵(lì)工作后評(píng)估整體定位是在科技獎(jiǎng)勵(lì)工作完成后,由獨(dú)立的機(jī)構(gòu)按照規(guī)定和規(guī)范化要求,對(duì)工作目標(biāo)、執(zhí)行過(guò)程、效益作用和影響等進(jìn)行系統(tǒng)、客觀的再評(píng)估,通過(guò)建立第三方監(jiān)督和評(píng)估結(jié)果反饋機(jī)制從政策設(shè)計(jì)、目標(biāo)設(shè)置、執(zhí)行過(guò)程等方面不斷優(yōu)化,提升科技獎(jiǎng)勵(lì)工作質(zhì)量和整體績(jī)效。
1 后評(píng)估發(fā)展現(xiàn)狀
項(xiàng)目后評(píng)估起始于20世紀(jì)30年,是在項(xiàng)目完成并運(yùn)行一段時(shí)間后,對(duì)項(xiàng)目目的、執(zhí)行過(guò)程、效益、作用和影響等進(jìn)行系統(tǒng)、客觀地分析和總結(jié)的技術(shù)經(jīng)濟(jì)活動(dòng)[4]。它已從單一的財(cái)務(wù)評(píng)價(jià)發(fā)展到包含經(jīng)濟(jì)、技術(shù)和可持續(xù)性后評(píng)價(jià)等多類(lèi)內(nèi)容的綜合評(píng)價(jià)。Ilzkovitz等[5]指出了項(xiàng)目后評(píng)估的4個(gè)目標(biāo):加強(qiáng)對(duì)競(jìng)爭(zhēng)政策決策影響力的理解、提高競(jìng)爭(zhēng)政策的透明度和問(wèn)責(zé)性、提倡競(jìng)爭(zhēng)和競(jìng)爭(zhēng)政策、改善未來(lái)的決策實(shí)踐[6]。世界銀行、亞洲開(kāi)發(fā)銀行、美國(guó)、日本等國(guó)際機(jī)構(gòu)和國(guó)家逐漸形成了較為完善的后評(píng)估體系和獨(dú)立的評(píng)估機(jī)構(gòu)。我國(guó)的后評(píng)估起始于1988年,現(xiàn)已廣泛應(yīng)用于財(cái)政績(jī)效[7]、項(xiàng)目[8]、政策[9],甚至立法效果[10]等評(píng)估評(píng)價(jià)工作。
目前學(xué)術(shù)界關(guān)于科技獎(jiǎng)勵(lì)后評(píng)估的研究成果并不多,且前期的研究工作主要集中在科技獎(jiǎng)勵(lì)制度運(yùn)行績(jī)效評(píng)價(jià)和科技獎(jiǎng)勵(lì)獲獎(jiǎng)項(xiàng)目績(jī)效評(píng)價(jià),難以涵蓋科技獎(jiǎng)勵(lì)工作后評(píng)估的全貌。《深化科技獎(jiǎng)勵(lì)制度改革方案》印發(fā)后才出現(xiàn)科技獎(jiǎng)勵(lì)工作后評(píng)估相關(guān)研究。危懷安等[11]構(gòu)建了社會(huì)、行政、制度、管理和文化“五位一體”的國(guó)家科技獎(jiǎng)勵(lì)工作后評(píng)估研究邏輯,從過(guò)程維與結(jié)果維兩個(gè)視角探討了國(guó)家科技獎(jiǎng)勵(lì)后評(píng)估的主要對(duì)象和關(guān)鍵內(nèi)容。張成偉[12]基于“概念的操作化定義—后評(píng)估維度確定與解構(gòu)—后評(píng)估指標(biāo)篩選與賦權(quán)—指標(biāo)釋義與評(píng)分標(biāo)準(zhǔn)確定”邏輯,運(yùn)用專(zhuān)家咨詢法和層次分析法建立了國(guó)家科技獎(jiǎng)勵(lì)后評(píng)估指標(biāo)體系。
2 河南省科技獎(jiǎng)勵(lì)工作后評(píng)估邏輯框架構(gòu)建與指標(biāo)體系開(kāi)發(fā)
2.1 評(píng)估邏輯模型
設(shè)計(jì)科學(xué)合理的評(píng)估框架是開(kāi)展評(píng)估工作的基礎(chǔ),目前主要的科技評(píng)估框架有邏輯模型和變革理論[13],其中邏輯模型中的ATP(Advanced Technology Program)通用邏輯模型通過(guò)建立“社會(huì)目標(biāo)—具體政策—目標(biāo)任務(wù)—組織機(jī)制—實(shí)施效果”完整評(píng)估鏈條,向計(jì)劃管理者和政策制定者反饋評(píng)估結(jié)果及建議,與科技獎(jiǎng)勵(lì)工作后評(píng)估定位高度吻合。因此,本文選用ATP通用邏輯模型,從河南省科技獎(jiǎng)勵(lì)的社會(huì)目標(biāo)出發(fā),分析現(xiàn)行科技獎(jiǎng)勵(lì)政策、組織機(jī)制和實(shí)施效果,厘清科技獎(jiǎng)勵(lì)目標(biāo)和任務(wù)實(shí)現(xiàn)路徑(圖1)。
河南省科技獎(jiǎng)勵(lì)的社會(huì)目標(biāo)是弘揚(yáng)求真務(wù)實(shí)、勇于創(chuàng)新的科學(xué)精神,營(yíng)造尊重知識(shí)、尊重人才的良好氛圍,調(diào)動(dòng)全社會(huì)支持科技創(chuàng)新的積極性,推動(dòng)科技進(jìn)步和經(jīng)濟(jì)社會(huì)發(fā)展、加快建設(shè)創(chuàng)新型河南和全國(guó)科技創(chuàng)新高地。具體概況為激勵(lì)導(dǎo)向目標(biāo)和凝聚人才目標(biāo)??萍吉?jiǎng)勵(lì)政策包括獎(jiǎng)種設(shè)置、獎(jiǎng)勵(lì)結(jié)構(gòu)和獎(jiǎng)金標(biāo)準(zhǔn)等。組織機(jī)制包括科技獎(jiǎng)勵(lì)工作組織機(jī)制和評(píng)審監(jiān)督機(jī)制,通過(guò)建立科學(xué)的評(píng)價(jià)方法、規(guī)范高效的工作流程和公開(kāi)透明的評(píng)審監(jiān)督機(jī)制,提高科技獎(jiǎng)勵(lì)評(píng)審質(zhì)量和公信力。實(shí)施效果是指獎(jiǎng)勵(lì)效果,主要包括獎(jiǎng)勵(lì)成效和滿意度。
2.2 評(píng)估準(zhǔn)則
評(píng)估準(zhǔn)則是開(kāi)展評(píng)估工作的若干標(biāo)準(zhǔn),國(guó)際上普遍采用相關(guān)性、效率、效果、影響、可持續(xù)等準(zhǔn)則開(kāi)展公共R&D(研究與開(kāi)發(fā))評(píng)估。根據(jù)前面建立的河南省科技獎(jiǎng)勵(lì)工作后評(píng)估邏輯模型,選擇相關(guān)性、效率、效果和影響等4個(gè)評(píng)估準(zhǔn)則。
相關(guān)性:從科技獎(jiǎng)勵(lì)工作目標(biāo)定位、獎(jiǎng)種設(shè)置等方面評(píng)估科技獎(jiǎng)勵(lì)工作與河南省科技創(chuàng)新政策的相符程度,判斷科技獎(jiǎng)勵(lì)工作的設(shè)立是否合理。
效率:從科技獎(jiǎng)勵(lì)工作組織實(shí)施、評(píng)審監(jiān)督等方面評(píng)估科技獎(jiǎng)勵(lì)工作整體投入與產(chǎn)出之間的關(guān)系,判斷科技獎(jiǎng)勵(lì)工作實(shí)施過(guò)程是否科學(xué)高效。
效果:從科技獎(jiǎng)勵(lì)成效等方面評(píng)估科技獎(jiǎng)勵(lì)工作目標(biāo)的實(shí)現(xiàn)程度,判斷科技獎(jiǎng)勵(lì)工作是否達(dá)到預(yù)期效果。
影響:從獎(jiǎng)勵(lì)工作滿意度方面評(píng)估科技獎(jiǎng)勵(lì)工作社會(huì)滿意度,判斷社會(huì)對(duì)科技獎(jiǎng)勵(lì)工作的公認(rèn)程度、目標(biāo)群體的滿意度等。
2.3 評(píng)估指標(biāo)體系
根據(jù)前文建立的河南省科技獎(jiǎng)勵(lì)工作后評(píng)估邏輯模型和選擇的評(píng)估準(zhǔn)則,通過(guò)梳理研究相關(guān)政策、規(guī)范和文獻(xiàn),確定了“科技獎(jiǎng)勵(lì)工作+后評(píng)估”的定位,設(shè)計(jì)開(kāi)發(fā)了目標(biāo)定位、獎(jiǎng)種設(shè)置、組織實(shí)施、評(píng)審監(jiān)督、獎(jiǎng)勵(lì)效果等5個(gè)一級(jí)指標(biāo),并細(xì)化了14個(gè)二級(jí)指標(biāo)、22個(gè)三級(jí)指標(biāo)(表1)。該評(píng)估指標(biāo)體系覆蓋了《國(guó)家科學(xué)技術(shù)獎(jiǎng)勵(lì)績(jī)效評(píng)價(jià)暫行辦法》[14]要求的評(píng)價(jià)內(nèi)容,在技術(shù)方法層面推動(dòng)科技獎(jiǎng)勵(lì)工作后評(píng)估機(jī)制與預(yù)算績(jī)效管理的融合,有助于評(píng)價(jià)信息共享與評(píng)價(jià)結(jié)果互認(rèn)。
2.4 評(píng)估等級(jí)
科技獎(jiǎng)勵(lì)工作后評(píng)估堅(jiān)持問(wèn)題導(dǎo)向和結(jié)果導(dǎo)向,重在發(fā)現(xiàn)科技獎(jiǎng)勵(lì)活動(dòng)中存在的問(wèn)題,以及科技獎(jiǎng)勵(lì)工作產(chǎn)生的效果和影響。本次評(píng)估結(jié)果處理采用定性的等級(jí)評(píng)定法,總體評(píng)估結(jié)論設(shè)置不成功、基本成功、成功和非常成功4個(gè)評(píng)估等級(jí)。
3 評(píng)估分析
通過(guò)案卷研究、問(wèn)卷調(diào)查、面訪座談、專(zhuān)家咨詢、數(shù)據(jù)分析等方法,圍繞各一級(jí)評(píng)估指標(biāo)對(duì)2022年河南省科技獎(jiǎng)勵(lì)工作展開(kāi)分析。
3.1 目標(biāo)定位
激勵(lì)導(dǎo)向方面。河南省科技獎(jiǎng)勵(lì)工作堅(jiān)持激勵(lì)性和導(dǎo)向性原則,圍繞河南省經(jīng)濟(jì)社會(huì)發(fā)展全局和產(chǎn)業(yè)結(jié)構(gòu)轉(zhuǎn)型升級(jí)需要,建立健全以創(chuàng)新能力、創(chuàng)新質(zhì)量、實(shí)際貢獻(xiàn)為導(dǎo)向的獎(jiǎng)勵(lì)機(jī)制,重點(diǎn)獎(jiǎng)勵(lì)創(chuàng)新引領(lǐng)作用強(qiáng)、特色優(yōu)勢(shì)突出、對(duì)產(chǎn)業(yè)轉(zhuǎn)型升級(jí)和經(jīng)濟(jì)發(fā)展貢獻(xiàn)大、解決“卡脖子”技術(shù)難題的科技成果,重點(diǎn)獎(jiǎng)勵(lì)具有重大影響力的科學(xué)發(fā)現(xiàn)、具有重大原創(chuàng)性的技術(shù)發(fā)明、具有重大經(jīng)濟(jì)社會(huì)價(jià)值的科技創(chuàng)新成果。在起重裝備、礦山裝備、冶金裝備、交通運(yùn)輸裝備等領(lǐng)域涌現(xiàn)出一大批高水平科技成果,為推動(dòng)河南省制造業(yè)高質(zhì)量發(fā)展提供了有力的科技支撐。
凝聚人才方面。河南省科技獎(jiǎng)勵(lì)工作堅(jiān)持優(yōu)中選優(yōu)、寧缺毋濫的原則,嚴(yán)格評(píng)審標(biāo)準(zhǔn),突出標(biāo)志性成果的質(zhì)量、貢獻(xiàn)和影響。自然科學(xué)獎(jiǎng)、技術(shù)發(fā)明獎(jiǎng)和科技進(jìn)步獎(jiǎng)共提名數(shù)量853項(xiàng),授獎(jiǎng)總數(shù)315項(xiàng)(人),激勵(lì)引導(dǎo)了更多優(yōu)秀科技人才。通過(guò)科技獎(jiǎng)勵(lì)工作,發(fā)現(xiàn)人才、培養(yǎng)人才、支持人才,調(diào)動(dòng)科技人員積極性和創(chuàng)造性,增強(qiáng)科技人員的榮譽(yù)感、責(zé)任感和使命感,激發(fā)人才活力。
3.2 獎(jiǎng)種設(shè)置
河南省科學(xué)技術(shù)獎(jiǎng)包括自然科學(xué)獎(jiǎng)、技術(shù)發(fā)明獎(jiǎng)、科技進(jìn)步獎(jiǎng)、科學(xué)技術(shù)杰出貢獻(xiàn)獎(jiǎng)和科學(xué)技術(shù)合作獎(jiǎng)等五個(gè)獎(jiǎng)種與國(guó)家科技獎(jiǎng)相銜接,符合科學(xué)技術(shù)在基礎(chǔ)研究、技術(shù)發(fā)明、應(yīng)用研究等3個(gè)階段的發(fā)展規(guī)律,授獎(jiǎng)315項(xiàng)符合河南省改革方案中總數(shù)不超過(guò)350項(xiàng)的要求,獲獎(jiǎng)項(xiàng)目領(lǐng)域結(jié)構(gòu)與河南省相關(guān)行業(yè)的實(shí)際科技水平基本相符。
2022年度河南省科技獎(jiǎng)勵(lì)工作共評(píng)審出獲獎(jiǎng)項(xiàng)目315項(xiàng)(人),其中省自然科學(xué)獎(jiǎng)24項(xiàng),技術(shù)發(fā)明獎(jiǎng)16項(xiàng),科技進(jìn)步獎(jiǎng)269項(xiàng),科學(xué)技術(shù)杰出貢獻(xiàn)獎(jiǎng)2人,科學(xué)技術(shù)合作獎(jiǎng)4項(xiàng)(人)(表2)。除杰出貢獻(xiàn)獎(jiǎng)和合作獎(jiǎng)不設(shè)獎(jiǎng)勵(lì)等級(jí)外,自然科學(xué)獎(jiǎng)、技術(shù)發(fā)明獎(jiǎng)和科技進(jìn)步獎(jiǎng)共評(píng)選出特等獎(jiǎng)項(xiàng)目2項(xiàng)、一等獎(jiǎng)項(xiàng)目27項(xiàng)、二等獎(jiǎng)項(xiàng)目118項(xiàng)、三等獎(jiǎng)項(xiàng)目162項(xiàng),比例分別為0.65%、8.74%、38.18%、52.43%。與2020年相比,新增特等獎(jiǎng)2項(xiàng),一等獎(jiǎng)增加了4項(xiàng),二等獎(jiǎng)減少了3項(xiàng),三等獎(jiǎng)增加了14項(xiàng)。符合河南省深化科技獎(jiǎng)勵(lì)制度改革方案的規(guī)定。
在獎(jiǎng)金標(biāo)準(zhǔn)方面,《河南省深化科技獎(jiǎng)勵(lì)制度改革方案》設(shè)定的“杰出貢獻(xiàn)獎(jiǎng)獎(jiǎng)金標(biāo)準(zhǔn)為300萬(wàn)元/人;河南省自然科學(xué)獎(jiǎng)、技術(shù)發(fā)明獎(jiǎng)、科學(xué)技術(shù)進(jìn)步獎(jiǎng)獎(jiǎng)金標(biāo)準(zhǔn)為:一等獎(jiǎng)50萬(wàn)元/項(xiàng)、二等獎(jiǎng)30萬(wàn)元/項(xiàng)、三等獎(jiǎng)20萬(wàn)元/項(xiàng)”,在中部六省中是最高的,強(qiáng)化了科技獎(jiǎng)勵(lì)的激勵(lì)導(dǎo)向。
3.3 組織實(shí)施
河南省科技獎(jiǎng)勵(lì)工作設(shè)立了管理組織架構(gòu)和評(píng)審組織架構(gòu),職責(zé)分工明確,構(gòu)建的獎(jiǎng)勵(lì)工作“二三七五”①工作機(jī)制保證了獎(jiǎng)勵(lì)工作規(guī)范操作,實(shí)現(xiàn)了評(píng)審結(jié)果公平公正,提高了科技獎(jiǎng)勵(lì)評(píng)審質(zhì)量和公信力。
評(píng)審工作實(shí)行“五個(gè)堅(jiān)持”,即堅(jiān)持定性評(píng)價(jià)與定量評(píng)價(jià)相結(jié)合、堅(jiān)持異地答辯和現(xiàn)場(chǎng)答辯相結(jié)合、堅(jiān)持“評(píng)審+考察”機(jī)制、堅(jiān)持評(píng)審全程留痕管理、堅(jiān)持評(píng)審期間封閉管理和各環(huán)節(jié)接受監(jiān)督,評(píng)審組織工作嚴(yán)密、紀(jì)律嚴(yán)明。
評(píng)審工作實(shí)行異議制度,對(duì)異議的分類(lèi)、處理流程、處理時(shí)效、負(fù)責(zé)單位等作出了詳細(xì)的規(guī)定。
3.4 評(píng)審監(jiān)督
從提名到評(píng)審的7個(gè)工作環(huán)節(jié),進(jìn)行5次公示,接受省紀(jì)委駐省科技廳紀(jì)檢監(jiān)察組與廳紀(jì)檢組全程監(jiān)督。實(shí)行評(píng)審觀察員制度,邀請(qǐng)省人大代表、政協(xié)委員、新聞媒體到評(píng)審現(xiàn)場(chǎng)觀摩,社會(huì)監(jiān)督機(jī)制完善。
3.5 獎(jiǎng)勵(lì)效果
河南省科技獎(jiǎng)勵(lì)工作建立了完善的獎(jiǎng)勵(lì)工作質(zhì)量管理體系,保證了獎(jiǎng)勵(lì)工作機(jī)制的嚴(yán)格執(zhí)行和規(guī)范操作,在全國(guó)范圍內(nèi)樹(shù)立了河南省科技獎(jiǎng)勵(lì)的工作品牌,形成了可復(fù)制可推廣的經(jīng)驗(yàn),且被《中國(guó)科技獎(jiǎng)勵(lì)年鑒》收錄推廣。
獲獎(jiǎng)項(xiàng)目既有面向國(guó)家戰(zhàn)略需求、解決“卡脖子”技術(shù)的重大項(xiàng)目,也有致力于改善民生的科技成果,獲獎(jiǎng)項(xiàng)目領(lǐng)域結(jié)構(gòu)與河南省相關(guān)行業(yè)的實(shí)際科技水平基本相符。
通過(guò)對(duì)科研人員、科技管理人員、科技獎(jiǎng)評(píng)審專(zhuān)家及其他人員的640份有效調(diào)查的分析發(fā)現(xiàn),評(píng)獎(jiǎng)結(jié)果滿意度、科技獎(jiǎng)勵(lì)工作公開(kāi)透明度、科技獎(jiǎng)勵(lì)的社會(huì)公認(rèn)度滿意及非常滿意分別占比91%、95%和90%。
4 綜合評(píng)價(jià)
模糊綜合評(píng)價(jià)是對(duì)受多種因素影響的事物做出全面評(píng)價(jià)的一種十分有效的多因素決策方法。本文結(jié)合河南省科技獎(jiǎng)勵(lì)工作的特點(diǎn),根據(jù)模糊數(shù)學(xué)最大隸屬度原則確定后評(píng)估等級(jí)[15-16]?;舅悸窞椋孩俅_定評(píng)價(jià)對(duì)象指標(biāo)集。根據(jù)前文確定的河南省科技獎(jiǎng)勵(lì)工作后評(píng)估指標(biāo)體系,確定5個(gè)一級(jí)指標(biāo)作為后評(píng)估的指標(biāo)集,邀請(qǐng)熟悉河南省科技獎(jiǎng)勵(lì)工作的專(zhuān)家,在事實(shí)證據(jù)分析的基礎(chǔ)上對(duì)2022年河南省科技獎(jiǎng)勵(lì)工作5個(gè)一級(jí)指標(biāo)進(jìn)行定量評(píng)估,得到的分?jǐn)?shù)為u=(83,79,92,89,86);②確定評(píng)價(jià)集。設(shè)定4個(gè)后評(píng)估等級(jí)及相應(yīng)的分值區(qū)間,詳見(jiàn)表3;③按照梯形分布函數(shù)建立模糊評(píng)價(jià)矩陣R;④通過(guò)德?tīng)柗品ǖ贸鲈u(píng)判指標(biāo)權(quán)重集A;⑤根據(jù)最大隸屬度原則判斷后評(píng)估等級(jí)。
令[μ1](x)(i=Ⅰ,Ⅱ,Ⅲ,Ⅳ)表示相對(duì)于4個(gè)等級(jí)的隸屬度函數(shù),按照梯形分布函數(shù)進(jìn)行計(jì)算:
[μ1(x)=1(0≤x<60)80-x20(60≤x<80)0(80≤x≤100)]
[μ2(x)=x60(0≤x<60)1(60≤x<80)90-x10(80≤x<90)0(90≤x≤100)]
[μ3(x)=0(0≤x<60)x-6020(60≤x<80)1(80≤x<90)100-x10(90≤x≤100)]
[μ4(x)=0(0≤x<80)x-8010(80≤x<90)1(90≤x≤100)]
將5個(gè)分?jǐn)?shù)代入該隸屬度函數(shù),得到評(píng)價(jià)矩陣:
[R=00.710.30.0510.950000.8100.110.900.410.6]
運(yùn)用德?tīng)柗品ù_定5個(gè)一級(jí)指標(biāo)權(quán)重,經(jīng)歸一化后得到權(quán)重集A,A=(0.1,0.1,0.3,0.2,0.3)。
計(jì)算出模糊綜合評(píng)價(jià)結(jié)果集B=AR,采用取大取小算法得到:B=(0.005,0.25,0.935,0.69)。歸一化后得到最終的結(jié)果集D=(0.003,0.133,0.497,0.367)。根據(jù)最大隸屬度原理,得到的結(jié)果等級(jí)為Ⅲ級(jí),說(shuō)明2022年河南省科技獎(jiǎng)勵(lì)工作整體評(píng)估結(jié)論為“成功”。
5 結(jié)論與建議
5.1 評(píng)估結(jié)論
①建立的河南省科技獎(jiǎng)勵(lì)工作后評(píng)估邏輯模型,從科技獎(jiǎng)勵(lì)的社會(huì)目標(biāo)出發(fā),厘清了科技獎(jiǎng)勵(lì)目標(biāo)和任務(wù)實(shí)現(xiàn)路徑。依據(jù)后評(píng)估邏輯模型與相關(guān)性、效率、效果、影響、可持續(xù)等準(zhǔn)則開(kāi)發(fā)的評(píng)估指標(biāo)體系覆蓋了《國(guó)家科學(xué)技術(shù)獎(jiǎng)勵(lì)績(jī)效評(píng)價(jià)暫行辦法》要求的評(píng)價(jià)內(nèi)容,從技術(shù)方法層面推動(dòng)科技獎(jiǎng)勵(lì)工作后評(píng)估機(jī)制與預(yù)算績(jī)效管理的融合,有助于評(píng)價(jià)信息共享與評(píng)價(jià)結(jié)果互認(rèn),減少重復(fù)評(píng)價(jià),提高評(píng)價(jià)質(zhì)量與效率。
②邀請(qǐng)專(zhuān)家通過(guò)案卷研究、數(shù)據(jù)分析、滿意度調(diào)查等方法搜集分析評(píng)估證據(jù),運(yùn)用隸屬度函數(shù)得到2022年河南省科技獎(jiǎng)勵(lì)工作整體評(píng)估結(jié)論為“成功”。
③通過(guò)后評(píng)估工作初步建立了河南省科技獎(jiǎng)勵(lì)工作第三方監(jiān)督機(jī)制和信息反饋機(jī)制,增強(qiáng)了科技獎(jiǎng)勵(lì)工作公開(kāi)透明度,提高了科技獎(jiǎng)勵(lì)的公信力和社會(huì)影響力,有助于提升科技獎(jiǎng)勵(lì)工作質(zhì)量和整體績(jī)效。
5.2 評(píng)估建議
5.2.1 提高授獎(jiǎng)數(shù)量,調(diào)整授獎(jiǎng)結(jié)構(gòu)。2022年河南省科技獎(jiǎng)勵(lì)工作共評(píng)審出獲獎(jiǎng)項(xiàng)目315項(xiàng),為改革方案要求的不超過(guò)350項(xiàng)的90%。一等獎(jiǎng)?wù)极@獎(jiǎng)項(xiàng)目總數(shù)的8.74%,與國(guó)內(nèi)其他地方一等獎(jiǎng)比例一般在10%以上相比,獲獎(jiǎng)比例仍偏低。建議進(jìn)一步提高授獎(jiǎng)總數(shù)和一等獎(jiǎng)獲獎(jiǎng)比例,提升科技獎(jiǎng)勵(lì)激勵(lì)效應(yīng)。
5.2.2 優(yōu)化科技獎(jiǎng)勵(lì)類(lèi)別和結(jié)構(gòu)。目前全國(guó)15個(gè)?。▍^(qū)、市)的獎(jiǎng)種設(shè)置除了自然科學(xué)獎(jiǎng)、技術(shù)發(fā)明獎(jiǎng)、科技進(jìn)步獎(jiǎng)、科學(xué)技術(shù)杰出貢獻(xiàn)獎(jiǎng)和科學(xué)技術(shù)合作獎(jiǎng)以外,還設(shè)置了青年科技獎(jiǎng)、創(chuàng)新團(tuán)隊(duì)獎(jiǎng)、創(chuàng)新企業(yè)獎(jiǎng)等。河南省科技獎(jiǎng)勵(lì)獎(jiǎng)項(xiàng)類(lèi)別相對(duì)較少,建議進(jìn)一步增設(shè)青年科技杰出貢獻(xiàn)獎(jiǎng)和創(chuàng)新團(tuán)隊(duì)等獎(jiǎng)項(xiàng),強(qiáng)化對(duì)優(yōu)秀青年學(xué)者和科研創(chuàng)新團(tuán)隊(duì)的激勵(lì)和培育。
5.2.3 加快科技獎(jiǎng)勵(lì)制度建設(shè)。河南省科技獎(jiǎng)勵(lì)改革方案出臺(tái)已近4年,全國(guó)31個(gè)?。▍^(qū)、市)已有27個(gè)修訂并發(fā)布了新的科技獎(jiǎng)勵(lì)辦法,建議加快修訂出臺(tái)《河南省科學(xué)技術(shù)獎(jiǎng)勵(lì)辦法》,為河南省科技獎(jiǎng)勵(lì)工作提供政策支撐。
5.2.4 建立獲獎(jiǎng)項(xiàng)目跟蹤評(píng)價(jià)機(jī)制。在更長(zhǎng)時(shí)間的維度中跟蹤科技成果的科學(xué)、技術(shù)、經(jīng)濟(jì)、社會(huì)、文化價(jià)值,總結(jié)分析高質(zhì)量科技成果特征,指導(dǎo)科技獎(jiǎng)勵(lì)政策修訂。
注釋?zhuān)?/p>
[①]“二三七五”工作機(jī)制即兩個(gè)工作階段(提名評(píng)審和審核批準(zhǔn))、三級(jí)評(píng)審(專(zhuān)業(yè)組網(wǎng)絡(luò)評(píng)審、行業(yè)組會(huì)議評(píng)審和評(píng)委會(huì)會(huì)議評(píng)審)、七環(huán)節(jié)五公示(從提名到評(píng)審的七個(gè)工作環(huán)節(jié),進(jìn)行五次公示)。
參考文獻(xiàn):
[1]國(guó)務(wù)院辦公廳.關(guān)于深化科技獎(jiǎng)勵(lì)制度改革的方案[EB/OL].(2017-06-09)[2021-12-21].http://www.gov.cn/zhengce/content/2017-06/09/content_5201043.htm.
[2]河南省人民政府辦公廳.河南省深化科技獎(jiǎng)勵(lì)制度改革方案[EB/OL].(2019-04-15)[2021-12-21].https://www.henan.gov.cn/2019/04-26/744155.html.
[3]國(guó)務(wù)院辦公廳.國(guó)務(wù)院辦公廳關(guān)于完善科技成果評(píng)價(jià)機(jī)制的指導(dǎo)意見(jiàn)[EB/OL].(2017-08-02)[2021-12-21].http://www.gov.cn/zhengce/content/2021-08/02/content_5628
987.htm.
[4]陳銀花.獲獎(jiǎng)科技成果的后評(píng)價(jià)研究[D].上海: 華東理工大學(xué),2012.
[5] ILZKOVITZ F, DIERX A.CRESSE 2017,12th international conference on competition and regulation[C]//Brussels: European Commission, 2017.
[6]危懷安,杜錦.國(guó)外項(xiàng)目后評(píng)估研究綜述[J].科技管理研究,2020,40(15): 231-235.
[7]謝福泉,任浩,張軍果.財(cái)政科技投入產(chǎn)出績(jī)效評(píng)價(jià)體系的構(gòu)建:科技項(xiàng)目后評(píng)價(jià)視角[J].中國(guó)科技論壇,2006(6): 25-27.
[8]劉艷艷.科技計(jì)劃項(xiàng)目后評(píng)價(jià)體系構(gòu)建研究[D].呼和浩特:內(nèi)蒙古工業(yè)大學(xué),2013.
[9]臘孟珂,劉會(huì)成,林立清,等.邏輯框架法在環(huán)境政策后評(píng)估中的應(yīng)用及實(shí)例研究[J].江西科學(xué),2016,34(6):903-906.
[10]丁賢,張明君.立法后評(píng)估理論與實(shí)踐初論[J].政治與法律,2008(1):131-137.
[11]危懷安,張成偉.國(guó)家科技獎(jiǎng)勵(lì)工作后評(píng)估:邏輯起點(diǎn)與對(duì)象分析[J].科技管理研究,2019,39(19):28-32.
[12]張成偉.國(guó)家科技獎(jiǎng)勵(lì)工作后評(píng)估指標(biāo)體系的理論構(gòu)建與實(shí)證檢驗(yàn)[J].科技管理研究,2020,40(19): 77-85.
[13]國(guó)家科技評(píng)估中心,中國(guó)科技評(píng)估與成果管理研究會(huì).科技評(píng)估方法與實(shí)務(wù)[M] .北京:北京理工大學(xué)出版社,2019:24-26.
[14]財(cái)政部,科技部.國(guó)家科學(xué)技術(shù)獎(jiǎng)勵(lì)績(jī)效評(píng)價(jià)暫行辦法[EB/OL].(2019-12-17)[2021-12-21].http://jkw.mof.gov.cn/zhengcefabu/202001/t20200109_3457033.htm.
[15]涂向陽(yáng),高學(xué)平.模糊數(shù)學(xué)在海水入侵地下水水質(zhì)評(píng)價(jià)中的應(yīng)用[J].水利學(xué)報(bào),2003(8):64-69.
[16]孫鋒.基于隸屬度函數(shù)的福建省水務(wù)網(wǎng)站績(jī)效評(píng)價(jià)[J].供水技術(shù),2014,8(1):55-57,61.
收稿日期:2024-03-29
基金項(xiàng)目:河南省軟科學(xué)研究“科技成果評(píng)價(jià)與‘三評(píng)’融合理論及實(shí)務(wù)研究”(232400410258)。
作者簡(jiǎn)介:馮文軍(1988—),男,碩士,工程師,研究方向:科技評(píng)估、成果轉(zhuǎn)化;王淼(1990—),女,碩士,工程師,研究方向:科技項(xiàng)目管理、科技評(píng)估;張輝(1971—),男,本科,高級(jí)工程師,研究方向:科技評(píng)估、績(jī)效評(píng)價(jià)。
通信作者:項(xiàng)勇(1968—),男,本科,教授級(jí)高級(jí)工程師,研究方向:技術(shù)經(jīng)濟(jì)評(píng)價(jià)。