楊濤蓮，鐘 華，安新穎 ，王 衛(wèi)，王健偉

1中國醫(yī)學(xué)科學(xué)院 北京協(xié)和醫(yī)學(xué)院，北京 100730 2中國醫(yī)學(xué)科學(xué)院 北京協(xié)和醫(yī)學(xué)院 醫(yī)學(xué)信息研究所，北京 100020

基金項(xiàng)目：中國醫(yī)學(xué)科學(xué)院中央級公益性科研院所基本科研業(yè)務(wù)費(fèi)專項(xiàng)資金(2021-ZHL630-003)和北京協(xié)和醫(yī)學(xué)院中央高?；究蒲袠I(yè)務(wù)費(fèi)資助項(xiàng)目(3332021089、3332022172)

科技項(xiàng)目評價(jià)是科技管理的重要手段，對提升決策水平、優(yōu)化資源配置、明晰科技發(fā)展方向、激勵(lì)科技創(chuàng)新與促進(jìn)科技發(fā)展發(fā)揮著至關(guān)重要的作用。2018年7月，由中共中央辦公廳、國務(wù)院辦公廳發(fā)布的《關(guān)于深化項(xiàng)目評審、人才評價(jià)、機(jī)構(gòu)評估改革的意見》中明確提出“嚴(yán)格項(xiàng)目成果評價(jià)驗(yàn)收”。醫(yī)學(xué)研究是關(guān)乎社會(huì)經(jīng)濟(jì)發(fā)展、國家安全穩(wěn)定、人民健康福祉的重要基礎(chǔ)，目前國內(nèi)對醫(yī)學(xué)科技項(xiàng)目評價(jià)研究較少，尚未形成適合我國特點(diǎn)、符合醫(yī)學(xué)科技創(chuàng)新活動(dòng)規(guī)律的成熟科技項(xiàng)目評價(jià)制度[1]。本研究在梳理國內(nèi)外科技評價(jià)的基礎(chǔ)上，探索構(gòu)建符合我國醫(yī)學(xué)學(xué)科特色的醫(yī)學(xué)科技項(xiàng)目評價(jià)體系，為催生真正高水平的科技成果奠定基礎(chǔ)。

資料和方法

初始評價(jià)框架的搭建采用文獻(xiàn)調(diào)研法，在遵循科學(xué)規(guī)范、可操作性原則基礎(chǔ)上，梳理國內(nèi)外科技評價(jià)研究現(xiàn)狀與實(shí)踐[2-7]，結(jié)合我國醫(yī)學(xué)科學(xué)研究規(guī)律、特點(diǎn)及對科技項(xiàng)目管理的要求，運(yùn)用收集整理國內(nèi)外具有醫(yī)學(xué)特色的評價(jià)指標(biāo)總結(jié)得到醫(yī)學(xué)科技項(xiàng)目評價(jià)核心要素，圍繞標(biāo)志性成果產(chǎn)出水平、社會(huì)經(jīng)濟(jì)效益、發(fā)展?jié)摿Φ确矫嫘纬沙跫壷笜?biāo)框架。

評價(jià)指標(biāo)的篩選和確定：邀請長期從事醫(yī)學(xué)基礎(chǔ)研究、臨床診療及技術(shù)研發(fā)等領(lǐng)域工作的專家及科研管理部門專家參與指標(biāo)論證，采用德爾菲法開展兩輪專家咨詢，對指標(biāo)適用性、重要性和可操作性進(jìn)行打分，并結(jié)合專家意見和量化判斷對初級指標(biāo)進(jìn)行篩選、討論和修改，進(jìn)而構(gòu)建醫(yī)學(xué)科技項(xiàng)目評價(jià)模型，形成準(zhǔn)確清晰的指標(biāo)體系。

評價(jià)指標(biāo)權(quán)重的確定：采用層次分析法，構(gòu)建目標(biāo)層、準(zhǔn)則層和指標(biāo)層的層次遞階結(jié)構(gòu)，按照Satty1-9比例標(biāo)度法和差值比較法構(gòu)建矩陣，并邀請專家進(jìn)行指標(biāo)重要性兩兩比較判斷，采用方根法計(jì)算矩陣特征向量并進(jìn)行一致性檢驗(yàn)，最終確定各指標(biāo)權(quán)重及組合權(quán)重。

分類評價(jià)體系的構(gòu)建醫(yī)學(xué)研究領(lǐng)域繁雜，為避免“一刀切”粗放式評價(jià)不利于科學(xué)技術(shù)發(fā)展，本評價(jià)體系以分類評價(jià)作為出發(fā)點(diǎn)，依據(jù)醫(yī)學(xué)科技項(xiàng)目類型分為基礎(chǔ)前沿類、疾病防治類、藥械研發(fā)類、技術(shù)支撐類、基礎(chǔ)性科技工作類開展分類評價(jià)?；A(chǔ)前沿類重點(diǎn)評價(jià)知識創(chuàng)新的質(zhì)量和水平。疾病防治類重點(diǎn)評價(jià)在疾病防治領(lǐng)域重大關(guān)鍵科技問題突破。藥械研發(fā)類重點(diǎn)評價(jià)創(chuàng)新性藥物、疫苗、醫(yī)療器械等研發(fā)情況。技術(shù)支撐類重點(diǎn)評價(jià)建成的平臺和技術(shù)體系的水平?；A(chǔ)性科技工作類重點(diǎn)評價(jià)科技資源庫、科學(xué)數(shù)據(jù)庫等建設(shè)與共享情況。

項(xiàng)目評價(jià)體系的應(yīng)用將構(gòu)建的醫(yī)學(xué)科技項(xiàng)目評價(jià)體系應(yīng)用于中國醫(yī)學(xué)科學(xué)院醫(yī)學(xué)與健康科技創(chuàng)新工程(以下簡稱“醫(yī)學(xué)創(chuàng)新工程”)重大項(xiàng)目的驗(yàn)收評價(jià)工作。依據(jù)分類評價(jià)原則，將參加驗(yàn)收的72個(gè)重大項(xiàng)目分為以下5組：基礎(chǔ)前沿類項(xiàng)目18個(gè)，疾病防治類項(xiàng)目16個(gè)，藥械研發(fā)類項(xiàng)目8個(gè)，技術(shù)支撐類項(xiàng)目17個(gè)，基礎(chǔ)性科技工作類項(xiàng)目13個(gè)。結(jié)合專家綜合評價(jià)中優(yōu)秀、良好和合格3檔評價(jià)結(jié)論，通過對中國醫(yī)學(xué)科學(xué)院MacRP科研管理平臺系統(tǒng)收錄的上述72個(gè)重大項(xiàng)目的990條代表作類型進(jìn)行分析，采用描述性統(tǒng)計(jì)分析和百分比數(shù)據(jù)展示，探知不同項(xiàng)目類型的分檔評價(jià)結(jié)論與各類項(xiàng)目代表作類型選取的關(guān)聯(lián)性。

科研人員對評價(jià)體系的評價(jià)對科研人員就本研究建立的醫(yī)學(xué)科技項(xiàng)目評價(jià)體系滿意度進(jìn)行調(diào)查，向承擔(dān)醫(yī)學(xué)創(chuàng)新工程項(xiàng)目的95名項(xiàng)目負(fù)責(zé)人發(fā)放問卷，問卷內(nèi)容包括對評價(jià)體系整體滿意度、代表作制度、分類評價(jià)、四重評價(jià)范式、動(dòng)態(tài)調(diào)整機(jī)制、破“五唯”力度和對項(xiàng)目實(shí)施推動(dòng)作用以及對科研人員的激勵(lì)作用等，滿意度分為非常滿意、比較滿意、一般、不滿意和非常不滿意5檔。統(tǒng)計(jì)收回問卷中項(xiàng)目負(fù)責(zé)人對各項(xiàng)問卷內(nèi)容的滿意度選擇，數(shù)據(jù)采取百分比展示，以了解科研人員對本評價(jià)體系的認(rèn)可度。

結(jié) 果

醫(yī)學(xué)科技項(xiàng)目評價(jià)體系初步建成通過以上方法，創(chuàng)建并形成符合我國特色的多維綜合、差異化的分層分類的醫(yī)學(xué)科技項(xiàng)目評價(jià)指標(biāo)體系，包含項(xiàng)目和項(xiàng)目承擔(dān)單位兩個(gè)層級。其中，項(xiàng)目評價(jià)指標(biāo)包含2個(gè)一級指標(biāo)和5個(gè)二級指標(biāo)(表1)，在代表性成果和社會(huì)經(jīng)濟(jì)效益的賦值上依據(jù)不同項(xiàng)目類型設(shè)定不同分值；項(xiàng)目承擔(dān)單位評價(jià)指標(biāo)包含5個(gè)一級指標(biāo)和9個(gè)二級指標(biāo)(表2)。為最大程度地調(diào)動(dòng)項(xiàng)目各層級創(chuàng)新主體的積極性，全方位評價(jià)項(xiàng)目實(shí)施成效，構(gòu)建四層評價(jià)范式，具體為“項(xiàng)目自評+第三方評價(jià)(定量評價(jià))+專家綜合評價(jià)(定性評價(jià))+項(xiàng)目承擔(dān)單位評價(jià)”。項(xiàng)目自評由項(xiàng)目負(fù)責(zé)人組織專家組對項(xiàng)目內(nèi)人員對項(xiàng)目實(shí)施的貢獻(xiàn)度進(jìn)行評價(jià)。第三方評價(jià)機(jī)構(gòu)對項(xiàng)目填報(bào)數(shù)據(jù)進(jìn)行審核、處理與分析，提供學(xué)術(shù)表現(xiàn)分析報(bào)告。專家綜合評價(jià)根據(jù)項(xiàng)目類型實(shí)行基于任務(wù)書預(yù)期目標(biāo)完成情況的結(jié)論評價(jià)和代表性成果水平及效果的分檔評價(jià)。為強(qiáng)化和落實(shí)項(xiàng)目承擔(dān)單位主體責(zé)任，建立針對項(xiàng)目承擔(dān)單位的評價(jià)機(jī)制。建立了基于評價(jià)結(jié)果的應(yīng)用機(jī)制，對優(yōu)秀項(xiàng)目和單位予以科研經(jīng)費(fèi)獎(jiǎng)補(bǔ)，對評價(jià)不合格的項(xiàng)目和單位建立“黑名單”，并在規(guī)定時(shí)間內(nèi)限制其申報(bào)項(xiàng)目的資格。

表1 醫(yī)學(xué)科技項(xiàng)目評價(jià)指標(biāo)

表2 醫(yī)學(xué)科技項(xiàng)目承擔(dān)單位評價(jià)指標(biāo)

項(xiàng)目分類評價(jià)結(jié)論與其代表作類型關(guān)聯(lián)度基于醫(yī)學(xué)科技項(xiàng)目分類評價(jià)體系在醫(yī)學(xué)創(chuàng)新工程重大項(xiàng)目驗(yàn)收評價(jià)工作中的應(yīng)用實(shí)踐，對不同分檔評價(jià)結(jié)論的各類項(xiàng)目代表作類型進(jìn)行分析，結(jié)果顯示：基礎(chǔ)前沿類評為優(yōu)秀的項(xiàng)目主要為論文(84.09%)、授權(quán)發(fā)明專利(9.09%)，評為良好的項(xiàng)目主要為論文(83.33%)、授權(quán)發(fā)明專利(11.33%)，評為合格的項(xiàng)目主要為論文(87.27%)、授權(quán)發(fā)明專利(10.91%)；疾病防治類評為優(yōu)秀的項(xiàng)目主要為論文(83.02%)、臨床指南(9.43%)，評為良好的項(xiàng)目主要為論文(76.17%)、臨床指南(6.22%)，評為合格的項(xiàng)目主要為論文(84.21%)、授權(quán)發(fā)明專利(10.53%)；藥械研發(fā)類評為優(yōu)秀的項(xiàng)目主要為論文(36.84%)、授權(quán)發(fā)明專利(26.32%)、臨床試驗(yàn)(10.53%)、成果轉(zhuǎn)化(10.53%)、國內(nèi)外頂級學(xué)術(shù)會(huì)議報(bào)告(10.53%)、藥品注冊證書(5.26%)，評為良好的項(xiàng)目主要為論文(72.58%)、授權(quán)發(fā)明專利(9.68%)、臨床試驗(yàn)(9.68%)；技術(shù)支撐類評為優(yōu)秀的項(xiàng)目主要為論文(65.96%)、平臺建設(shè)(12.77%)、授權(quán)發(fā)明專利(8.51%)、動(dòng)物模型(8.51%)，評為良好的項(xiàng)目主要為論文(66.46%)、平臺建設(shè)(12.66%)、成果轉(zhuǎn)化(6.96%)、授權(quán)發(fā)明專利(6.33%)，評為合格的項(xiàng)目主要為論文(91.67%)、授權(quán)發(fā)明專利(8.33%)；基礎(chǔ)性科技工作類評為優(yōu)秀的項(xiàng)目主要為論文(59.02%)、平臺建設(shè)(16.39%)、成果轉(zhuǎn)化(11.48%)、臨床指南(9.84%)，評為良好的項(xiàng)目主要為論文(71.30%)、平臺建設(shè)(20.37%)、授權(quán)發(fā)明專利(5.56%)，評為合格的項(xiàng)目主要為論文(75.00%)、平臺建設(shè)(16.67%)、標(biāo)準(zhǔn)(8.33%)(圖1)。項(xiàng)目代表作形式多樣，論文在各類項(xiàng)目代表作中占比較高，但在評為優(yōu)秀的16個(gè)項(xiàng)目中5個(gè)項(xiàng)目僅選取1～2篇論文作為代表作(表3)，評價(jià)分檔結(jié)論與代表性成果選取類型相關(guān)，優(yōu)秀項(xiàng)目的代表作類型與項(xiàng)目類型關(guān)聯(lián)度更契合，比如藥械研發(fā)類優(yōu)秀項(xiàng)目代表作類型中授權(quán)發(fā)明專利與成果轉(zhuǎn)化占比較良好項(xiàng)目更高，更符合藥械研發(fā)類項(xiàng)目評價(jià)標(biāo)準(zhǔn)。

圖1 各類項(xiàng)目代表作類型情況

表3 優(yōu)秀項(xiàng)目代表作論文情況(篇)

科研人員對評價(jià)體系的滿意度對科研人員就建立的醫(yī)學(xué)科技項(xiàng)目評價(jià)體系滿意度進(jìn)行調(diào)查，共發(fā)放95份問卷，回收80份。結(jié)果顯示：項(xiàng)目負(fù)責(zé)人對醫(yī)學(xué)科技項(xiàng)目評價(jià)體系整體滿意度為96.25%，對項(xiàng)目評價(jià)體系中具體舉措和效果滿意度從高到低依次為項(xiàng)目自評(95.00%)、第三方評價(jià)(定量評價(jià))(95.00%)、分類評價(jià)(93.75%)、代表作制度(92.50%)、專家綜合評價(jià)(定性評價(jià))(92.50%)、定性評價(jià)結(jié)果準(zhǔn)確性(91.25%)、動(dòng)態(tài)調(diào)整機(jī)制(87.50%)、破“五唯”力度(83.75%)、對項(xiàng)目實(shí)施推動(dòng)作用(82.50%)和對科研人員的激勵(lì)作用(73.75%)。多數(shù)項(xiàng)目負(fù)責(zé)人比較認(rèn)可本研究建立的醫(yī)學(xué)項(xiàng)目評價(jià)體系，但同時(shí)對激勵(lì)機(jī)制提出更高的要求。

討 論

根據(jù)醫(yī)學(xué)創(chuàng)新工程項(xiàng)目驗(yàn)收評價(jià)數(shù)據(jù)分析，本研究初步構(gòu)建了以創(chuàng)新能力、質(zhì)量、貢獻(xiàn)為導(dǎo)向且符合我國特色的醫(yī)學(xué)科技項(xiàng)目評價(jià)體系，基本奠定了分類評價(jià)的核心地位和評價(jià)重點(diǎn)，代表性成果形式多樣一定程度上改善了既往“五唯”科研評價(jià)誤區(qū)，并實(shí)現(xiàn)了考評結(jié)果與目標(biāo)校正、預(yù)算分配等掛鉤，較好地激發(fā)了科研人員創(chuàng)新活力。

分類評價(jià)導(dǎo)向的推行促使評價(jià)精準(zhǔn)度提升未對醫(yī)學(xué)科研項(xiàng)目進(jìn)行分類前，基礎(chǔ)性科技工作與基礎(chǔ)前沿類研究在過往實(shí)行統(tǒng)一評價(jià)，前者偏向于基礎(chǔ)性戰(zhàn)略性科技資源建設(shè)，后者偏向于前沿理論探索，分類評價(jià)為基礎(chǔ)性戰(zhàn)略性資源建設(shè)項(xiàng)目提供了保障機(jī)制，為科研人員潛心研究創(chuàng)造了良好的學(xué)術(shù)氛圍，推動(dòng)科研人員真正回歸科學(xué)研究本身。依據(jù)分類評價(jià)效果，我院將項(xiàng)目評價(jià)前置，在項(xiàng)目立項(xiàng)評審環(huán)節(jié)中對項(xiàng)目預(yù)期成果和考核指標(biāo)按照分類評價(jià)標(biāo)準(zhǔn)進(jìn)行嚴(yán)格把關(guān)，比如疾病防治類項(xiàng)目應(yīng)重點(diǎn)關(guān)注改變臨床實(shí)踐，藥械研發(fā)類項(xiàng)目應(yīng)關(guān)注突破藥械研發(fā)中的“卡脖子”技術(shù)，更利于與科技計(jì)劃、科研機(jī)構(gòu)戰(zhàn)略目標(biāo)契合。

多元評價(jià)指標(biāo)的設(shè)立有力破除“五唯”我國科技評價(jià)中存在重?cái)?shù)量輕質(zhì)量、急功近利[8-10]等現(xiàn)象，處在迫切需要轉(zhuǎn)變發(fā)展道路的關(guān)鍵時(shí)刻，即抑制過度量化評價(jià)傾向，發(fā)展更加關(guān)注科技質(zhì)量的評價(jià)制度和方法，以保證能夠有更多原創(chuàng)性科學(xué)與技術(shù)的突破性成果產(chǎn)出，實(shí)現(xiàn)從“量變到質(zhì)變”的轉(zhuǎn)化[11]。本研究中評價(jià)指標(biāo)的設(shè)置考慮到各類醫(yī)學(xué)科研成果的科學(xué)、技術(shù)、社會(huì)、經(jīng)濟(jì)的多元價(jià)值，納入的代表作形式多樣化，對代表作的數(shù)量作了限制，一方面弱化對量化指標(biāo)的追逐，另一方面正向引導(dǎo)科研人員優(yōu)先關(guān)注代表作的質(zhì)量，避免低水平的復(fù)制，強(qiáng)化對高水平科學(xué)研究的導(dǎo)向作用，更有利于篩選出有發(fā)展?jié)摿Φ暮庙?xiàng)目。項(xiàng)目與機(jī)構(gòu)評價(jià)相結(jié)合，發(fā)揮單位和項(xiàng)目負(fù)責(zé)人主導(dǎo)作用，調(diào)動(dòng)項(xiàng)目實(shí)施各方的積極性。

定量評價(jià)為定性評價(jià)提供有效支撐當(dāng)前科技項(xiàng)目評價(jià)方法有同行評議方法、案例分析方法、回顧性分析方法與指標(biāo)分析法[12]等，其中以同行評議方法較常用[13]。然而，同行評議存在一定的弊端，容易造成裙帶關(guān)系和性別歧視[14]，影響評價(jià)結(jié)果準(zhǔn)確性和客觀性。代表作時(shí)代勢必要厘清定量評價(jià)與定性評價(jià)的關(guān)系，使評價(jià)更具可信度[15-16]。本研究對定量評價(jià)與定性評價(jià)相結(jié)合的方式進(jìn)行了初步探索，建立的第三方評價(jià)(定量評價(jià))機(jī)制既可減少同行評價(jià)的分歧和模糊操作空間，又可提升評價(jià)效率和評價(jià)準(zhǔn)確性[17]，為同行評議提供客觀的數(shù)據(jù)支持。并引入外部高水平專家評價(jià)機(jī)制，突破內(nèi)部的學(xué)術(shù)裙帶關(guān)系，外部專家給予的中肯建議一方面加強(qiáng)了與外部兄弟單位的科研交流，另一方面提高了科研項(xiàng)目評價(jià)質(zhì)量，改善了過去驗(yàn)收形式化的不良現(xiàn)象，切實(shí)推動(dòng)項(xiàng)目高效實(shí)施。

綜上，本研究成功構(gòu)建了醫(yī)學(xué)科技項(xiàng)目評價(jià)體系，但仍處于初步階段，下一步將加強(qiáng)對定量評價(jià)與定性評價(jià)關(guān)系的深入探索，在保證科學(xué)評價(jià)基礎(chǔ)上如何進(jìn)一步激發(fā)科研人員創(chuàng)新活力仍需不斷探究。科技評價(jià)工作必須要回歸科學(xué)研究本身來尋求理性的評價(jià)方案，真正通過科學(xué)的評價(jià)方案去發(fā)現(xiàn)和培養(yǎng)優(yōu)秀的科學(xué)家，催生真正高水平的科技成果，培育真正前沿的科研項(xiàng)目，建設(shè)真正領(lǐng)先的科研機(jī)構(gòu)，評價(jià)的導(dǎo)向應(yīng)當(dāng)是引導(dǎo)相應(yīng)被評價(jià)的創(chuàng)新主體更好地發(fā)揮作用[18]，將科技創(chuàng)新的目的聚焦于對社會(huì)的貢獻(xiàn)服務(wù)[19]，建立適應(yīng)創(chuàng)新驅(qū)動(dòng)發(fā)展和健康中國戰(zhàn)略的科技評價(jià)制度改革和評價(jià)體系仍然任重而道遠(yuǎn)。