蔣勇青，齊 萍

(1.中國(guó)科學(xué)技術(shù)信息研究所，北京 100038; 2.北京萬(wàn)方數(shù)據(jù)股份有限公司，北京 100038)

學(xué)術(shù)期刊影響力評(píng)價(jià)方法研究

蔣勇青1，齊 萍2

(1.中國(guó)科學(xué)技術(shù)信息研究所，北京 100038; 2.北京萬(wàn)方數(shù)據(jù)股份有限公司，北京 100038)

首先從定性評(píng)價(jià)、定量評(píng)價(jià)、定性與定量相結(jié)合三個(gè)方面構(gòu)建學(xué)術(shù)期刊影響力評(píng)價(jià)方法體系，其中定性評(píng)價(jià)的主要方法是同行評(píng)議，定量評(píng)價(jià)包括單指標(biāo)評(píng)價(jià)和多指標(biāo)客觀評(píng)價(jià)，定量與定性相結(jié)合的評(píng)價(jià)包括多指標(biāo)主客觀評(píng)價(jià)和組合評(píng)價(jià)。然后對(duì)各種評(píng)價(jià)方法及相應(yīng)的評(píng)價(jià)指標(biāo)進(jìn)行介紹并舉例說(shuō)明。最后分析了目前我國(guó)學(xué)術(shù)期刊影響力評(píng)價(jià)方面存在的問(wèn)題，并給出思考與建議。

學(xué)術(shù)期刊影響力；評(píng)價(jià)方法；組合評(píng)價(jià)；指標(biāo)體系

一、前言

學(xué)術(shù)期刊是學(xué)術(shù)研究成果和學(xué)術(shù)傳承的主要載體，是推動(dòng)學(xué)術(shù)創(chuàng)新和理論創(chuàng)新的重要平臺(tái)。學(xué)術(shù)期刊的影響力是指期刊在一定時(shí)期內(nèi)發(fā)表的學(xué)術(shù)研究成果，在某段時(shí)間內(nèi)促進(jìn)相關(guān)學(xué)術(shù)研究與應(yīng)用之發(fā)展的能力。這種能力本源上產(chǎn)生于文獻(xiàn)的學(xué)術(shù)價(jià)值與應(yīng)用價(jià)值的大小，但也受該段時(shí)間內(nèi)社會(huì)對(duì)期刊的認(rèn)知水平與認(rèn)同程度、期刊內(nèi)容的多樣性，以及期刊自身及其相關(guān)渠道的傳播與擴(kuò)散能力等因素制約。對(duì)學(xué)術(shù)期刊的影響力進(jìn)行科學(xué)評(píng)價(jià)，有利于提升學(xué)術(shù)期刊的內(nèi)在質(zhì)量，促進(jìn)期刊的健康成長(zhǎng)和發(fā)展，是學(xué)術(shù)評(píng)價(jià)研究的重要課題。2016年7月11日，湯森路透公司宣布出售旗下SCI、TI等數(shù)據(jù)庫(kù)，引起國(guó)內(nèi)外學(xué)術(shù)界高度關(guān)注，一方面透射出期刊影響力評(píng)價(jià)的重視程度，另一方面也將引起國(guó)內(nèi)學(xué)術(shù)界的思考，擺脫對(duì)國(guó)外期刊評(píng)價(jià)體系的依賴(lài)、建立國(guó)內(nèi)自有的權(quán)威評(píng)價(jià)體系勢(shì)在必行。

二、評(píng)價(jià)方法體系

學(xué)術(shù)期刊影響力評(píng)價(jià)方法包括定性評(píng)價(jià)、定量評(píng)價(jià)、定性與定量相結(jié)合三種。定性評(píng)價(jià)主要采取專(zhuān)家同行評(píng)議法對(duì)學(xué)術(shù)期刊進(jìn)行直接分級(jí)或排序；定量評(píng)價(jià)包括單指標(biāo)評(píng)價(jià)、多指標(biāo)綜合評(píng)價(jià)和組合評(píng)價(jià)；定量與定性相結(jié)合的評(píng)價(jià)方法，是由行業(yè)專(zhuān)家對(duì)多指標(biāo)綜合評(píng)價(jià)或組合評(píng)價(jià)的結(jié)果進(jìn)行評(píng)審，糾正評(píng)價(jià)結(jié)果。評(píng)價(jià)方法體系如圖1所示。

圖1 期刊評(píng)價(jià)方法體系

(一)定性評(píng)價(jià)

對(duì)學(xué)術(shù)期刊而言，同行評(píng)議是最基本的定性評(píng)價(jià)方法。同行評(píng)議是由行業(yè)內(nèi)的權(quán)威專(zhuān)家對(duì)學(xué)術(shù)期刊直接進(jìn)行分級(jí)或排序，最終實(shí)現(xiàn)對(duì)學(xué)術(shù)期刊影響力的評(píng)價(jià)。該方法的優(yōu)點(diǎn)是操作簡(jiǎn)單，但人力成本較高，需要?jiǎng)佑么罅咳肆Α⒇?cái)力、物力；此外，定性評(píng)價(jià)容易帶來(lái)極大的主觀隨意性和不確定性，易受本位主義、人情網(wǎng)、學(xué)術(shù)偏見(jiàn)、專(zhuān)家理解不一等因素干擾，不同專(zhuān)家的評(píng)審結(jié)果有時(shí)差異很大。

(二)定量評(píng)價(jià)

定量評(píng)價(jià)是對(duì)學(xué)術(shù)期刊影響力相關(guān)的客觀指標(biāo)進(jìn)行文獻(xiàn)計(jì)量統(tǒng)計(jì)和數(shù)據(jù)分析，以此評(píng)價(jià)期刊的影響力和社會(huì)價(jià)值。目前學(xué)術(shù)期刊影響力的定量評(píng)價(jià)方法有兩種：?jiǎn)沃笜?biāo)定量評(píng)價(jià)和多指標(biāo)客觀評(píng)價(jià)。

1.單指標(biāo)評(píng)價(jià)

單指標(biāo)評(píng)價(jià)是由單一的指標(biāo)對(duì)學(xué)術(shù)期刊的影響力進(jìn)行評(píng)價(jià)，國(guó)內(nèi)外影響較大的有影響因子、H指數(shù)、SJR指數(shù)、特征因子、二次文獻(xiàn)轉(zhuǎn)載率、Web下載率等。此外，隨著信息技術(shù)帶來(lái)科研環(huán)境的快速變化，一些補(bǔ)充計(jì)量指標(biāo)如Altmetrics等也應(yīng)運(yùn)而生。

(1)影響因子

20世紀(jì)60年代，美國(guó)著名情報(bào)學(xué)家Garfield博士在引文分析的基礎(chǔ)上提出了期刊影響因子的概念。目前國(guó)際上通用的是兩年影響因子，其計(jì)算公式為：

其中，k為年，Nk-1和Nk-2為該刊在前一兩年發(fā)表的論文數(shù)，nk-1和nk-2為前一兩年發(fā)表的論文在第k年被引用的次數(shù)。通常期刊的影響因子與其學(xué)術(shù)影響力成正比。影響因子是一個(gè)相對(duì)統(tǒng)計(jì)量，可克服大小期刊由于載文量不同所帶來(lái)的偏差，公平地評(píng)價(jià)和處理各類(lèi)期刊，但受許多非學(xué)術(shù)因素影響，如期刊出版周期[1]、過(guò)度自引[2]、批判性引用[3]等。

(2)h指數(shù)、g指數(shù)、hg指數(shù)

(3)SJR指數(shù)和特征因子

影響因子和h指數(shù)均未考慮引證期刊之間的質(zhì)量差異，對(duì)于不同質(zhì)量期刊引用同一篇文獻(xiàn)都同等對(duì)待。針對(duì)這一問(wèn)題，近年來(lái)不少學(xué)者開(kāi)始設(shè)計(jì)涵蓋期刊引用質(zhì)量的新指標(biāo)。SCImagoJournalRank(SJR指數(shù)，又稱(chēng)期刊聲望指數(shù))和Eigenfactoe(特征因子)是影響較大的兩個(gè)指標(biāo)。SJR依托Elsevier的scopus數(shù)據(jù)庫(kù)，采用Google的PageRank算法，計(jì)算時(shí)賦予高聲望期刊的引用更高的權(quán)重，并以此規(guī)則迭代計(jì)算直到收斂[10]，因此在衡量期刊被引數(shù)量的同時(shí)，又重點(diǎn)考察了引文的質(zhì)量。Eigenfactor是由ThomsonReuters科技集團(tuán)于2009年推出，使用Thompson公司的JCR為數(shù)據(jù)源，以類(lèi)似于PageRank的算法迭代計(jì)算出期刊的權(quán)重影響值，實(shí)現(xiàn)了引文數(shù)量與質(zhì)量的綜合評(píng)價(jià)。這一新指標(biāo)以期刊影響力為權(quán)，以更貼近實(shí)際的權(quán)重網(wǎng)絡(luò)形式重構(gòu)了期刊引文網(wǎng)絡(luò)[11]。這兩個(gè)指標(biāo)使用的刊源范圍比較廣，同時(shí)考察了引用期刊的數(shù)量和質(zhì)量，但計(jì)算方法比較復(fù)雜，并且需要依托成熟規(guī)范的期刊數(shù)據(jù)庫(kù)進(jìn)行計(jì)算，因此這兩項(xiàng)指標(biāo)的應(yīng)用尚未普及。

(4)二次文獻(xiàn)轉(zhuǎn)載率和Web即年下載率

二次文獻(xiàn)轉(zhuǎn)載率是指我國(guó)重要的二次文獻(xiàn)對(duì)某一期刊刊載論文的全文轉(zhuǎn)載數(shù)量與全部期刊刊載論文數(shù)量之比。目前我國(guó)主要的二次文獻(xiàn)轉(zhuǎn)載類(lèi)期刊有人民出版社的《新華文摘》、中國(guó)人民大學(xué)的《報(bào)刊復(fù)印材料》、上海師范大學(xué)的《高等學(xué)校文科學(xué)報(bào)文摘》等。期刊二次文獻(xiàn)轉(zhuǎn)載率反映了期刊刊載論文被學(xué)界認(rèn)可的程度，是評(píng)價(jià)學(xué)術(shù)期刊影響力的重要指標(biāo)之一。

期刊Web即年下載率，是指期刊在某一期刊全文數(shù)據(jù)庫(kù)中當(dāng)年出版并上網(wǎng)的論文在當(dāng)年被全文下載的數(shù)量，與該期刊當(dāng)年出版并上網(wǎng)的論文總數(shù)之比[12]，反映了期刊刊載的論文被科研人員關(guān)注、利用的情況，及社會(huì)對(duì)其學(xué)術(shù)性、時(shí)效性的反響程度。Web即年下載率對(duì)學(xué)術(shù)期刊影響力評(píng)價(jià)具有重要參考意義。

(5)Altmetrics指標(biāo)

Altmetrics(AlternativeMetrics)是一種基于社會(huì)網(wǎng)絡(luò)的學(xué)術(shù)影響力評(píng)價(jià)方法[13]，國(guó)內(nèi)學(xué)者將其譯作補(bǔ)充計(jì)量學(xué)。Altmetrics用于學(xué)術(shù)期刊社會(huì)影響力的評(píng)價(jià)，主要是利用Altmetrics工具[14]收集文獻(xiàn)管理系統(tǒng)和社交網(wǎng)絡(luò)中涉及期刊發(fā)表論文的相關(guān)信息(下載量、引用次數(shù)、瀏覽次數(shù)、評(píng)論、轉(zhuǎn)發(fā)等)，通過(guò)對(duì)這些數(shù)據(jù)進(jìn)行聚類(lèi)分析和統(tǒng)計(jì)計(jì)算。國(guó)內(nèi)眾多學(xué)者如樊學(xué)明[15]、何文[16]等，將基于引文分析法的期刊學(xué)術(shù)影響力和基于Altmetrics的期刊社會(huì)影響力結(jié)合起來(lái)，綜合評(píng)價(jià)學(xué)術(shù)期刊影響力。在新一代信息技術(shù)飛速發(fā)展的推動(dòng)下，Altmetrics將會(huì)成為下一代評(píng)價(jià)學(xué)術(shù)期刊影響力的重要方法。

(6)其他指標(biāo)

為了更加客觀、科學(xué)地評(píng)價(jià)學(xué)術(shù)期刊的影響力，眾多優(yōu)秀學(xué)者也在不斷探尋新的文獻(xiàn)計(jì)量指標(biāo)以獲得更加科學(xué)合理的評(píng)價(jià)結(jié)果。有些學(xué)者是在現(xiàn)有的計(jì)量指標(biāo)和算法基礎(chǔ)上進(jìn)行改善，如熊曉英(2005)提出了相對(duì)影響因子的概念，即影響因子與同學(xué)科期刊平均影響因子之比，解決了影響因子不適用于不同學(xué)科期刊間的比較問(wèn)題[17]，但該指標(biāo)依然受期刊不正當(dāng)自引、批判性引用等因素的影響；喻依、甘若迅等(2014)在引文網(wǎng)絡(luò)的基礎(chǔ)上，利用PageRank算法和HITS算法分別計(jì)算期刊PageRank值、權(quán)威值(authority)和中心值(hub)，彌補(bǔ)了影響因子只考慮引用數(shù)量而不考慮引用質(zhì)量的缺陷[18]，但這幾個(gè)指標(biāo)的算法比較復(fù)雜，只選取了小樣本的數(shù)據(jù)進(jìn)行了檢驗(yàn)，需要更大樣本的數(shù)據(jù)進(jìn)行驗(yàn)證其準(zhǔn)確性和科學(xué)性；邵作運(yùn)(2015)提出了一種新的期刊影響力評(píng)價(jià)指標(biāo)——f(x)指數(shù)，綜合考慮了期刊的載文量、被引量、篇均被引等因素，以及低被引和高被引論文的差異性，但f(x)指數(shù)默認(rèn)所有引文具有同樣的權(quán)重，沒(méi)有排除自引現(xiàn)象對(duì)評(píng)價(jià)結(jié)果的干擾[19]。

2.多指標(biāo)綜合評(píng)價(jià)

多指標(biāo)綜合評(píng)價(jià)是從不同維度構(gòu)建學(xué)術(shù)期刊影響力評(píng)價(jià)指標(biāo)體系，然后利用數(shù)學(xué)或統(tǒng)計(jì)學(xué)方法對(duì)指標(biāo)體系進(jìn)行計(jì)算并得到綜合得分，包括多指標(biāo)客觀評(píng)價(jià)和多指標(biāo)主客觀綜合評(píng)價(jià)兩種方法。

多指標(biāo)客觀評(píng)價(jià)常用的方法有以下兩種：一類(lèi)是客觀賦權(quán)后加權(quán)匯總。如劉蓮花[20](2015)選取總被引頻次、影響因子、他引率、引用刊數(shù)、學(xué)科影響指標(biāo)、學(xué)科擴(kuò)散指標(biāo)、被引半衰期、H指數(shù)8項(xiàng)指標(biāo)，采用變異系數(shù)法計(jì)算出各指標(biāo)的客觀權(quán)重并加入到距離綜合評(píng)價(jià)法中，實(shí)現(xiàn)了15種數(shù)學(xué)中文核心期刊的綜合評(píng)價(jià)；王靖娜[21](2011)通過(guò)熵權(quán)法確定期刊下載頻次、H指數(shù)、發(fā)文量、被引頻次四項(xiàng)指標(biāo)的權(quán)重，然后通過(guò)TOPSIS法計(jì)算出各期刊的綜合指標(biāo)；俞立平[22](2011)選取總被引頻次、影響因子、權(quán)威因子、擴(kuò)散因子、他引率、基金論文比、評(píng)價(jià)引文數(shù)、即年指標(biāo)、被引半衰期、引用半衰期10個(gè)指標(biāo)，利用指標(biāo)難度賦權(quán)法對(duì)各評(píng)價(jià)指標(biāo)進(jìn)行綜合計(jì)算。另一類(lèi)是不需賦權(quán)的系統(tǒng)評(píng)價(jià)方法。如2008年，楊文燕[23]利用主成分分析法對(duì)23種腫瘤類(lèi)期刊的載文量、基金論文比、總被引頻次、影響因子、即年指標(biāo)、被引半衰期、他引總引比、5年影響因子和Web即年下載率8個(gè)指標(biāo)進(jìn)行了綜合分析，得出期刊影響力的綜合得分和排序；2010年，李華[24]利用因子分析法對(duì)15所高校學(xué)報(bào)的載文量、基金論文比、被引期刊數(shù)、總被引頻次、影響因子、即年指標(biāo)、被引半衰期、和Web即年下載率等8項(xiàng)指標(biāo)進(jìn)行綜合分析，最終得到高校學(xué)報(bào)影響力的得分和排序。系統(tǒng)評(píng)價(jià)方法的優(yōu)點(diǎn)是能夠利用統(tǒng)計(jì)學(xué)方法和相關(guān)軟件直接計(jì)算影響力綜合得分和排序，消除了指標(biāo)之間的相關(guān)性帶來(lái)的偏差；缺點(diǎn)是評(píng)價(jià)結(jié)果中的誤差需要復(fù)雜的優(yōu)化算法進(jìn)行糾正。

1.制定位階高的轉(zhuǎn)基因產(chǎn)品基準(zhǔn)法。關(guān)于完善轉(zhuǎn)基因產(chǎn)品安全的相關(guān)制度，很多學(xué)者建議出臺(tái)一部由全國(guó)人大或常委會(huì)制定的《中華人民共和國(guó)轉(zhuǎn)基因產(chǎn)品安全法》作為規(guī)范轉(zhuǎn)基因產(chǎn)品方面的效力層次較高的基本法。筆者認(rèn)為，隨著我國(guó)社會(huì)、經(jīng)濟(jì)發(fā)展，轉(zhuǎn)基因產(chǎn)品在市場(chǎng)上必然占有重要之地，而完善的法律法規(guī)勢(shì)在必行。而作為轉(zhuǎn)基因產(chǎn)品標(biāo)識(shí)問(wèn)題，作者認(rèn)為應(yīng)該由國(guó)務(wù)院在該法的基礎(chǔ)上，在自己職能范圍內(nèi)制定關(guān)于轉(zhuǎn)基因產(chǎn)品標(biāo)識(shí)問(wèn)題的專(zhuān)門(mén)性法律法規(guī)。

多指標(biāo)主客觀評(píng)價(jià)是利用主觀賦權(quán)法獲得各指標(biāo)的權(quán)重，然后通過(guò)加權(quán)匯總或系統(tǒng)方法得到各指標(biāo)的綜合得分。常用的方法有有層次分析法、專(zhuān)家會(huì)議法、德?tīng)柗品?、模糊綜合評(píng)價(jià)法等。如王建軍[25]選取影響因子、5年影響因子、即年指數(shù)、被引半衰期、他引率、H指數(shù)、Web即年下載量和基金論文比8項(xiàng)指標(biāo)，利用層次分析法對(duì)管理學(xué)期刊的學(xué)術(shù)影響力進(jìn)行綜合評(píng)價(jià)；馬虎兆[26]選取期刊載文量、影響因子、他引總引比、被引半衰期、H指數(shù)、即年指標(biāo)和Web即年下載率7項(xiàng)指標(biāo)，利用層次分析法確定指標(biāo)權(quán)重，最后通過(guò)乘法模型計(jì)算各指標(biāo)的綜合得分；等等。

3.組合評(píng)價(jià)

多指標(biāo)綜合評(píng)價(jià)存在的主要問(wèn)題是：針對(duì)相同的評(píng)價(jià)對(duì)象，各評(píng)價(jià)機(jī)構(gòu)選取的評(píng)價(jià)指標(biāo)體系及來(lái)源期刊、采用的具體評(píng)價(jià)方法不盡相同，評(píng)價(jià)標(biāo)準(zhǔn)和評(píng)價(jià)體系不統(tǒng)一，導(dǎo)致評(píng)價(jià)結(jié)果不同。為此，學(xué)術(shù)界提出了“組合評(píng)價(jià)”的思想，即將多種多指標(biāo)綜合評(píng)價(jià)的結(jié)果進(jìn)行適當(dāng)組合，既克服了單一多指標(biāo)綜合評(píng)價(jià)存在的不足，又集中了不同評(píng)價(jià)方法的優(yōu)點(diǎn)，從而得到更好的評(píng)價(jià)結(jié)果。組合評(píng)價(jià)方法分為以下兩種：

一種是將各種主客觀賦權(quán)法的權(quán)重進(jìn)行重新組合，然后加權(quán)匯總或用系統(tǒng)方法得到最終評(píng)價(jià)結(jié)果，如毛定祥[27]以最小二乘法建立了確定指標(biāo)權(quán)重的優(yōu)化模型，即最佳權(quán)重必須與各種主客觀賦權(quán)評(píng)價(jià)所得權(quán)重的偏差平方和最小，用線(xiàn)性規(guī)劃求解；劉麗[28]提出一種基于遺傳算法的組合評(píng)價(jià)模型，即通過(guò)遺傳算法優(yōu)化各評(píng)價(jià)方法的權(quán)重，然后根據(jù)評(píng)價(jià)指標(biāo)函數(shù)值得到組合評(píng)價(jià)結(jié)果；楊略[29]利用組合賦權(quán)法對(duì)不同方法求得的權(quán)重進(jìn)行組合，得到的各指標(biāo)最終有效權(quán)重既不偏向主觀判斷也不偏重客觀判斷；等等。

另一種是將不同綜合評(píng)價(jià)方法的評(píng)價(jià)結(jié)果進(jìn)行組合。彭猛業(yè)[30]提出了加權(quán)平均組合評(píng)價(jià)法，權(quán)重由各評(píng)價(jià)結(jié)果與平均評(píng)價(jià)值的相關(guān)系數(shù)確定，最后計(jì)算組合評(píng)價(jià)結(jié)果；2009年，俞立平、潘云濤等[31]利用基于極值法的組合評(píng)價(jià)方法，對(duì)多種多指標(biāo)綜合評(píng)價(jià)的評(píng)價(jià)結(jié)果標(biāo)準(zhǔn)化，將同一期刊不同評(píng)價(jià)結(jié)果的極大值作為該期刊的最終評(píng)價(jià)結(jié)果；2011年，俞立平[32]又提出了基于結(jié)果一致度的組合評(píng)價(jià)方法，即通過(guò)回歸測(cè)度出一種評(píng)價(jià)方法與其他所有評(píng)價(jià)方法的相似程度，并以相似程度歸一化的結(jié)果作為各評(píng)價(jià)方法的權(quán)重，最后再進(jìn)行加權(quán)匯總。

(三)定量與定性評(píng)價(jià)相結(jié)合

為了實(shí)現(xiàn)客觀數(shù)據(jù)和專(zhuān)家群體、科學(xué)理論與專(zhuān)家經(jīng)驗(yàn)的有機(jī)結(jié)合，更好地發(fā)揮評(píng)價(jià)體系的整體優(yōu)勢(shì)和綜合優(yōu)勢(shì)，國(guó)內(nèi)外著名的核心刊評(píng)價(jià)體系，如中信所核心刊評(píng)價(jià)、北大核心刊評(píng)價(jià)、中國(guó)科學(xué)引文數(shù)據(jù)庫(kù)(CSCD)核心刊評(píng)價(jià)及RCCSE期刊評(píng)價(jià)等，將定量與定性評(píng)價(jià)相結(jié)合，一方面通過(guò)定量評(píng)價(jià)提供客觀參考依據(jù)，另一方面通過(guò)專(zhuān)家定性評(píng)價(jià)糾正定量結(jié)果中的偏差，是一種較為理想的評(píng)價(jià)方法。

四、國(guó)內(nèi)學(xué)術(shù)期刊影響力評(píng)價(jià)實(shí)踐

(一)中信所核心期刊評(píng)價(jià)

中國(guó)科學(xué)技術(shù)信息研究所(簡(jiǎn)稱(chēng)中信所)于1987年開(kāi)始，對(duì)中國(guó)科技人員在國(guó)內(nèi)外發(fā)表論文數(shù)量和被引用情況進(jìn)行統(tǒng)計(jì)分析，并利用統(tǒng)計(jì)數(shù)據(jù)庫(kù)建立了中國(guó)科技論文與引文數(shù)據(jù)庫(kù)(CSTPCD)。中信所從期刊引用計(jì)量指標(biāo)和來(lái)源期刊計(jì)量指標(biāo)兩個(gè)方面構(gòu)建期刊影響力評(píng)價(jià)指標(biāo)體系，并通過(guò)層析分析法和模糊隸屬度轉(zhuǎn)化方法，確定各學(xué)科指標(biāo)的權(quán)重，最終得出每個(gè)期刊的綜合指標(biāo)排序值，完成對(duì)期刊的評(píng)價(jià)[33]。評(píng)價(jià)指標(biāo)體系如圖2所示。

圖2 中信所核心期刊評(píng)價(jià)指標(biāo)體系

(二)北大核心期刊評(píng)價(jià)

《北大核心期刊目錄要覽》由北京大學(xué)圖書(shū)館聯(lián)合眾多學(xué)術(shù)界權(quán)威專(zhuān)家鑒定，受到了學(xué)術(shù)界的廣泛認(rèn)同，是目前學(xué)術(shù)界認(rèn)同度較強(qiáng)、影響力較深遠(yuǎn)的期刊評(píng)定標(biāo)準(zhǔn)。北大中文核心的評(píng)價(jià)采取定量評(píng)價(jià)與定性評(píng)價(jià)相結(jié)合的方法：首先通過(guò)模糊綜合評(píng)價(jià)和專(zhuān)家賦權(quán)法評(píng)選出一批期刊；然后聘請(qǐng)行業(yè)內(nèi)的專(zhuān)家對(duì)學(xué)科核心期刊排序進(jìn)行調(diào)整，增補(bǔ)優(yōu)秀學(xué)術(shù)期刊并修改學(xué)科核心期刊數(shù)量；最后匯總專(zhuān)家評(píng)審結(jié)果，以修正評(píng)價(jià)結(jié)果，糾正其中的偏差。其評(píng)價(jià)指標(biāo)體系如圖3所示。

圖3 北大核心期刊評(píng)價(jià)指標(biāo)體系

其中，被引量、他引量、影響因子從論文被引角度評(píng)價(jià)學(xué)術(shù)期刊影響力，被索量、被摘率、Web下載率反映期刊被用戶(hù)利用的情況，被檢索工具收錄情況、獲獎(jiǎng)情況反映期刊質(zhì)量和被社會(huì)認(rèn)可的程度，基金論文代表學(xué)科重要研究領(lǐng)域和研究前沿問(wèn)題。

(三)中國(guó)科學(xué)引文數(shù)據(jù)庫(kù)(CSCD)核心刊評(píng)價(jià)

中國(guó)科學(xué)引文數(shù)據(jù)庫(kù)(Chinese Science Citation Database，CSCD)核心刊由中國(guó)科學(xué)院文獻(xiàn)情報(bào)中心確定，每?jī)赡赍噙x一次。CSCD選取期刊引用系列指標(biāo)，如總被引頻次、學(xué)科引用頻次、期刊影響因子、期刊他被引用率、即年指標(biāo)、被引半衰期等，構(gòu)建期刊影響力評(píng)價(jià)指標(biāo)體系[34]，并利用模糊綜合評(píng)價(jià)和專(zhuān)家賦權(quán)法對(duì)期刊進(jìn)行遴選；然后通過(guò)學(xué)科專(zhuān)家評(píng)審和中國(guó)科學(xué)引文數(shù)據(jù)庫(kù)來(lái)源期刊遴選委員會(huì)評(píng)議，最終得到各學(xué)科領(lǐng)域中具有權(quán)威性和高影響力的核心期刊。

(四)RCCSE期刊評(píng)價(jià)

中國(guó)學(xué)術(shù)期刊評(píng)價(jià)研究報(bào)告由中國(guó)科學(xué)評(píng)價(jià)研究中心(簡(jiǎn)稱(chēng)RCCSE)、武漢大學(xué)圖書(shū)館共同研發(fā)，選取Web即年下載率、總被引頻次、影響因子、二次文獻(xiàn)轉(zhuǎn)載量、基金論文比五項(xiàng)指標(biāo)，通過(guò)定量與定性相結(jié)合的方法對(duì)期刊進(jìn)行綜合評(píng)價(jià)：利用模糊數(shù)學(xué)法確定各指標(biāo)權(quán)重并加權(quán)匯總，然后由學(xué)科專(zhuān)家對(duì)學(xué)科排名前30%的預(yù)選學(xué)科進(jìn)行評(píng)分，最后得到各學(xué)科影響力較高期刊的綜合得分和排名。

五、思考與建議

(一)整合國(guó)內(nèi)多種期刊評(píng)價(jià)結(jié)果

我國(guó)目前的學(xué)術(shù)期刊影響力評(píng)價(jià)機(jī)構(gòu)數(shù)量眾多，大多采用以定量評(píng)價(jià)和定性評(píng)價(jià)相結(jié)合的方法。然而各大機(jī)構(gòu)從不同的維度構(gòu)建評(píng)價(jià)指標(biāo)體系，并有各自的評(píng)價(jià)期刊數(shù)據(jù)庫(kù)，所采用的評(píng)價(jià)方法也不盡相同，導(dǎo)致評(píng)價(jià)結(jié)果的不一致，從而影響了各評(píng)價(jià)體系的權(quán)威性。不僅給使用者和管理者帶來(lái)麻煩，也造成了大量交叉重復(fù)工作及人力物力的浪費(fèi)。針對(duì)上述問(wèn)題，建議國(guó)內(nèi)權(quán)威的期刊評(píng)價(jià)機(jī)構(gòu)，綜合考量國(guó)內(nèi)多所期刊評(píng)價(jià)機(jī)構(gòu)的評(píng)價(jià)結(jié)果，采納優(yōu)點(diǎn)規(guī)避不足，提高期刊評(píng)價(jià)結(jié)果的準(zhǔn)確性和可信度。另外，國(guó)內(nèi)一些比較知名的數(shù)據(jù)提供商，如萬(wàn)方數(shù)據(jù)、維普等，也應(yīng)積極加入到學(xué)術(shù)期刊影響力評(píng)價(jià)中來(lái)，利用自身海量的數(shù)據(jù)資源，結(jié)合社交媒體數(shù)據(jù)平臺(tái)的數(shù)據(jù)，構(gòu)建基于引文數(shù)據(jù)和類(lèi)似Altmetrics用戶(hù)使用數(shù)據(jù)的全方位期刊評(píng)價(jià)體系。

(二)建立具有國(guó)內(nèi)特色的評(píng)價(jià)指標(biāo)

國(guó)內(nèi)對(duì)學(xué)術(shù)期刊影響力的評(píng)價(jià)，過(guò)度依賴(lài)如影響因子等國(guó)外引文指標(biāo)，具有國(guó)內(nèi)特色的評(píng)價(jià)指標(biāo)卻寥寥無(wú)幾。影響因子本身具有一些缺陷，期刊間過(guò)度自引、不正當(dāng)引用、評(píng)價(jià)數(shù)據(jù)庫(kù)收錄文獻(xiàn)的局限性、英文文獻(xiàn)難以合理加入統(tǒng)計(jì)數(shù)據(jù)源等問(wèn)題都會(huì)影響其準(zhǔn)確性。而湯森路透公司賣(mài)掉旗下的SCI、TI等數(shù)據(jù)庫(kù)這一舉動(dòng)，更嚴(yán)重影響了以影響因子為代表的國(guó)外期刊評(píng)價(jià)指標(biāo)的權(quán)威性。事實(shí)證明，擺脫對(duì)國(guó)外評(píng)價(jià)指標(biāo)的依賴(lài)，建立具有中國(guó)學(xué)術(shù)特色、適應(yīng)國(guó)內(nèi)學(xué)術(shù)發(fā)展的期刊影響力評(píng)價(jià)指標(biāo)，是一種必然趨勢(shì)。國(guó)內(nèi)專(zhuān)家學(xué)者應(yīng)對(duì)已有的期刊評(píng)價(jià)指標(biāo)的優(yōu)缺點(diǎn)進(jìn)行評(píng)估和改善，并積極探求新的替代指標(biāo)。此外，充分利用社交媒體平臺(tái)資源，建立類(lèi)似Altmetrics的社會(huì)影響力指標(biāo)。

(三)進(jìn)一步規(guī)范同行評(píng)審制度

同行評(píng)審是期刊評(píng)價(jià)最基本的評(píng)審制度，但這方面的工作仍然匱乏：沒(méi)有完整統(tǒng)一的評(píng)審專(zhuān)家?guī)?，評(píng)審專(zhuān)家信息不全面、更新滯后，有的專(zhuān)家早已離開(kāi)科研前線(xiàn)，這些問(wèn)題都增加了專(zhuān)家遴選的難度；評(píng)審方與評(píng)審專(zhuān)家之間存在“人情關(guān)系”，評(píng)審專(zhuān)家的功利性等嚴(yán)重影響了評(píng)審結(jié)果的公正性和準(zhǔn)確性；有些專(zhuān)家的學(xué)術(shù)造詣?shì)^高，但學(xué)術(shù)道德較低，對(duì)評(píng)價(jià)方存在偏見(jiàn)并故意惡評(píng)等。針對(duì)這些問(wèn)題，可以從以下方面入手：一是建立面向不同學(xué)術(shù)領(lǐng)域的遴選專(zhuān)家?guī)欤贫▏?yán)格的專(zhuān)家遴選條件。二是嚴(yán)格實(shí)行回避和保密制度。評(píng)審方選擇專(zhuān)家時(shí)，應(yīng)注意回避與評(píng)價(jià)對(duì)象或評(píng)價(jià)過(guò)程有利益關(guān)聯(lián)的專(zhuān)家，評(píng)審專(zhuān)家在評(píng)價(jià)過(guò)程中要遵守保密制度。三是實(shí)行專(zhuān)家復(fù)評(píng)制度。建立復(fù)評(píng)專(zhuān)家組，對(duì)初評(píng)專(zhuān)家的評(píng)價(jià)結(jié)果進(jìn)行二次評(píng)價(jià)，以確保評(píng)價(jià)結(jié)果的準(zhǔn)確、公平。四是建立專(zhuān)家信用檔案、完善學(xué)術(shù)評(píng)審標(biāo)準(zhǔn)和細(xì)則等。

(四)建立實(shí)時(shí)有效的互動(dòng)機(jī)制

針對(duì)評(píng)審過(guò)程或評(píng)價(jià)結(jié)果的異議，沒(méi)有建立實(shí)時(shí)有效的申訴、反饋機(jī)制。例如評(píng)審方與評(píng)審專(zhuān)家之間的不正當(dāng)關(guān)系，專(zhuān)家評(píng)審的個(gè)人偏見(jiàn)等問(wèn)題，沒(méi)有提供合理的舉報(bào)渠道和監(jiān)督機(jī)制；評(píng)審方對(duì)評(píng)審結(jié)果存在不滿(mǎn)，沒(méi)有設(shè)置合理的申訴環(huán)節(jié)；期刊評(píng)價(jià)的指標(biāo)體系、評(píng)價(jià)方法等存在的爭(zhēng)議，沒(méi)有建立便捷的反饋機(jī)制等。針對(duì)上述問(wèn)題，提出以下建議：期刊評(píng)價(jià)結(jié)束后，將期刊評(píng)價(jià)的內(nèi)容、方法、程序、評(píng)價(jià)結(jié)果進(jìn)行公示，確保評(píng)價(jià)過(guò)程的公開(kāi)透明；被評(píng)審方如對(duì)評(píng)價(jià)結(jié)果有異議，可直接向評(píng)價(jià)方提出申訴，評(píng)審方應(yīng)及時(shí)做出恰當(dāng)處理，維護(hù)被評(píng)審方的權(quán)益；評(píng)價(jià)結(jié)果接受大眾反饋，對(duì)大眾反饋的評(píng)價(jià)不公問(wèn)題、評(píng)審方法的不恰當(dāng)之處進(jìn)行實(shí)事求是的處理。

[1]劉雪立, 董建軍, 周志新, 等. 我國(guó)醫(yī)學(xué)期刊出版周期與影響因子關(guān)系的調(diào)查研究[J]. 中國(guó)科技期刊研究, 2007, 18(1): 43-45.

[2]張凌之. 影響因子在我國(guó)科技期刊評(píng)價(jià)中的作用分析[J]. 編輯學(xué)報(bào), 2003, 15(2): 126-127.

[3]劉雪立. 參考文獻(xiàn)的繼承性引用、指示性引用和批判性引用與影響因子的標(biāo)準(zhǔn)化[J]. 中國(guó)科技期刊研究, 2004, 15(3): 251-253.

[4] Hirsch J E. An index to quantify an individual’s scientific research output [J]. Proceedings of the National Academy of Sciences of the United States of America, 2005, 102(46): 16569-16572.

[5] Braun T, Gl?nzel W, Schubert A. A Hirsch-type index for journals [J]. Scientometrics, 2006, 69(1): 169-173.

[6]王梅英，劉雪立，王 璞．H-指數(shù)及其擴(kuò)展指標(biāo)在期刊評(píng)價(jià)中的應(yīng)用[J]．情報(bào)雜志，2012，31(3)：60-64．

[7]趙基明, 邱均平, 黃 凱, 等. 一種新的科學(xué)計(jì)量指標(biāo)——h指數(shù)及其應(yīng)用述評(píng)[J]. 自然科學(xué)進(jìn)展, 2008, 22(1): 23-32.

[8] Egghe L. Theory and practise of the g-index [J]. Scientometrics, 2006, 69(1):131-152.

[9] Alonso S, Cabrerizo F J, Herrera-Viedma E, et al. hg -index: A new index to characterize the scientific output of researchers based on the h-and g-indices [J]. Scientometrics, 2010, 82(2): 391-400.

[10]楊康, 劉明政, 張 旭. SJR指數(shù)研究及其與影響因子的比較分析[J]. 情報(bào)雜志, 2009, 28(11): 27-30.

[11]任勝利. 特征因子(Eigenfactor): 基于引證網(wǎng)絡(luò)分析期刊和論文的重要性[J]. 中國(guó)科技期刊研究, 2009, 20(3): 415-418.

[12]《實(shí)驗(yàn)室科學(xué)》編輯部. Web即年下載率[J]. 實(shí)驗(yàn)室科學(xué), 2009(2): 34-34.

[13]顧立平. 開(kāi)放數(shù)據(jù)計(jì)量研究綜述:計(jì)算網(wǎng)絡(luò)用戶(hù)行為和科學(xué)社群影響力的Altmetrics計(jì)量[J]. 現(xiàn)代圖書(shū)情報(bào)技術(shù), 2013, 234(6): 1-8.

[14] 王 睿, 胡文靜, 郭 瑋. 常用Altmetrics工具比較[J]. 現(xiàn)代圖書(shū)情報(bào)技術(shù), 2014(12):18-26.

[15]樊學(xué)明, 彭鼎原, 沈 丹. Altmetrics在科技期刊資源評(píng)價(jià)中的應(yīng)用研究[J]. 中國(guó)科技資源導(dǎo)刊, 2015(2): 98-103.

[16]何 文. Altmetrics與引文分析法在期刊影響力評(píng)價(jià)上的相關(guān)性研究[D]. 南京: 南京大學(xué), 2015.

[17]熊曉英. 相對(duì)影響因子及其意義[J]. 中國(guó)科技期刊研究, 2005, 16(6): 912-914.

[18]喻 依, 甘若迅, 樊鎖海, 等. 基于PageRank算法和HITS算法的期刊評(píng)價(jià)研究[J]. 計(jì)算機(jī)科學(xué), 2014, 41(z1): 110-113.

[19]邵作運(yùn), 李秀霞. f(x)指數(shù): 期刊學(xué)術(shù)影響力評(píng)價(jià)新指標(biāo)[J]. 中國(guó)科技期刊研究, 2015, 26(11): 1194-1199.

[20]劉蓮花. 基于距離綜合評(píng)價(jià)法的數(shù)學(xué)核心期刊評(píng)價(jià)[J]. 中國(guó)科技期刊研究, 2015, 26(8): 871-874.

[21]王靖娜. 科技期刊評(píng)價(jià)指標(biāo)的統(tǒng)計(jì)分析[D]. 西安: 西安電子科技大學(xué), 2011.

[22]俞立平, 武夷山. 學(xué)術(shù)期刊客觀賦權(quán)評(píng)價(jià)新方法——指標(biāo)難度賦權(quán)法[J]. 現(xiàn)代圖書(shū)情報(bào)技術(shù), 2011, 27(4): 64-70.

[23]楊文燕, 劉亞民, 高 昕, 等. 利用主成分分析法對(duì)中國(guó)腫瘤類(lèi)期刊學(xué)術(shù)影響力的綜合評(píng)價(jià)[J]. 中國(guó)腫瘤, 2008, 17(1): 79-81.

[24]李 華, 李 政. 基于因子分析法評(píng)價(jià)期刊的學(xué)術(shù)影響力[J]. 南通職業(yè)大學(xué)學(xué)報(bào), 2010, 24(2): 72-75.

[25]王建軍, 楊德禮. 管理學(xué)CSSCI檢索期刊學(xué)術(shù)影響力分析[J]. 情報(bào)學(xué)報(bào), 2010, 29(1): 142-150.

[26]馬虎兆, 于挨福. 基于乘法模型和層次分析法的科技期刊學(xué)術(shù)影響力評(píng)價(jià)研究——以科學(xué)研究類(lèi)期刊為例[J]. 情報(bào)雜志, 2009, 28(6): 101-104.

[27]毛定祥. 一種最小二乘意義下主客觀評(píng)價(jià)一致的組合評(píng)價(jià)方法[J]. 中國(guó)管理科學(xué), 2002, 10(5): 95-97.

[28]劉 麗, 張禮兵, 金菊良. 基于遺傳算法的組合評(píng)價(jià)模型[J]. 合肥工業(yè)大學(xué)學(xué)報(bào):自然科學(xué)版, 2004, 27(8): 899-902.

[29]楊 略. 基于組合賦權(quán)法的圖書(shū)館期刊選定評(píng)價(jià)模型[J]. 現(xiàn)代情報(bào), 2012, 32(2): 20-22.

[30]彭猛業(yè), 樓超華, 高爾生. 加權(quán)平均組合評(píng)價(jià)法及其應(yīng)用[J]. 中國(guó)衛(wèi)生統(tǒng)計(jì), 2004, 21(3): 146-149.

[31]俞立平, 潘云濤, 武夷山. 基于極值法的學(xué)術(shù)期刊組合評(píng)價(jià)研究[J]. 圖書(shū)與情報(bào), 2009(4): 22-27.

[32]俞立平, 潘云濤, 武夷山. 基于結(jié)果一致度的學(xué)術(shù)期刊組合評(píng)價(jià)研究[J]. 中國(guó)科技期刊研究, 2011, 22(1): 59-64.

[33]曾建勛. 2011年版中國(guó)期刊引證報(bào)告: 擴(kuò)刊版[M]. 北京: 科學(xué)技術(shù)文獻(xiàn)出版社, 2011.

[34]楊 陽(yáng). 我國(guó)核心期刊評(píng)價(jià)體系對(duì)比研究[D]. 開(kāi)封: 河南大學(xué), 2015.

(本文責(zé)編：辛 城)

Study on Evaluation Method of Academic Journal Impact

JIANG Yong-qing1, QI Ping2

(1.InstituteofScientificandTechnicalInformationofChina,Beijing100038,China;2.WanfangDataCo.,Ltd.,Beijing100038,China)

First, construct evaluation method system for impact of academic journals from three aspacts: the qualitative evaluation, quantitative evaluation, qualitative and quantitative combining evaluation.The main qualitative evaluation is peer review. Quantitative evaluation includes single evaluation and multiple index objective evaluation, qualitative and quantitative combining evaluation includes multiple index subjective and objective evaluation, and combination evaluation. Then, introduce and illustrate each evaluation methods and corresponding index system. At last, analyze problems of Chinese academic journals impact evaluation, and give consideration and recommendations.

academic journal impact；evaluation methods；combination evaluation；index system

2016-11-20

2017-02-25

蔣勇青(1963-)，男，湖南沅陵人，高級(jí)工程師，研究方向：信息資源建設(shè)與服務(wù)、知識(shí)服務(wù)、科研管理、企業(yè)管理。

G350

A

1002-9753(2017)03-0178-08