劉菊紅 黃凱文
開(kāi)放獲取資源評(píng)價(jià)模式的研究:基于單篇論文質(zhì)量評(píng)價(jià)*
劉菊紅黃凱文
論文分析開(kāi)放獲取出版的發(fā)展態(tài)勢(shì),研究開(kāi)放獲取期刊的質(zhì)量評(píng)價(jià)方法,指出開(kāi)放獲取期刊在發(fā)展的進(jìn)程中,逐漸表現(xiàn)出與傳統(tǒng)期刊的差異,采用傳統(tǒng)評(píng)價(jià)方法應(yīng)用于開(kāi)放獲取期刊評(píng)價(jià)已經(jīng)具有明顯的局限性,并揭示了基于開(kāi)放獲取期刊的評(píng)價(jià)已經(jīng)開(kāi)始向基于單篇論文的質(zhì)量評(píng)價(jià)過(guò)渡,分析了基于單篇論文質(zhì)量評(píng)價(jià)的主要指標(biāo)、應(yīng)用情況、評(píng)價(jià)體系以及評(píng)價(jià)效果。
開(kāi)放獲取論文質(zhì)量評(píng)價(jià)Altmetrics
科學(xué)出版在歷經(jīng)了350年的緩慢發(fā)展之后,目前已邁入以快速出版和普遍分享為特征的互聯(lián)網(wǎng)時(shí)代,一些新型出版模式正在挑戰(zhàn)傳統(tǒng)出版模式,其典型代表就是開(kāi)放獲取(以下簡(jiǎn)稱(chēng)OA)模式。隨著OA運(yùn)動(dòng)的深入發(fā)展,涌現(xiàn)出了一批具有嶄新特點(diǎn)的開(kāi)放獲取期刊(以下簡(jiǎn)稱(chēng)OAJ),這些期刊從出版速度、出版容量、媒體表現(xiàn)形式、語(yǔ)義化出版等方面,都顯示出了與傳統(tǒng)期刊不同的特點(diǎn),采用傳統(tǒng)文獻(xiàn)計(jì)量學(xué)指標(biāo)來(lái)評(píng)價(jià)OAJ,已經(jīng)顯示出局限性。因此,針對(duì)OAJ本身的特點(diǎn)來(lái)設(shè)計(jì)評(píng)價(jià)指標(biāo),已經(jīng)成為一項(xiàng)具有重要意義的研究課題。
1.1在數(shù)量上顯著增加
OA自提出以來(lái),以其先進(jìn)的理念,于21世紀(jì)取得了長(zhǎng)足發(fā)展。國(guó)際權(quán)威的OAJ收錄代表——2003年5月由瑞典隆德大學(xué)(Lund University Libraries)圖書(shū)館創(chuàng)辦的OAJ目錄(Directory of Open Access Journal,簡(jiǎn)稱(chēng)DOAJ)截至2014年5月,收錄的OAJ已經(jīng)達(dá)到9834種,OA文章約1 659 880篇,見(jiàn)圖1。始于2005年1月的“開(kāi)放存取知識(shí)庫(kù)名錄”(Direct of Open Access Repositories,OpenDOAR)是公認(rèn)的收錄OA知識(shí)庫(kù)最為權(quán)威的目錄網(wǎng)站,截至2014年5月,在OpenDOAR注冊(cè)的OA知識(shí)庫(kù)已達(dá)2604家。OAJ和機(jī)構(gòu)知識(shí)庫(kù)的迅速發(fā)展,體現(xiàn)出OA運(yùn)動(dòng)迅猛發(fā)展的潮流。據(jù)一項(xiàng)歐盟資助的研究同時(shí)表明,已經(jīng)有一半的論文在發(fā)表兩年內(nèi)可以免費(fèi)訪問(wèn)。研究的第一作者艾瑞克·阿爾尚博(Eric Archambault)認(rèn)為,這表明OA出版已經(jīng)抵達(dá)一個(gè)拐點(diǎn)[1]。
圖1 DOAJ收錄OAJ數(shù)量
1.2在質(zhì)量上持續(xù)提高
Web of Science數(shù)據(jù)庫(kù)收錄的研究成果代表著世界基礎(chǔ)科學(xué)研究的最高水準(zhǔn)。通過(guò)Web of Science核心合集檢索顯示,2004年共發(fā)表29 394篇OA論文,而截至2014年5月,OA論文總量已經(jīng)達(dá)到1 063 036篇;且OA論文數(shù)量占論文總量的百分比一直在增加,由2004年僅占2.54%上升到2013年占比高達(dá)16.61%(詳見(jiàn)圖2)。這說(shuō)明隨著OA運(yùn)動(dòng)的深入發(fā)展,已經(jīng)得到了高水平科研人員、科研機(jī)構(gòu)、出版機(jī)構(gòu)的認(rèn)同,愿意在OAJ上發(fā)表論文的研究人員越來(lái)越多。
圖2 SCI核心合集收錄OA論文數(shù)量占全部論文數(shù)量的百分比
自O(shè)A誕生以來(lái),其質(zhì)量問(wèn)題就成為學(xué)術(shù)界關(guān)注的焦點(diǎn),國(guó)內(nèi)外研究人員圍繞OAJ、OA論文的質(zhì)量和影響力展開(kāi)了較為廣泛的實(shí)證研究。早期國(guó)外諸多學(xué)者比較了同一學(xué)科領(lǐng)域同一期刊或者影響因子接近的期刊、或質(zhì)量接近的會(huì)議論文中,OA論文與非OA論文獲得的引用數(shù)量的差異,探討OA對(duì)促進(jìn)學(xué)術(shù)傳播、提高學(xué)術(shù)成果可見(jiàn)度、增加引用數(shù)量的影響[2-6]。國(guó)內(nèi)對(duì)OAJ的質(zhì)量評(píng)價(jià),可以劃分為以下幾個(gè)類(lèi)型:
(1)早期的研究,從學(xué)科分布、檢索特性、影響因子等角度,將OAJ與傳統(tǒng)著名期刊進(jìn)行對(duì)比[7,8]。
(2)基于文獻(xiàn)計(jì)量學(xué)指標(biāo)構(gòu)建評(píng)價(jià)體系。經(jīng)過(guò)初期的探索后,眾多學(xué)者開(kāi)始采用傳統(tǒng)文獻(xiàn)計(jì)量學(xué)指標(biāo)如載文量、篇均作者數(shù)、總被引頻次、平均引文率、影響因子、即時(shí)因子、h指數(shù)、論文合著率、國(guó)際論文比、作者合作度、擴(kuò)散因子、特征因子(Eigenfactor)、SJR等指標(biāo)構(gòu)建OAJ質(zhì)量評(píng)價(jià)指標(biāo)體系[9-14]。
(3)基于文獻(xiàn)計(jì)量學(xué)結(jié)合網(wǎng)絡(luò)計(jì)量學(xué)、被權(quán)威索引體系收錄指標(biāo)構(gòu)建OAJ質(zhì)量評(píng)價(jià)指標(biāo)體系。因OAJ是源生數(shù)字、源生開(kāi)放的,期刊的出版流程及用戶利用行為如作者投稿、同行評(píng)議、論文發(fā)表、論文閱讀、全文下載、同行討論等都以在線形式展開(kāi),因此,OAJ的成敗,除了與文章內(nèi)容質(zhì)量密不可分之外,還受到依托網(wǎng)站各項(xiàng)指標(biāo)的影響,比如網(wǎng)站響應(yīng)速度、界面友好性、檢索入口數(shù)目、網(wǎng)絡(luò)載文量、總網(wǎng)頁(yè)數(shù)、網(wǎng)絡(luò)引文率、鏈接流行度、網(wǎng)絡(luò)述及、總網(wǎng)絡(luò)影響因子、外部網(wǎng)絡(luò)影響因子、PageRank值、IP訪問(wèn)量、頁(yè)面瀏覽量、人均頁(yè)面瀏覽量等指標(biāo)。因此,學(xué)術(shù)界在使用傳統(tǒng)文獻(xiàn)計(jì)量指標(biāo)的基礎(chǔ)上,聯(lián)合網(wǎng)絡(luò)計(jì)量學(xué)指標(biāo)以及被權(quán)威文摘工具收錄情況,構(gòu)建OAJ質(zhì)量評(píng)價(jià)指標(biāo)體系[15-19]。
(4)從定性和定量?jī)蓚€(gè)角度設(shè)計(jì)OAJ質(zhì)量評(píng)價(jià)指標(biāo)體系。定性指標(biāo)包括期刊規(guī)劃?出版機(jī)構(gòu)的權(quán)威性?審稿是否嚴(yán)格、標(biāo)準(zhǔn)是否規(guī)范、版權(quán)保護(hù)方案、文字表達(dá)、科學(xué)創(chuàng)新、數(shù)據(jù)處理、研究方案等,定量指標(biāo)包括文獻(xiàn)計(jì)量學(xué)指標(biāo)、網(wǎng)絡(luò)計(jì)量學(xué)相關(guān)指標(biāo)[20,21]。
但隨著OAJ的深入發(fā)展,OAJ本身開(kāi)始呈現(xiàn)出與傳統(tǒng)期刊不同的特征,如:出版周期不固定、出版容量無(wú)限制、出版內(nèi)容多媒體化、開(kāi)放獲取的全文可計(jì)算等。OAJ的種種期刊特征日趨模糊化,與傳統(tǒng)期刊的分野日益明顯。在傳統(tǒng)文獻(xiàn)計(jì)量學(xué)指標(biāo)廣受詬病、OA論文快速激增,科研人員呼吁新型學(xué)術(shù)工具以解決日益嚴(yán)竣的論文選擇矛盾的困境下,OA領(lǐng)域新型評(píng)價(jià)指標(biāo)開(kāi)始出現(xiàn)。
3.1出版速度快
OA的宗旨之一在于加快同行評(píng)審期刊的出版,加快學(xué)術(shù)成果的傳播速率。傳統(tǒng)紙質(zhì)期刊有明確的出版周期,但網(wǎng)絡(luò)出版無(wú)需受到紙質(zhì)期刊按期出版的限制,可實(shí)現(xiàn)按篇即時(shí)出版,因此相對(duì)紙質(zhì)出版可以有效縮短出版時(shí)滯,加快科研成果的傳播。例如,美國(guó)光學(xué)學(xué)會(huì)主辦的《Optics Express》 和《Optical Materials Express》,提供了“Issues in Progress”欄目,顯示已錄用并完成編輯加工的文章,每隔一周,會(huì)集中將此處的文章集合成為一期,作為最新一期出版?!禤LoS One》充分利用互聯(lián)網(wǎng)優(yōu)勢(shì),采用即時(shí)出版,無(wú)明確的出版周期。只要稿件經(jīng)過(guò)了嚴(yán)格的質(zhì)量體系審查,就可以在每個(gè)工作日在線發(fā)表。所以在《PLoS One》網(wǎng)站只要點(diǎn)擊“Browse articles”,就可以看到當(dāng)天或最近一周出版的文章。據(jù)趙樹(shù)慶和劉永勝研究報(bào)道2010年中國(guó)的20種科技期刊,3164篇論文的平均發(fā)表時(shí)滯為11.6個(gè)月(約348天)[22],與OAJ的差距巨大。
3.2出版容量大
在過(guò)去的十年間,涌現(xiàn)出了《PLoS One》、《OPTICS》等發(fā)文量大、增速較快的OAJ。創(chuàng)刊于2006年的《PLoS One》,2007年全年發(fā)表論文4077篇,2013年全年共發(fā)表論文32 986篇,7年間年均發(fā)文量增長(zhǎng)了10倍多,截止2014年5月8日止,共發(fā)表文章86 837篇(詳見(jiàn)圖3),其文章總量超過(guò)了1945年創(chuàng)刊,迄今已有59年歷史的《The New England Journal of Medicine》,后者截止2014年5月8日止,共發(fā)表文章69 972篇。OA的重要意義之一在于加快科學(xué)研究成果的傳播速度,《PLoS One》在一天中出版的文章量比某些傳統(tǒng)期刊一年出版的文章數(shù)量還要多。
圖3 《PLoS One》歷年發(fā)表文章數(shù)量
3.3富媒體出版
傳統(tǒng)的紙質(zhì)出版只能局限于文本和圖形方式的線性展示,而網(wǎng)絡(luò)出版提供了更多的可能。首先可以展現(xiàn)多種資源形式,如圖片、音頻、視頻、動(dòng)畫(huà)、圖表、模擬動(dòng)畫(huà)、數(shù)據(jù)模型、流程圖等,因此可以傳達(dá)更多的信息。目前,由中國(guó)科學(xué)院長(zhǎng)春光學(xué)精密機(jī)械與物理研究所與自然出版集團(tuán)(Nature Publishing Group,NPG)以O(shè)A模式合作出版的《Light》網(wǎng)絡(luò)版以xml標(biāo)準(zhǔn)出版,提供了各種信息之間的交叉鏈接,并具有全文檢索功能。同時(shí),允許作者在發(fā)表文章時(shí),以pdf、wav、gif、ppt等格式出版補(bǔ)充資料,以進(jìn)一步補(bǔ)充說(shuō)明論文中的論點(diǎn)[23]。這種富媒體出版,極大地方便了讀者使用資源。
3.4富語(yǔ)義出版
Web技術(shù)可以幫助網(wǎng)絡(luò)期刊論文實(shí)現(xiàn)多種形式的語(yǔ)義標(biāo)記和語(yǔ)義增強(qiáng),比如論文可以包含與論文直接相關(guān)的信息及網(wǎng)站的鏈接,如作者的個(gè)人主頁(yè)、供應(yīng)商目錄、數(shù)據(jù)庫(kù)及引用的論文;論文中的關(guān)鍵術(shù)語(yǔ)和概念被識(shí)別和區(qū)分出來(lái),并通過(guò)在線網(wǎng)絡(luò)服務(wù)提供鼠標(biāo)懸停彈窗式語(yǔ)義定義、公式和數(shù)據(jù)庫(kù)條目的鏈接;提供交互式圖表,通過(guò)語(yǔ)義鏡頭揭示圖表中的數(shù)值數(shù)據(jù),鼠標(biāo)彈窗提供與文本引用的上下文有關(guān)的引文節(jié)選,重新排序參考文獻(xiàn)列表;將論文中的數(shù)據(jù)與數(shù)據(jù)庫(kù)中存在的相似信息相融合,比如論文中有關(guān)地理位置的數(shù)據(jù)可以KML文件的形式在谷歌地圖中查看等。David Shotton對(duì)OAJ的語(yǔ)義增強(qiáng)層級(jí)進(jìn)行了詳細(xì)的研究,并將其劃分為5個(gè)層級(jí)[24]。
3.5內(nèi)容單元可計(jì)算
與傳統(tǒng)紙質(zhì)期刊及基于訂購(gòu)的數(shù)字期刊不同,刊載于OAJ的論文是源生數(shù)字、源生開(kāi)放的,其全文數(shù)字內(nèi)容可以立即獲取,其知識(shí)單元可以被解析、被描述、被關(guān)聯(lián)、被組織,從而為各種自動(dòng)化、智能化的知識(shí)發(fā)現(xiàn)提供了可能,為基于論文內(nèi)容的服務(wù)提供了更為豐富的空間。
4.1出現(xiàn)背景
4.1.1傳統(tǒng)計(jì)量指標(biāo)的局限性
由于OAJ已經(jīng)呈現(xiàn)出版速度快、出版容量大、并能實(shí)現(xiàn)富媒體、富語(yǔ)義出版等顯著特征,OA論文規(guī)模增速加快。隨著科研文獻(xiàn)海量激增,科研人員所面臨的主要困難,已經(jīng)不再是文獻(xiàn)資源不足,而是如何從海量的文獻(xiàn)信息資源中,快速、高效地發(fā)現(xiàn)自己所需要的文獻(xiàn)。傳統(tǒng)文獻(xiàn)計(jì)量學(xué)所采用的主要計(jì)量指標(biāo)被引次數(shù)、影響因子等積累需要很長(zhǎng)的時(shí)間周期,經(jīng)統(tǒng)計(jì),從論文發(fā)表到被引用一般需要1~3年甚至更長(zhǎng)時(shí)間,引文分析法無(wú)法及時(shí)反映論文的影響力,這與以快速出版、即時(shí)出版為特征的開(kāi)放獲取資源體現(xiàn)出不匹配性。同時(shí),引用指標(biāo)還面臨著評(píng)價(jià)指標(biāo)不全面[25]、容易產(chǎn)生馬太效應(yīng)等問(wèn)題。基于此,國(guó)外相關(guān)學(xué)者認(rèn)為計(jì)量學(xué)領(lǐng)域也需要進(jìn)行一次Web2.0革命,不但要解決傳統(tǒng)評(píng)價(jià)方式存在的問(wèn)題和缺陷,同時(shí)要結(jié)合網(wǎng)絡(luò)時(shí)代的特點(diǎn)進(jìn)行計(jì)量學(xué)創(chuàng)新,基于單篇論文的計(jì)量指標(biāo)就在這樣的背景下誕生。
4.1.2科研行為的網(wǎng)絡(luò)化
科研人員越來(lái)越多地將日??蒲泄ぷ鬓D(zhuǎn)移到網(wǎng)絡(luò)上進(jìn)行??茖W(xué)家在網(wǎng)上建立學(xué)術(shù)博客,就科學(xué)問(wèn)題展開(kāi)討論并交流觀點(diǎn),在網(wǎng)上搜索、下載學(xué)術(shù)文章,將學(xué)術(shù)文獻(xiàn)的題錄保存在網(wǎng)頁(yè)版?zhèn)€人文獻(xiàn)管理軟件中、閱讀網(wǎng)絡(luò)學(xué)術(shù)文章、對(duì)文章進(jìn)行評(píng)級(jí)、打分、發(fā)表評(píng)論、制作標(biāo)簽等。這些社會(huì)網(wǎng)絡(luò)行為產(chǎn)生了豐富的在線活動(dòng)“印跡”,為計(jì)量學(xué)研究發(fā)展提供了新興測(cè)度方法和多元化指標(biāo),而這些指標(biāo)在以往是不可能得到的。參考文獻(xiàn)管理軟件Zotero和Mendeley聲稱(chēng)儲(chǔ)存了超過(guò)400萬(wàn)的文獻(xiàn)數(shù)量,這比PubMed的文獻(xiàn)總量還要大。有1/3的科研人員在使用Twitter,使用學(xué)術(shù)博客、微博的科研人員也在增長(zhǎng)。這些多種多樣的行為形成了一個(gè)復(fù)雜的可以追蹤的比以往任何時(shí)候都要更豐富的監(jiān)測(cè)指標(biāo)。
4.1.3基于單篇論文評(píng)價(jià)指標(biāo)的出現(xiàn)
OA出版商不僅致力于出版優(yōu)質(zhì)的科研內(nèi)容,促進(jìn)科學(xué)交流與傳播,改善因數(shù)據(jù)庫(kù)價(jià)格門(mén)檻形成的科學(xué)交流障礙,還針對(duì)影響因子以刊評(píng)文、時(shí)滯太長(zhǎng)的顯著弊端、開(kāi)發(fā)了新一代論文評(píng)價(jià)體系?;诳蒲腥藛T豐富的在線科研活動(dòng)“印跡”,開(kāi)發(fā)了針對(duì)單篇文章的各種利用指標(biāo),體現(xiàn)論文被社會(huì)各界閱讀、下載、收藏、保存、討論、分享、引用的情況,相當(dāng)于將同行評(píng)議眾包給社會(huì)大眾,實(shí)現(xiàn)廣泛的同行評(píng)議功能。
4.2兩種主要的評(píng)價(jià)體系
4.2.1Altmetrics
“Altmetrics”(別稱(chēng)alternative metrics)是Web2.0環(huán)境下一種新興的計(jì)量方法,于2010年由J.Priem最先在Twitter上提出[26],是對(duì)傳統(tǒng)科學(xué)計(jì)量學(xué)的繼承和補(bǔ)充,國(guó)內(nèi)將其譯為補(bǔ)充計(jì)量學(xué)[27]、替代計(jì)量學(xué)[28]、選擇性計(jì)量學(xué)[29-30]、另類(lèi)計(jì)量學(xué)[31]、網(wǎng)絡(luò)選擇計(jì)量學(xué)[32]。學(xué)者P.Analytics研究了所有的研究成果采用的以及可用的評(píng)價(jià)指標(biāo),將Altmetrics分為5類(lèi),分別是被使用情況、被獲取情況、被提及情況、社交媒介和引用情況。被使用情況是指評(píng)測(cè)論文的使用或利用情況,包括下載量、訪問(wèn)量、館藏?cái)?shù)量等指標(biāo);被獲取情況是指評(píng)測(cè)論文被讀者閱讀、保存、收藏、添加書(shū)簽等;被提及情況是指評(píng)測(cè)論文指論文被博客、新聞報(bào)道、維基百科、評(píng)論中提及的次數(shù);社交媒介是指讀者在社交網(wǎng)絡(luò)中對(duì)論文的分享、推薦、排名和喜愛(ài)情況;引用情況則是指文章被其他學(xué)者的引用數(shù)量[33]。它的特征是利用補(bǔ)充性指標(biāo)和引用指標(biāo)共同去評(píng)價(jià)待評(píng)價(jià)的對(duì)象,這些對(duì)象不僅僅是論文,還可能是數(shù)據(jù)集、程序段或者論文中的片段等,研究的是評(píng)價(jià)對(duì)象在開(kāi)放平臺(tái)的使用情況以及讀者在社交媒體中的交流活動(dòng)。Piwowar認(rèn)為它提供的影響力分析更為細(xì)致,學(xué)術(shù)產(chǎn)出的閱讀、討論、存儲(chǔ)和評(píng)論都可被計(jì)算;提供實(shí)時(shí)更新的數(shù)據(jù),可以評(píng)估一天而不是一年的影響力;可以評(píng)估網(wǎng)民對(duì)學(xué)術(shù)產(chǎn)出的影響;該指標(biāo)受到各種不同受眾的影響[34]。
4.2.2Article Level Metrics
2009年3月末,PLOS實(shí)施了一項(xiàng)“Article Level Metrics”計(jì)劃,即“論文層面計(jì)量”,提供來(lái)自期刊開(kāi)放存取平臺(tái)和學(xué)術(shù)社交網(wǎng)絡(luò)的評(píng)價(jià)數(shù)據(jù),反映每篇論文的多維使用情況和傳播水平。Article Level Metrics是PLOS在線出版商提出的一種評(píng)價(jià)體系,評(píng)價(jià)的對(duì)象是發(fā)表在PLOS出版平臺(tái)上的文章。
4.2.3兩種評(píng)價(jià)指標(biāo)體系采用的主要指標(biāo)
來(lái)自Altmetric.com的Altmetrics指標(biāo)和PLoS平臺(tái)提供的Article Level Metrics是目前影響力最大、使用范圍最廣泛的兩大評(píng)價(jià)體系之一,前者的用戶包括大型OA出版集團(tuán)BioMed Central,以及著名數(shù)據(jù)庫(kù)出版商N(yùn)PG、愛(ài)思唯爾(Elsevier)、施普林格(springer)等。兩大體系采用的主要指標(biāo)見(jiàn)表1:
表1 兩種論文級(jí)計(jì)量指標(biāo)體系包含的指標(biāo)
4.3基于單篇論文的評(píng)價(jià)指標(biāo)被廣泛應(yīng)用
Haustain等對(duì)文獻(xiàn)計(jì)量學(xué)專(zhuān)家發(fā)表論文在社會(huì)化媒體中覆蓋程度進(jìn)行調(diào)查,發(fā)現(xiàn)82%的論文被Mendeley收藏,有一半的被調(diào)查者擁有Twitter帳號(hào)[35]。調(diào)查顯示,目前15%-24%的文章?lián)碛蠥ltmetrics指標(biāo),社會(huì)科學(xué)、人文科學(xué)、醫(yī)學(xué)和生命科學(xué)擁有Altmetrics的文章數(shù)量最多,預(yù)示這幾個(gè)學(xué)科是Altmetrics有特殊價(jià)值的領(lǐng)域。Rodrigo Costas等調(diào)查了2011、2012、2013年 SCI數(shù)據(jù)庫(kù)收錄論文擁有Altmetrcs指標(biāo)的情況,其比率分別為10.8%、23.8%、25%,可見(jiàn)擁有Altmetrcs指標(biāo)的文章比例在逐年增加。對(duì)2011年7月至11月間發(fā)表的具有DOI的500 229篇SCI論文的調(diào)查顯示,有75 569篇論文(15.11%)擁有Altmetrcs指標(biāo),其中生物醫(yī)學(xué)、健康科學(xué)領(lǐng)域比例最高,22.83%,其次是社會(huì)科學(xué)和人文科學(xué)領(lǐng)域,達(dá)22.50%(見(jiàn)表2)、生命、環(huán)境科學(xué)15.94%[36]。
表2 Altmetrics指標(biāo)被采用情況
在各類(lèi)Altmetrics指標(biāo)中,Twitter的使用率最高,達(dá)到13.3%。其他指標(biāo)的應(yīng)用率都相對(duì)偏低,F(xiàn)acebook的使用率為2.5%,Blogs的使用率為1.9%,Google+、News outlets的使用率則還不到1%(見(jiàn)表3)。
表3 Altmetrics各項(xiàng)指標(biāo)的流行情況
4.4Altmetrcs指標(biāo)的評(píng)價(jià)效果分析
Altmetrcs誕生還不足5年的時(shí)間,其指標(biāo)選擇、評(píng)價(jià)體系、應(yīng)用效果還處在大規(guī)模的驗(yàn)證、探索階段。相繼有學(xué)者針對(duì)Altmetrcs與引用指標(biāo)之間的關(guān)系展開(kāi)研究。Thelwall研究了《nature》《science》發(fā)表的文章在Mendeley和CiteUlike中的收藏情況,發(fā)現(xiàn)與Web of Science引用數(shù)據(jù)有顯著相關(guān)性[37]。Gunther Eysenbach研究了應(yīng)用Twitter數(shù)據(jù)預(yù)測(cè)引用的可能性[38]。由于對(duì)Altmetrcs是否有效缺乏系統(tǒng)性的證明,Rodrigo Costas等開(kāi)展了一次大樣本研究,以彌補(bǔ)這一缺陷。通過(guò)對(duì)SCI數(shù)據(jù)庫(kù)收錄的、具有DOI的50余萬(wàn)篇論文的11項(xiàng)Altmetrcs指標(biāo)與引用之間的相關(guān)性研究表明,Twitter、Facebook wall posts、research highlights、blogs、mainstream media and forums與引用成正相關(guān)關(guān)系,Google+ posts則未顯示出類(lèi)似的規(guī)律,LinkedIn、Pinterest、question and answer sites、Reddit與引用關(guān)系的證據(jù)則不足。Altmetrcs分值對(duì)高被引文章的預(yù)測(cè)能力不如期刊被引次數(shù);Altmetrcs分值(特別是在博客中被討論的次數(shù))對(duì)高被引文章的預(yù)測(cè)能力高于期刊被引次數(shù),但其查全率比較低。目前,Altmetrcs指標(biāo)更適合作為引文分析的補(bǔ)充工具,而不是替代引文分析。
引用數(shù)據(jù)的偏態(tài)分布使得將期刊影響因子用于評(píng)價(jià)單篇論文飽受詬病,OA運(yùn)動(dòng)的深入發(fā)展、社交網(wǎng)絡(luò)的流行與普及、學(xué)術(shù)界對(duì)建立學(xué)術(shù)過(guò)濾機(jī)制的強(qiáng)烈需求共同推動(dòng)了基于單篇論文評(píng)價(jià)指標(biāo)體系的誕生。但目前的評(píng)價(jià)體系還存在諸多的局限性,距離正式納入科研評(píng)價(jià)系統(tǒng)還有很多工作要做,但它代表了未來(lái)的發(fā)展方向,為計(jì)量學(xué)在Web 2.0時(shí)代的發(fā)展打開(kāi)了新的局面。
[1]Commission E.Proportion of Open Access Peer-Reviewed Papers at the European and World Levels[EB/ OL].[2013-12-13].http://apo.org.au/research/proportion-open-access-peer-reviewed-papers-europeanand-world-levels-2004-2011.
[2]Antelman K.Do open-access articles have a greater research impact?[J].College&research libraries,2004,65(5):372-382.
[3] Hajjem C,Harnad S,Gingras Y.Ten-year crossdisciplinary comparison of the growth of open access and how it increases research citation impact[J]. arXiv preprint cs/0606079,2006.
[4]Schwarz G J,Kennicutt J R C.Demographic and citation trends in astrophysical journal papers and preprints[J].arXiv preprint astro-ph/0411275,2004.
[5]Metcalfe T S.The citation impact of digital preprint archives for solar physics papers[J].Solar Physics,2006,239(1-2):549-553.
[6]Kurtz M J,Eichhorn G,Accomazzi A,et al.The effect of use and access on citations[J].Information Processing&Management,2005,41(6):1395-1402.
[7]劉輝.網(wǎng)絡(luò)環(huán)境下開(kāi)放獲取期刊的現(xiàn)狀和評(píng)價(jià)[J].深圳特區(qū)科技,2005(z1):452-455.
[8]劉輝.開(kāi)放獲取期刊的現(xiàn)狀與評(píng)價(jià)分析[J].圖書(shū)館建設(shè),2006(4):44-47.
[9]胡德華,常小婉.開(kāi)放存取期刊論文質(zhì)量和影響力的評(píng)價(jià)研究[J].圖書(shū)情報(bào)工作,2008(2):61-64.
[10]白振田.因特網(wǎng)環(huán)境下期刊論文評(píng)價(jià)體系設(shè)計(jì)與構(gòu)建 [J].佛山科學(xué)技術(shù)學(xué)院學(xué)報(bào):社會(huì)科學(xué)版,2009(3):90-93.
[11]方卿,王玨.開(kāi)放存取期刊學(xué)術(shù)質(zhì)量評(píng)價(jià)(一):基于總被引頻次視角的分析[J].出版科學(xué),2011(6):67-70.
[12]王玨,方卿.開(kāi)放存取期刊學(xué)術(shù)質(zhì)量評(píng)價(jià)(二):基于影響因子視角的分析[J].出版科學(xué),2011(6):70-74.
[13]王玨,方卿.開(kāi)放存取期刊學(xué)術(shù)質(zhì)量評(píng)價(jià)(三):基于即年指標(biāo)視角的分析[J].出版科學(xué),2011(6):74-78.
[14]韓鵬鳴.基于特征因子的開(kāi)放存取期刊學(xué)術(shù)影響力評(píng)價(jià)研究[J].圖書(shū)館工作與研究,2012(8):29-31.
[15]張紅芹,黃水清.開(kāi)放獲取期刊質(zhì)量評(píng)價(jià)的指標(biāo)體系構(gòu)建與評(píng)價(jià)實(shí)踐:以化學(xué)類(lèi)期刊為例[J].情報(bào)理論與實(shí)踐,2008(3):386-390.
[16]胡德華.生物醫(yī)學(xué)類(lèi)開(kāi)放存取期刊學(xué)術(shù)質(zhì)量評(píng)價(jià)及其評(píng)價(jià)體系研究[D].中南大學(xué),2009.
[17]董文鴛,陳清文.圖情領(lǐng)域開(kāi)放存取期刊學(xué)術(shù)影響力評(píng)價(jià)[J].圖書(shū)館建設(shè),2009(5):104-107.
[18]陳銘.開(kāi)放存取期刊評(píng)價(jià)模型構(gòu)建[J].圖書(shū)情報(bào)工作,2010(14):11-15.
[19]袁順波,華薇娜.基于引文與網(wǎng)絡(luò)鏈接的開(kāi)放存取期刊學(xué)術(shù)影響力評(píng)價(jià)[J].大學(xué)圖書(shū)館學(xué)報(bào),2010(6):107-115.
[20]侯集體.開(kāi)放存取期刊質(zhì)量評(píng)價(jià)指標(biāo)研究[J].圖書(shū)情報(bào)工作,2009,53(12):140-143.
[21]尹天久,宗乾進(jìn),袁勤儉.開(kāi)放存取論文開(kāi)放評(píng)價(jià)方法[J].圖書(shū)情報(bào)工作,2012,56(16):75-79,107.
[22]趙樹(shù)慶,劉永勝.20種科技期刊2010年論文發(fā)表時(shí)滯調(diào)查[J].編輯學(xué)報(bào),2011(6):491-493.
[23]常唯,馬健,白雨虹.開(kāi)放獲取期刊國(guó)際影響力的培育:談Light辦刊體會(huì)[J].科技與出版,2013(12):9-12.
[24]Shotton D.The five stars of online journal articles-a framework for article evaluation[J].D-Lib Magazine,2012,18(1-2):27.
[25]Macroberts M H,Macroberts BR.Problems of citation analysis[J].Scientometrics,1996,36(3):435-444.
[26]Priem J,Taraborelli D,Groth P,et al.Altmetrics:A manifesto[EB/OL].[2014-05-02].http://altmetrics.org/ manifesto/.
[27]由慶斌,湯珊紅.補(bǔ)充計(jì)量學(xué)及應(yīng)用前景[J].情報(bào)理論與實(shí)踐,2013(12):6-10.
[28]邱均平,余厚強(qiáng).替代計(jì)量學(xué)的提出過(guò)程與研究進(jìn)展[J].圖書(shū)情報(bào)工作,2013(19):5-12.
[29]劉春麗.Web 2.0環(huán)境下的科學(xué)計(jì)量學(xué):選擇性計(jì)量學(xué)[J].圖書(shū)情報(bào)工作,2012(14):52-56.
[30]王賢文,張春博,毛文莉,等.科學(xué)論文在社交網(wǎng)絡(luò)中的傳播機(jī)制研究[J].科學(xué)學(xué)研究,2013(9):1287-1295.
[31]顧立平.開(kāi)放數(shù)據(jù)計(jì)量研究綜述:計(jì)算網(wǎng)絡(luò)用戶行為和科學(xué)社群影響力的Altmetrics計(jì)量[J].現(xiàn)代圖書(shū)情報(bào)技術(shù),2013(6):1-8.
[32]陳銘.期刊利用統(tǒng)計(jì)與Altmetrics的興起[J].圖書(shū)與情報(bào),2014(1):12-17.
[33]Overview:Plum Metrics[EB/OL].[2014-05-01].http:// www.plumanalytics.com/metrics.html.
[34]Piwowar H.Introduction altmetrics:What,why and where?[J].Bulletin of the American Society for Information Science and Technology,2013,39(4):8-9.
[35]Haustein S,Peters I,Bar-Ilan J,et al.Coverage and adoption of altmetrics sources in the bibliometric community[J].Scientometrics,2013:1-19.
[36]Costas R,Zahedi Z,Wouters P.Do altmetrics correlate with citations?Extensive comparison of altmetric indicators with citations from a multidisciplinary perspective[J].arXiv preprint arXiv:1401.4321,2014.
[37]Li X,Thelwall M,Giustini D.Validating online reference managers for scholarly impact measurement[J].Scientometrics,2012,91(2):461-471.
[38]Eysenbach G.Can tweets predict citations?Metrics of social impact based on Twitter and correlation with traditional metrics of scientific impact[J].J Med Internet Res,2011,13(4):e123.
劉菊紅廣州中醫(yī)藥大學(xué)圖書(shū)館館員。廣東廣州,郵編:510405。
黃凱文廣州中醫(yī)藥大學(xué)圖書(shū)館研究館員。廣東廣州,郵編:510405。
Research on the Evaluation Model of Open Access Resource:Quality Assessment based on the Occasional Papers
Liu Juhong,Huang Kaiwen
This paper analyzes the developing trend of open access publishing,researches the quality assessment method of open access journals(OAJs).It points out that in the development of OAJs,they have changed a lot.Using the traditional assessment method is outdated.It also announces that the assessment based on journals is transferring to the quality assessment based on the occasional papers,analyzes the main indexes,popularity,assessment system,and performance.
Open Access.Paper.Quality assessment.Altmetrics.
G252.8
*本文系廣東省圖書(shū)館科研課題“開(kāi)放獲取資源評(píng)價(jià)模式的研究”(項(xiàng)目編號(hào):GKTK0915)的研究成果。
(2014-07-15編校:劉勇定)