1、基于全文本分析基于全文本分析的引文指標效能研究的引文指標效能研究摘要：摘要：[目的目的意義意義]由于引用行為的復(fù)雜性，基于參考文獻列表計算的被引次數(shù)在評價論文的學術(shù)影響力時存在不足，因此深入全文內(nèi)容改進引文指標成為趨勢。探討基于全文本分析的引文指標計算方法的效能問題，有利于為引文指標的選擇和改進提供參考。[方法方法過程過程]本研究通過選擇F1000平臺上的57篇論文作為實驗樣本，獲取實驗樣本論文的2216篇施引文獻的全文數(shù)據(jù)。人工標注施

2、引文獻的引用位置和引用情感，分別基于引用位置和引用情感計算論文的引用強度。并以F1000評分為論文學術(shù)影響力的基準指標，利用相關(guān)分析法比較和分析基于引用位置和引用情感的引文指標與F1000評分之間的數(shù)量關(guān)系。[結(jié)果結(jié)果結(jié)論結(jié)論]研究結(jié)果表明，與基礎(chǔ)的被引次數(shù)相比，基于引用位置的引文指標更能有效地反映論文的學術(shù)影響力，基于引用情感的引文指標由于引用數(shù)量分布不均而效果欠佳。關(guān)鍵詞：關(guān)鍵詞：全文本分析；引文指標；引用位置；引用情感；效能研究分

3、類號：分類號：G353.1引文分析法（CitationAnalysis）被廣泛應(yīng)用于國家科學政策和學科發(fā)展、科研機構(gòu)、科技期刊、科研人員以及學術(shù)論文等的學術(shù)影響力的評價工作中。利用引文分析法對論文學術(shù)影響力進行評價的最基礎(chǔ)方式是根據(jù)題錄數(shù)據(jù)的參考文獻列表計算學術(shù)成果被其他文獻引用的次數(shù)。也就是說，當某篇論文在其它文獻的參考文獻列表中出現(xiàn)一次，那么該篇論文的學術(shù)影響力可用一次被引來定量評價。但是由于引用行為是復(fù)雜多樣的，參考文獻列表中的一

4、篇引文可能被同一篇文獻多次引用，在不同位置產(chǎn)生的引用對文獻的作用不同，引用的目的有可能是積極肯定也可能是消極否定，所以簡單的基于參考文獻列表的被引次數(shù)統(tǒng)計不足以衡量論文學術(shù)影響力的高低。另一方面，特別是對于中低被引的論文而言，相同被引次數(shù)的論文數(shù)量較多，被引次數(shù)對論文學術(shù)影響力的區(qū)分能力較弱。因此，如何改進引文指標從而更加有效地評價學術(shù)影響力成為了亟待解決的問題。目前，研究引文指標的學者們主要給出了兩個方向的改進措施。一個方向是從論文的

5、引文網(wǎng)絡(luò)出發(fā)，通過一層或多層的施引文獻的被引次數(shù)累積獲得引文指標，間接改進被引次數(shù)的計算方式，如論文h指數(shù)[1]、學術(shù)跡[2]、論文權(quán)力指數(shù)本文系國家哲學社會科學基金項目“融合ALTMETRICS的科研影響力綜合評價方法及實證研究”(項目編號：15BTQ060)研究成果之一。作者簡介：彭秋茹，南京農(nóng)業(yè)大學信息資源管理專業(yè)博士研究生，Email：pengqiuru228@。指導教師：黃水清楊波聯(lián)系方式：彭秋茹，南京農(nóng)業(yè)大學信息科學技術(shù)學院

6、，15150563979，pengqiuru228@。據(jù)引用位置對不同的引文賦予不同的權(quán)重，提出了一種基于引用位置的引文評價方法。N.Sombatsompop[19]等人在對論文質(zhì)量評價研究時，提出引用位置影響因子指標，指的是引文在施引文獻中不同位置上出現(xiàn)的次數(shù)與施引文獻總數(shù)的比值，他們將這一指標應(yīng)用于泰國論文質(zhì)量評價。語義層面的研究主要討論引用具有不同的情感或動機的問題。廖君華[20]等人認為由于引用行為和引用情感的復(fù)雜性，以被引次數(shù)

7、為基礎(chǔ)的引文指標存在一定的不足。章成志在2018年“全文本文獻計量分析”學術(shù)沙龍中表示引用情感分析可以更準確地計算出有效引用[21]。趙蓉英和王建品[22]認為計算引文在施引文獻全文中實際出現(xiàn)的次數(shù)在評價影響力時更合理，在此基礎(chǔ)上再考慮引用情感極性會使得評價結(jié)果更加真實全面。所以，根據(jù)不同的引用情感或動機可以改進引文指標的計算。劉雪立[23]認為計算期刊影響因子時應(yīng)該剔除期刊被批判性引用的次數(shù)，也即負面引用的次數(shù)。董建軍[24]提出計算

8、被引次數(shù)的新方法，可以僅統(tǒng)計被正相關(guān)性引用（正面引用）的總次數(shù)，他認為平行相關(guān)性引用（中性引用）一般不能反映被引文獻的價值和學術(shù)水平，可以依據(jù)評價目的的不同分別情況予以處理。雖然學者們普遍認同深入施引文獻的全文內(nèi)容能有效改進引文指標的評價效果，并根據(jù)引用位置和引用情感等信息提出了引文指標新的計算方式，但鮮有研究從實證的角度探討基于全文本分析的引文指標對論文影響力評價的有效性問題。本文將補充這一方面的研究，選擇經(jīng)過同行評議的論文作為樣本，

9、獲取論文施引文獻的全文數(shù)據(jù)，根據(jù)不同的引用位置和引用情感分類計算引用次數(shù)，并將這些引文指標與同行評議得分作相關(guān)分析，比較和討論不同的引文指標對論文學術(shù)影響力的評價效果。2研究方法本研究選擇F1000推薦系統(tǒng)上的期刊論文作為實驗樣本，利用相關(guān)分析法比較和分析基于全文本分析的引文指標、基礎(chǔ)被引次數(shù)與論文學術(shù)影響力水平之間的數(shù)量關(guān)系，探討與基礎(chǔ)被引次數(shù)相比基于全文本分析的引文指標是否更有效地反映了論文真實的學術(shù)影響力，為構(gòu)建學術(shù)論文學術(shù)影響力