Predicting the future success of scientific publications through social network and semantic analysis

Abstract

Citations acknowledge the impact a scientific publication has on subsequent work. At the same time, deciding how and when to cite a paper, is also heavily influenced by social factors. In this work, we conduct an empirical analysis based on a dataset of 2010-2012 global publications in chemical engineering. We use social network analysis and text mining to measure publication attributes and understand which variables can better help predicting their future success. Controlling for intrinsic quality of a publication and for the number of authors in the byline, we are able to predict scholarly impact of a paper in terms of citations received six years after publication with almost 80 percent accuracy. Results suggest that, all other things being equal, it is better to co-publish with rotating co-authors and write the papers' abstract using more positive words, and a more complex, thus more informative, language. Publications that result from the collaboration of different social groups also attract more citations.

Uluslararası Dergilerde Yayımlanan Türkiye Adresli Makalelerin Atıf Etkisini Artıran Faktörler

“…Benzeri bir biçimde, makalelerin yayımlandığı dergilerin etki faktörü, ortak yazar sayısı, referans sayısı, makalelerin uzunluğu, araştırmaların kurumsal, ulusal ve uluslararası işbirliğine dayanması, mali destek vb. gibi atıf sayısını etkilemesi muhtemel diğer faktörler de kapsamlı bir biçimde incelenmiştir (Chen, 2012;Didegah ve Thelwall, 2013a, 2013bFronzetti Colladon, D'Angelo ve Gloor, 2020).…”

“…Dergi etki faktöründeki bir birimlik artış ortalama atıf sayısını %16 ile %32 oranında artırmakta, hiç atıf almayan ortalama makale sayısını ise %39 ile %89 oranında azaltmaktadır (Didegah ve Thelwall, 2013a, s. 865). Nanobilim/nanoteknoloji ve kimya mühendisliği alanlarında da dergi etki faktörü atıf sayısını artıran en önemli faktörlerden birisidir (Didegah ve Thelwall, 2013b;Fronzetti Colladon, D'Angelo ve Gloor, 2020). Nanobilim ve nanoteknoloji alanında dergi etki faktörünün yanı sıra referans sayısı ve işbirliği yapılan kurum sayısı da hem ortalama atıf sayısının artmasında hem de hiç atıf almayan ortalama makale sayısının azalmasında etkilidir (Didegah ve Thelwall, 2013b, s. 1062.…”

“…Birkaç örnek vermek gerekirse, yüksek etki faktörlü Lancet dergisinde yayımlanan ve en çok atıf yapılan makalelerin daha çok ortak yazarı ve referansı olup, özetleri ve tam metinleri de daha uzundur (Kostoff, 2007). Kimya mühendisliği alanında makalelerin ortak yazar sayısı arttıkça atıf sayısının da arttığı, öz uzunluğu ile atıf sayısı arasında yüksek korelasyon olduğu gözlenmiştir (Fronzetti Colladon, D'Angelo ve Gloor, 2020). Mali destek (fon) bilim, teknoloji, mühendislik, matematik ve tıp (STEMM) alanlarında yayımlanan makalelerin (ilk atıflarını almasında etkili değilse de) atıf sayısını artırmaktadır (Gök, Rigby ve Shapira, 2016;Yan, Wu ve Song, 2018).…”

“…JIF2 ve MEP değişkenlerinin makalelerin sıfır atıf engelini aşmasında da anlamlı bir etkisi yoktur. JIF2'nin başka çalışmalarda (örneğin, Didegah ve Thelwall, 2013a, 2013bFronzetti Colladon, D'Angelo ve Gloor, 2020) atıf sayısını artırırken bu çalışmada artırmamasının birkaç nedeni olabilir. Öncelikle, JIF2 atıf örüntüleri birbirinden farklı disiplinler arasındaki atıf etkilerini karşılaştırmak için kullanılabilecek iyi bir gösterge değildir (Liu ve Fang, 2020, s. 2).…”

“…Ortak yazar, başlıktaki sözcük ve referans sayısında bir birimlik artış sıfır atıf engelini aşan makalelerin oranını ortalama %7,8 (%95 GA: 0,8-%15,2), %3,5 (%95 GA: %0,7-%6,3) ve %2,1 (%95 GA: %1,2-%3,0) artırmaktadır. Bu bulgular, ortak yazarlı ve özellikle uluslararası işbirliği yapılarak yayımlanan ortak yazarlı makalelerin daha çok atıf aldığı yönündeki bulguları desteklemektedir (Akçiğit ve Özcan-Tok, 2020, s. 56;Confraria, Godinho ve Wang, 2017;Fronzetti Colladon, D'Angelo ve Gloor, 2020;Leydesdorff, Bornmann ve Wagner, 2019). Makalelerin referans sayısındaki artışın gerek pozitif atıf sayısını artırmadaki gerekse sıfır atıf alan makale sayısını azaltmadaki olumlu etkisi başka araştırmalardaki bulgularla benzerlik göstermektedir (örneğin Didegah ve Thelwall, 2013a, s. 867;Onodera ve Yoshikane, 2015, s. 757).…”