基于CiteScore指标的期刊评价利弊探析.pdf

XUESHU CHUBAN YU CHUANBO2022 年,第 1 卷 第 1 辑(总第 1 辑)Vol.1 No.1,2022(Sum No.1)学术评价与版权伦理收稿日期:2022-08-30作者简介:杨红军,中国石油大学(华东)期刊社副编审,期刊社信息室主任,青岛科技编辑学会理事,E-mail:19890047 。欢迎按以下格式引用:杨红军,肖芙蓉,许玉清.基于 CiteScore 指标的期刊评价利弊探析J.学术出版与传播,2022,1(1):311-317.基于 CiteScore 指标的期刊评价利弊探析杨红军1,肖芙蓉2,许玉清1(1.中国石油大学(华东)期刊社,山东 青岛 266580;2.山东省图书馆,山东 济南 250001)【摘要】随着文献数据来源的多元化发展,创新型的文献评价指标越来越多。这些评价指标从多个角度提供了科技期刊的诸多文献计量数据,多方位展示了科技期刊的发展历程。爱思唯尔启用的新版 CiteScore 指标,就是采用文献计量法和统计分析法,针对 Scopus 数据库收录文献给出的一组新的评价指标。通过对比 CiteScore 改版前后的差异及其与常用影响因子的异同,同时实证分析 CSCD 中的石油天然气类期刊的指标,显示 CiteScore 和传统影响因子的计算方法大同小异,优缺点并存。期刊出版和管理者应避免对 CiteScore 和传统影响因子等指标的过度追逐,正确认识、合理利用期刊评价指标。【关键词】Scopus;CiteScore;影响因子;期刊评价;评价指标;定量评价Advantages and disadvantages of journal evaluation based on CiteScore indexYANG Hongjun1,XIAO Furong2,XU Yuqing1(1.Journal of China University of Petroleum(East China),Qingdao 266580,P.R.China;2.Shandong Library,Jinan 250001,P.R.China)Abstract With the diversified development of literature data sources there are more and more innovative literature evaluation indicators.These evaluation indicators provide a lot of bibliometric data of scientific and technological journals from multiple perspectives and show the development process of scientific and technological journals from multiple perspectives.The new version of CiteScore indicators launched by Elsevier is a new set of evaluation indicators for the documents included in the Scopus database by using bibliometrics and statistical analysis methods.By comparing the differences between CiteScore before and after the revision and its similarities and differences with common impact factors and by empirical analysis of the indicators of oil and gas journals in CSCD it is shown that the calculation methods of CiteScore and traditional impact factors are much the same with both advantages and disadvantages.Periodical publishers and managers should avoid excessive pursuit of CiteScore and traditional impact factors and other 113XUESHU CHUBAN YU CHUANBOindicators and correctly understand and reasonably use journal evaluation indicators.Key words Scopus CiteScore influence factors journal evaluation evaluation index quantitative evaluation中图分类号:G237.5 文献标志码:A期刊评价指标是客观、综合分析期刊影响力的重要工具,期刊的学术研究质量与其刊发论文的学术研究水平与科研能力密切相关。互联网技术和数据库技术的普及,让学术期刊数据的搜集整理和使用变得越来越方便、快捷。面对海量的科研文献,科研人员在选择发表成果的期刊时必须有所取舍,因此对学术期刊的评价和筛选越来越受到科研人员及各方的关注。近年来,国内外涌现了许多研究机构参与到学术期刊评价的行列,研制和发布的文献评价指标层出不穷,如国内中信所的 CSTPCD、中科院文献情报中心的 CSCD、中文核心期刊要目总览三大核心期刊遴选机构,依托期刊数据库定期推出各自的“年度期刊引证报告”或“核心期刊要目总览”;还有依托中国知网、万方数据和重庆维普等期刊数据库研制的“中国学术期刊年度引证报告”都是期刊评价中重要的研究数据来源1;再如麦克米伦(Macmillan)资助的 Altmetric、科睿唯安的 JCR 和 JCI(2020)、爱思唯尔的 CiteScore、谷歌的 H5 指数、Nature 的指标 Nature Index(NI)等。本文仅就爱思唯尔的新版 CiteScore 指标和常用期刊影响因子在期刊评价中的作用及其实践意义作简要的对比分析。一、新版 CiteScore 指标及其特点 (一)CiteScore 指标CiteScore 指标是 Scopus 数据库系列期刊评价指标的一部分,2016 年推出,2020 年改版。Scopus 数据库系列指标还包括 SNIP(源文档标准化影响)、SJR(SCImago 杂志排名)、引用文档计数,以及引用百分比等。Scopus 数据库整合以上指标,目的是帮助科研人员深入了解国际上超过 43 000 多种书刊等的文献引用情况。“CiteScore 是一套全新的标准,以透明、全面的视角衡量期刊的影响因子,有助于指导科研人员选择合适的期刊发表研究成果”2。新版 CiteScore,“以确保采用更稳健、稳定、全面的度量标准,从而及早表明研究的影响。在计算 CiteScore 以及对所有以前的 CiteScore 年份(即 2018、2017、2016)进行追溯时,将使用更新的方法。之前的 CiteScore 值已删除,不再可用”3。新版的CiteScore 实际上是把原来的 3 年影响因子改为了 4 年影响因子。如 CiteScore2020 指标就是某刊在20162019 年间所发表文章、评论、会议论文、书籍章节和数据论文的被引次数与 20162019 年所发表的论文总数的比值。刘雪立、叶艳、肖仙桃等学者4-6对期刊 JCR 中多个学科进行分析得出结论,CiteScore 和 IF 在期刊影响力评价中具有高度一致性,对于被引半衰期较长的专业期刊,CiteScore 表现出一定的优越性。新版 CiteScore 时间段可对论文发表后的引用进行稳健评估。4 年的发表时段更适合所有学科类别,并且可以涵盖大多数学科中的引用次数峰值。表 1 列出了 CSCD 中的 12 种石油天然气类期刊(与Scopus 数据库共同收录)2016 年的新旧 CiteScore 值,新版 CiteScore 值明显大于原 CiteScore 值(已废止),CiteScore 数值平均增加 0.64。需要说明的是,国内研究 CiteScore 指标的论文在 20192020 年达到峰值(来自知网的数据为 134 篇),随后迅速下降,目前为每年 20 篇左右。高峰时段的论文中采用的CiteScore 数值(3 年影响因子)均已废止。213杨红军,等 基于 CiteScore 指标的期刊评价利弊探析表 1 CSCD 和 Scopus 共同收录国内石油天然气工业期刊在改版前后 2016 年的 CiteScore 值对比序号期刊ISSN新 CiteScore 值原 CiteScore 值差值1.石油勘探与开发1000-07473.82.481.322.石油学报0253-26972.91.881.023.石油与天然气地质0253-99852.41.490.914.Petroleum Science1672-51072.21.520.685.天然气工业1000-09762.01.120.886.中国石油大学学报(自然科学版)1673-50051.10.720.387.石油地球物理勘探1000-72100.90.460.448.石油物探1000-14410.90.300.609.石油学报(石油化工)1001-87190.40.290.1110.石油化工1000-81440.20.100.1011.石油炼制与化工1005-23990.10.11-0.0112.西南石油大学学报(自然科学版)1674-5086N/A0.49N/A (二)CiteScore 指标的特点1.全面性新版 CiteScore 是计算期刊前 4 年文章平均被引用次数。目前,Scopus 数据库网站提供 20112021年书刊文献等的 CiteScore 指标数据。引用次数对所有系列书刊同等对待,只要被该数据库中的文献引用,就可以计算出该文献的引用次数指标。由于 Scopus 数据库收录了 100 多个国家和地区的 26 000 多种期刊,1 749 万篇开放获取文献,24 万多本图书,1 100 万篇高质量会议论文,总数据量超过 8 350 万条,文献检索可回溯到1788 年。20202022 年新增大陆期刊超过50 种,目前收录大陆高质量期刊超过860 种、港澳台期刊超过 140 种,是目前收录中国期刊最多的国际期刊数据库,收录亚太地区的期刊数量超过 Web of Science 数据库的两倍以上7。2.透明化引用次数(CiteScore)的计算方式非常简便,没有保密的算法或隐藏的信息。在 Scopus 数据库网站上公开列出了所收书刊文献的详细数据,各项指标数据一目了然。针对每种书刊 CiteScore 提供的年度 8 个指标依次为引用次数(CiteScore)、引用次数追踪(CiteScore Tracker)、引用次数百分位数(CiteScore Percentile)、引用次数四分位数(CiteScore Quartiles)、引用次数排名(CiteScore Rank)(可进一步查看该期刊在各专业领域中的引用次数排名与历年的趋势)、引用计数(Citation Count)、文献数量(Document Count)、引用比例(Percentage Cited)。被 Scopus 数据库收录的书刊出版者均可以检索到各自的指标数据。3.实时化引用次数追踪(CiteScore Tracker)在网站上实时呈现期刊当年的被引用次数和被引用情况。新创313XUESHU CHUBAN YU CHUANBO刊的期刊可以在首次被 Scopus 数据库收录后获得该年度的引用次数指标。4.全免费查阅和使用引用次数指标(CiteScore metrics)不收取任何费用。只要登录网站就可以使用 Scopus数据库里的系列指标功能,免费查阅、复制或下载所有的引用次数指标,而 Web of Science(WoS)数据库则需要购买权限。二、CiteScore 指标与 JIF 的区别 对比 JCR 影响因子(JIF)不难看出,CiteScore 指标的计算公式在很大程度上模仿了 JCR 影响因子体系,仅仅做了某些调整,和最初的期刊影响因子如出一辙,类似 JCR 影响因子的一个变种。2017 年 6月爱思唯尔正式发布的“年度期刊引用分数榜”,就相当于加菲尔德的 JCR。二者的不同在于:其一,JCR 目前只涵盖万余种期刊,而 CiteScore 涵盖了 3 万多种书刊资料会议论文等,其中大陆期刊超过 860种(2017 年为 556 种)。2020 年 Scopus 收录的期刊数量为 26 000 多种,是 JCR 的两倍,年均新增 600 多种期刊。其二,JCR 影响因子计算的引用时间区间是统计年的前2 年的数据,而 CiteScore 指标为前4 年的数据。其三,CiteScore 指标计算公式中的分母为期刊载文所有文章的篇数,即 CiteScore 将期刊论文、综述、评论等类型的文章赋予了相同的权重,而 JCR 影响因子分母中不包括评论、信函等小短文8。三、CiteScore 指标对学术出版的影响 (一)获取多角度期刊影响因子指标科研人员、出版商、数据分析专家等都可以通过 CiteScore 引用次数指标更好地了解期刊不同的影响因子指标。截至 2022 年 4 月,Scopus 数据库收录的书刊资料、会议题录等数量超过 4 万种,有些期刊尽管未被 SCI 收录,但它们在各领域内科研人员中拥有不错的口碑(见表 2),其中不乏一些正处于快速发展期的新创刊期刊。表 2 显示,中国的 CSCD(2015)收录的 24 种石油天然气工业类期刊中,只有 12种刊物有 CiteScore 因子。表 1 显示,这 12 种刊物或曾被爱思唯尔旗下的工程索引(EI)收录,尽管目前 EI 只收录了其中的6 种期刊,但另外6 种期刊的基本数据仍在 Scopus 数据库中。建议有条件或有意愿加入 Scopus 数据库的期刊不妨通过爱思唯尔网站与其总部联系,提交申请入库材料和样刊等,申请加入该数据库。Scopus 数据库来源出版物检索中输入 西南石油大学学报(自然科学版)的ISSN1674-5086 检索不到该刊数据,但可以检索到最新的西南石油学院学报(自然科学版)ISSN 1000-2634 的数据。另外,CiteScore 指标的免费推出,将会有更多期刊展现其 CiteScore 指标,拓展了科研人员投稿期刊的范围。Scopus 数据库较 Web of Science 数据库收录了更多的大陆学术期刊,对提升中国本土期刊的排名及业内认可度有一定的促进作用。CiteScore 指标是计算期刊前 4 年文章平均被引用次数,该引用期限比常规影响因子(JIF)增加了 2 年的量,计算公式中分子和分母的量同时增大,对于那些引用半衰期差异大的期刊,可以弥补 2 年影响因子与 5 年影响因子两个数值的不足。同时,还要认识到 CiteScore和 JIF 分别来自两个不同规模的数据库,对于同一刊物在两个数据库中的施引量和被引量必然存在不同。有关 CiteScore 与 JIF 在不同学科领域的相似性或差异性,国内学者杨莉、刘雪立、郝若扬等学者已413杨红军,等 基于 CiteScore 指标的期刊评价利弊探析有深入的研究9-11。(二)有利于提高期刊的内容质量作为多维度计量指标的一部分,CiteScore 引用次数指标有助于提高期刊决策者了解各自期刊的发展变化。CiteScore 指标因子包括所有文章类型,而现行的影响因子(JIF)引用只统计所有论文,即分母不计算通信、评论、新闻等小短文。因此,多数期刊的原 CS(3 年影响因子)引用数相较影响因子会有明显下降。有统计显示,大部分期刊如 Nature、Science、Lancet、JAMA 的 CiteScore 平均引用数较 IF 值下降幅度都很大12。而一些综述性期刊的 CiteScore 引用数比 IF 要高。新版的 CS 值多少弥补了与 JIF 的差值(实例见表 2),但二者依然不能重叠或互相取代,只是差异越大的期刊占比越来越小。表 2 2015 年 CSCD 收录的 24 种大陆石油天然气工业类期刊 JIF 与 CiteScore 指标值对比期刊2015 年 JIF 值2016/2015 年 CiteScore 值新版 CiteScore 值石油勘探与开发3.264 22.48/2.603.8石油学报2.744 11.88/2.242.9石油与天然气地质1.991 61.49/1.442.4油气地质与采收率1.767 6未收录N/A石油实验地质1.705 4未收录N/A石油地球物理勘探1.330 00.46/0.750.9天然气工业1.162 61.12/0.892.0岩性油气藏1.109 0未收录N/A特种油气藏1.032 0未收录N/A石油钻探技术0.968 3未收录N/A中国海上油气0.812 0未收录N/A中国石油大学学报(自然科学版)0.779 00.72/0.611.1石油物探0.744 80.30/0.510.9大庆石油地质与开发0.741 7未收录N/A西南石油大学学报(自然科学版)0.644 50.49/0.49N/A新疆石油地质0.594 6未收录N/A石油炼制与化工0.565 50.11/0.130.1石油化工0.521 00.1/0.10.2Petroleum Science0.515 21.52/1.072.2石油学报(石油化工)0.471 60.29/0.310.4石油钻采工艺0.452 7未收录N/A天然气化工(C1 化学与化工)0.414 7未收录N/A测井技术0.305 0未收录N/A油气藏评价与开发N/A未收录,新创刊N/A Scopus 数据库的 CiteScore 列表中还显示,有一些期刊的 CiteScore 指标与影响因子相差不大,诸如比较热门的 PLoS One(3.11 与 3.057)、Scientific Reports(5.30 与 5.228)以及中国的天然气工业513XUESHU CHUBAN YU CHUANBO(1.12 与 1.16)、中国石油大学学报(自然科学版)(0.72 与 0.779)13等并无多大差别,因为这些刊物基本不发表新闻、通信、评论等引用频率相对较低的短文,而且每年发文量较高,选择 2 年或 4 年时间段为评价年对期刊整体影响相对较小。(见表 2)(三)有助于明确办刊思路,保持期刊独特风格和学科特性由于 CiteScore 将期刊论文、综述、评论、信函等类型的文章赋予相同的权重,一些期刊编辑部或许不再在期刊中编排那些非论文类的小短文,包括编辑评述、读者来信、更正信息和新闻等条目,以减少发表这些条目来控制期刊的发文总量。倘若如此,势必会影响到编辑部的期刊出版计划。其次,CiteScore 在一定程度上会给开源期刊带来更大的利益。近年来,OA 期刊数量激增,鱼龙混杂,受到的争议也越来越多。SCI 收录的一些 OA 期刊质量尚可,但在爱思唯尔的 Scopus 数据库中则没有严格筛选,难以区分一些通过非正规手段提升引用量的期刊14。鉴于此,绝大多数中国的学术期刊办刊宗旨明确、特色鲜明,受上述量化评价指标的影响不大。四、结语与展望 影响因子已饱受诟病,CiteScore 作为一个升级版的影响因子,同样存在与 JIF 相似的弊端。一是无法准确分辨一些非常规手段提升引用量的期刊;二是 CiteScore 的来源数据库 Scopus 虽有“内容遴选与审查委员会”,但其选刊规则和标准略显宽松;三是 CiteScore 的来源数据库尚需完善,如一些 SCI 收录或者影响因子不错的期刊却没有被收录,如中国的科学通报油气地质与采收率、Bone Research 等;四是 CiteScore 将期刊中的非论文文献纳入计量范围降低了 CiteScore 数据的精准性;五是按照 CiteScore指标排序的期刊,位次较之 JIF 排序有更多变化。因此,CiteScore 仍需要机构和学者有一个逐步认识和接受的过程,毕竟一个新期刊指标的推出只有经过大量数据验证才能被用户认同。一个长期存在的期刊评价指标是不可能轻易被撼动的15。近年来,随着大数据时代的开启,期刊管理部门和科研机构对学术期刊评价进行了积极的探索,做了大量有益的工作,推动了学术期刊研究的迅速发展,但仍存在不少问题。如对不同类型的期刊采用同一评价标准,未能做到科学分类评价;公开透明的评价机制和专家信誉制度不够健全等,影响了期刊评价活动的公正性和客观性16。当下,国内外的文献量化评价体系层出不穷,这些数据过多介入学术期刊评价指标中,造成了学术期刊乃至学术界生存、生产环境的严重恶化。尽管期刊评价机构一再承诺自己的评价仅供社会相关行业和专业的学术评价参考,不断调整策略和修订评价指标数据,依然掩盖不住其面临着的内在困境和外在影响17。要建立科学的、综合的期刊评价体系,就需要社会多方面的共同努力,而绝不是评价机构自身能解决的问题,能够评价学术期刊优劣的更应是从事学术研究和学术传播的人群。最近,以中国科协牵头的“面向国际的科技期刊影响力综合评价方法研究”已取得初步成果,该研究旨在建立新的期刊评价系统,探索面向全球的更为科学、全面、合理的期刊影响力评价方法,为世界学术评价融入更多中国观点和中国智慧。伴随着科技期刊世界影响力指数(WJCI)报告的诞生和不断完善,一种以中华人民共和国学科分类及代码为总纲的、覆盖全球科技领域、体现新兴交叉学科发展的期刊分类体系,必将推动世界范围科技期刊的公平评价、同质等效使用。613杨红军,等 基于 CiteScore 指标的期刊评价利弊探析参考文献:1张洋,吴娟平,郎林芳.基于不同网络数据源的期刊评价研究J.中国科技期刊研究,2017,28(2):176-183.2刘雪立,任胜利,程维红,等.不同学科期刊 CiteScore 与影响因子的比较研究J.中国科技期刊研究,2017,28(9):837-841.3Elsevier B V.来源出版物EB/OL.(2022-10-11)2022-10-15.https:.4张李义,叶艳.Google H5 指数与 CiteScore 指数的期刊定量评价方法对比分析:基于知识扩散的视角J.情报杂志,2017,36(11):175-179,174.5叶艳,张李义.基于 CiteScore 指数与影响因子的期刊评价研究:以经济管理领域期刊为例J.情报科学,2017,35(7):126-131,137.6肖仙桃,曲建升,王玏,等.CiteScore 与 JCR 期刊评估指标的比较分析J.中国科技期刊研究,2017,28(10):954-958.7肖明.网络信息计量与评价:Scopus 概述EB/OL.(2021-1-20)2022-5-18.https: 期刊评价体系的利与弊EB/OL.(2016-12-23)2017-7-18.http: 与期刊影响因子的学科差异性研究J.中国科技期刊研究,2021,32(1):135-143.10刘雪立,任胜利,程维红,等.不同学科期刊 CiteScore 与影响因子的比较研究J.中国科技期刊研究,2017,28(9):837-841.11郝若扬.不同学科领域期刊 Citescore 指标与其影响因子、特征因子的相关性分析J.现代情报,2019,39(12):81-87.12之涵.期刊影响因子的起源J.世界科学,2017(3):46-47.13中国科学技术信息研究所.2016 年版中国科技期刊引证报告-自然科学卷:核心版M.北京:科学技术文献出版社,2016:267.14江晓原,穆蕴秋.学术杂志的评价标准到底是什么?N.南方周末,2017-06-26.15杨红军.浅谈学术期刊的评价问题J.石油大学学报(社会科学版),2005,21(5):108-110.16刘京希.学术期刊评价:形式为王还是内容为本?J.华南师范大学学报(社会科学版),2015(5):34-39,190.17中国知网.科技期刊世界影响力指数(WJCI)项目简介EB/OL.(2021-12-23)2022-10-18.https: 袁 虹)713