试析科技期刊评价体系和评价工具，本文主要内容关键词为：评价体系论文,评价论文,工具论文,科技期刊论文，此文献不代表本站观点，内容供学术参考，文章仅供参考阅读下载。
科技期刊是记载、传播和交流科学技术知识的主要载体，是反映科学技术产出水平（包括科研项目、成果、人才、机构）的窗口。科技期刊评价的直接目的是提高科技期刊编辑出版的质量水平，扩大科技期刊的学术影响力和社会竞争力，促进科技成果的评价鉴定和推广应用。在知识经济社会中，科技期刊的数量和质量是人才评价、机构评估的重要指标，也是判断一个国家、一个地区、一个部门科学技术发展水平的重要指标。通过对科技期刊的评价研究，不仅能对期刊作出评价，也为人才评价、课题评估、机构评估、优秀论文的评选创造了条件[1]。做好科技期刊的评价工作，可以促进科技期刊学术质量的提高，繁荣科技期刊编辑出版事业（对编辑出版业）；优化文献资料归类收藏和方便查阅（对图书馆和情报学界）；客观有效地评价、使用和管理科研成果和科技人才（对人事和科研管理部门）；有利于及时了解科技发展趋势热点和指导科研人员选刊阅读投稿（对科技人员）；更好地推动科技成果的传播与交流，营造良好的科技创新氛围，提高整体科技水平和竞争力（对国家和地区）。
1 科技期刊评价的现状及发展趋势
科技期刊评价体系是随着文献计量学的发展而建立和发展起来。20世纪60年代，美国学者尤金·加菲尔德(Eugene Garfield)发展了美国学者谢泼德(Shepherd)的引文索引思想，相继研制了《科学引文索引》(SCI)、《社会科学引文索引》(SSCI)、《艺术和人文科学引文索引》(A & HCI)。引文索引的出现，开创了以文献计量学为主的研究方向，逐渐成为评价一个国家、一个地区、一个单位乃至个人的学术影响的极为重要的工具之一，也成为评价核心期刊的重要工具。引文索引产生的各类文献计量统计数据已成为人们遴选和评价期刊的重要量化指标。
我国科技期刊评价工作经历了3个阶段，即20世纪90年代初期以政策导向为特点的“标准规范主导型”、90年代后期以专家评审为特点的“内在质量主导型”和21世纪以来以文献计量学为基础、定量指标评价体系为特点的“国际影响主导型”[2]。目前科技期刊评价系统和工具，国外以SCI、JCR和EI为代表，国内则主要有《中文核心期刊要目总览》、《中国科学引文数据库》(CSCD)、《中国科技期刊引证报告》(CJCR)、《中国学术期刊综合引证报告》(CAJCCR)几大评价体系。
《中文核心期刊要目总览》，1992年起由北京大学图书馆与北京高校图书馆期刊工作研究会共同编辑出版，开创了我国科技论文的统计分析和核心期刊测评遴选，以后每4年出一版。《总览》为遴选核心期刊确定了分5个步骤（学科划分、指标确定、数据统计、定量评价、专家评）以及利用载文量法、文摘量法、引文分析法、流通量统计法等进行综合筛选和专家鉴定的评价体系。
《中国科学引文数据库》(CSCD)，是中国科学院文献情报中心于1995以自己的科学引文数据库为研究基础，以《中国学术期刊综合评价数据库》为数据基础建立起来的大型数据库。首次在国内推出印刷版中文科学引文索引，以后每年推出《中国科学计量指标：论文与引文统计》。该数据库系统全面参照美国SCI的编制体系，从不同角度满足了我国广大科技信息和科研管理用户进行文献检索及引文统计分析的多方面要求。目前该数据库已被国家自然科学基金委员会列为中国科学院院士推选人指定查询库，自然基金委基金项目评估指定查询库，众多高校及科研机构职称评审、成果申报、晋级考评指定查询库。在CSCD的基础上，中国科学院自然科学期刊编辑研究会完成了“自然科学学术期刊综合评价指标体系”，包括2个系列、2项水平、3个层次和19项评价指标。
《中国科技论文与引文数据库》(CSTPC)，由中国科技信息研究所信息分析研究中心与万方数据公司共同开发。该数据库集文献检索、引文与论文统计分析于一体，既是科技人员查找参考文献的重要工具，又是各级科技管理部门和各科研机构、高等院校统计本单位科技论文发表情况的重要依据。1996年起，在此数据库基础上，中国科技信息研究所每年发布《中国科技期刊引证报告》(CJCR)，已作为国内权威的科技期刊评价工具，并研究提出了“中国科技期刊综合评价指标体系”，包括3个层次、3项水平和19项评价指标。
《中国学术期刊全文数据库》(CAJ)，由中国学术期刊电子杂志社开发制作，是我国第一部、也是当今世界上最大的一部集成化全文电子数据库，引文文献源来自6000多种全文电子期刊，构成了强大的引文检索源。《中国学术期刊全文数据库》现在已并入该杂志社与清华同方知网（北京）技术有限公司共同组建的中国知网(CNKI)《中国学术文献网络出版总库》。在此基础上，他们又共同研制开发了“中国学术期刊文献评价统计分析系统”，它是我国第一个基于网络出版的提供学术期刊文献传播和评价分析数据的平台。也在此数据库基础上，中国学术期刊电子杂志社又联合清华大学图书馆及中国科学文献计量评价中心每年发布《中国学术期刊综合引证报告》(CAJCCR)。
以上评价体系和期刊引证报告以及期刊评价指标体系均反映了我国当今期刊评价取得的成就和水平，同时也揭示了期刊评价的走向：(1)各个期刊评价体系均以文献计量学引文统计分析理论为基础，都参照了国际上SCI为代表的引文数据库和以JCR为代表的引文分析工具，主要评价指标包括总被引频次、影响因子、被引率等。在各期刊引证报告中，根据这些指标数据按期刊所属学科分类排序情况来分析判断被评价期刊的学术影响力。(2)近几年来上述几种不同学科、不同样本的期刊引证报告相继问世以后，虽然由于文献计量指标的局限性和计算方法的不规范造成了一定的数据误差，特别是对它们的误用和滥用也带来了一些负面的影响，但作为量化的外部评价，它们在大样本统计下所具有的客观性对我国科技期刊的发展和宏观评价所起的作用是不容置疑的。(3)期刊评价的队伍不断壮大、评价方法日臻合理、评价指标体系日趋成熟、分学科的评价数据日益齐备，将促进我国科技期刊评价管理进一步向科学化、定量化和规范化方向发展。(4)我国的科技期刊整体水平还不高。为了适应科学技术高速发展的形势，期刊评价仍需要进一步探索新的评价方法和评价体系，如定性和定量相结合的评价、引文计量分析和专家评审相结合的评价、印刷版和网络版相结合的评价、多指标加权相结合的综合指标评价、针对不同学科专业的分类评价等等。(5)将更加关注和促进我国精品科技期刊学术影响力和国际竞争力的评价，推进我国创建一批国际化精品期刊，提高我国科研机构和人才的国际竞争力。
2 科技期刊评价工具——科技期刊引证报告的应用问题
2.1 科技期刊引证报告的形成和涵盖的内容
如前所述，中国现有的各种期刊引证报告均借鉴了美国科学情报研究所(ISI)开发的《期刊引证报告》（Journal Citation Report，简称JCR）。JCR是对世界权威期刊进行系统客观分析和评价的科学计量工具，通过对来源于ISI的SCI和SSCI的数据，采用文献计量学的方法进行引文统计分析，得出各种期刊的多项文献计量指标（如期刊数、载文量、总被引频次、影响因子、被引率等），从而提供了一种独特的手段和方法对全球学术期刊进行客观、系统地评估，帮助用户以定量的方式了解全球的学术期刊，并且通过这些分析数据可以了解某学术期刊在相应研究领域中的学术地位和影响力。中国科技信息研究所每年出版的《中国科技期刊引证报告》(CJCR)、清华大学联合中国学术期刊电子杂志社及中国科学文献计量评价中心每年出版的《中国学术期刊综合引证报告》(CAJCCR)的文献计量指标和数据计算方法与JCR基本一样，也是在相应的引文数据库的基础上采用文献计量学分析方法建立统计指标和计算各期刊的指标数据，并于每年动态更新公布，只不过收录的期刊来源和数量不一样。CJCR收录了中国科技论文统计源期刊即中国科技核心期刊1723种（2007年版）[3]，而CAJCCR收录的范围较广，共收录了包括自然科学、工程技术、社会科学、艺术与人文科学的各个学科的期刊6592种（2007年版）[4]。
2.2 科技期刊引证报告的特点和作用
科技期刊引证报告重视科技文献的被引频次的统计，以至于科技期刊评价能够做到以客观统计数据为基础的量化分析论证。尤金·加菲尔德指出，由引文索引特别是通过综合性的、多学科的引文索引所统计的文献被引频次是一种可以对研究对象进行宏观或微观分析并提供大致但客观有用的科学质量或能力的重要测度指标。因此，每个期刊引证报告最显著的特点就是它们都把文献被引频次的分析放在核心地位。
利用科技期刊引证报告的数据，人们可以了解科技期刊的引用和被引用情况，分析期刊的相互影响和相互作用，评价期刊在科学领域中的地位和科学交流中的作用。所以任何期刊评价都少不了对期刊影响因子的排序分析，这是科技期刊引证报告的又一重要特点。通过了解这些指标，人们可以知道某个领域被引用最频繁的期刊、某个领域最热门的期刊、某个领域影响力最大的期刊、某个领域主要的期刊、某个领域发表文章最多的期刊。
利用科技期刊引证报告的数据，不同的用户会有不同的收获[3]。图书管理员——帮助图书馆管理、评估和分类维护馆藏期刊，并且科学地平衡、管理期刊订购经费预算。出版商——使出版商及时了解出版领域的市场变化，适时调整出版策略。编辑人员——及时评估编辑策略和目标的有效性，跟踪把握所出版期刊在研究人员中的影响力和在同类期刊中的地位。科研人员——帮助科研人员选择、确定最适合自己发表论文的期刊，对已经发表的论文，则可以查询该论文所发表期刊的最新状态，并且利用科技期刊引证报告可以找到与自己研究领域相关的一系列期刊。信息分析家——跟踪文献计量学动态，研究引文模式和评价方法。人力资源管理和科研管理部门——了解科技动态、评审项目、推广成果、发现和激励人才。
2.3 利用科技期刊引证报告评价科技期刊应注意的问题
(1)科技期刊评价要注意目标期刊所属的学科分类，实行分类评价。一方面，要注意目标期刊应与同一类学科或专业期刊的学术影响力指标进行比较才有意义；另一方面，不能用同一评价标准评价不同类型的期刊。
(2)要按照定性分析与定量分析相结合原则确定适合本学科和专业期刊的评价模型和评价方法，实行多指标体系的综合评价，避免单一指标或单一方法的评价。期刊评价的指标体系日趋成熟，为期刊评价定量化研究打下了基础。多指标体系的综合评价方法，首先需要提出期刊若干评价指标，然后对各种指标评出表示优劣程度的值，再用加权等方法将各指标组合成一个综合指标，最终得到期刊综合指标的排序。
(3)不同指标从不同的角度反映了期刊的质量和影响力，构建综合期刊评价指标体系主要包括技术性指标、效益性指标、标准规范化指标3个方面[1]。技术性指标主要包括：总被引频次、影响因子、即年指标、他引率等。其中总被引频次和影响因子是两个最重要的技术性指标。总被引频次是某期刊自创刊以来所登载的全部论文在统计当年被引用的总次数。这是一个非常客观实际的评价指标，可以显示该期刊被使用和受重视的程度，以及在学术交流中的作用和地位。影响因子是一个国际上通行的期刊评价指标，是E·加菲尔德于1972年提出的。由于它是一个相对统计量，所以可公平地评价和处理各类期刊。通常，期刊影响因子越大，它的学术影响力和作用也越大。效益性指标主要包括：直接经济效益、间接经济效益、社会效益。标准规范化的指标主要包括：编校质量，装印质量以及规模化、市场化、现代化建设方面等。
(4)目前国内有很多仅用单一指标如期刊影响因子的排序来评价科技期刊的现象。可是单一采用影响因子评价科技期刊有明显的局限性[5]，甚至会造成误导。影响因子是某期刊前两年发表的论文在统计当年被引用次数／前两年发表论文的总数，用它作为论文引证来度量期刊在某个学科领域内的影响程度是非常有用的。但是影响因子不是期刊学术水平的直接度量，科学研究所产生的影响并不等于引用率，单纯地用影响因子衡量中文科技期刊水平及质量的高低是不恰当的，起码是不全面的。单一指标往往难以全面、准确地评价期刊的学术水平和学术地位，应通过综合指标评价使期刊评价更为客观、全面。
(5)科技期刊评价仍需采用文献计量学分析和同行专家评议相结合的评价方法，克服“以刊论文”现象，力求解决期刊评价中经常遇到的直接指标与间接指标、直接评价与间接评价、主观评价与客观评价、定性评价与定量评价的相互关系和存在的问题。受当今学术生态中官本位、学术浮躁现象的影响，发表论文成为获取学位、申请经费和奖励等的指标要求，人们不愿意花费时间去客观地评价具体论文，而是以发表论文的期刊水平来代表具体论文的水平，助长了种种不良的学术风气。要扭转此类现象，必须切实坚持定性方法与定量方法相结合的原则，建立同行评议与文献计量指标相结合的科学评价体系。由于专业人士对本专业比较了解，在一般情况下可以较为准确地判断期刊的质量，弥补文献计量学方法单纯用数字来评价的不足。
收稿日期：2008-11-06