高校内部各院所科研产出评价研究,本文主要内容关键词为:院所论文,科研论文,评价论文,高校论文,此文献不代表本站观点,内容供学术参考,文章仅供参考阅读下载。
教学、科研、服务于社会是高校的三大职能。在市场经济条件下,高校越来越重视其社会、经济效益。对高校的一级投入、产出单位——各个学院、各独立的研究院(所)、中心进行科研实绩比较,首先应当建立一个恰当的评价方法和标准。建立这一评价方法和标准的关键在于科研产出评价指标体系的确定及评价指标体系中各级评价指标中不同项目的可加性问题。
1 评价指标体系的建立
1.1 建立评价指标体系的指导思想 a.科学研究活动是一个多变量投入、多变量产出的开放系统。各种科研产出相互影响,部分兼容。所以指标体系的建立必须以客观事实为依据,遵照科研活动的自身规律,尽量减少人为因素的干扰,避免出现随机误差较大的现象。b.因为每一项科研成果的形成都有一个相应的过程,而水平高低只能在科研项目完成后才能进行系统的评价,成果的奖励也只能在成果鉴定之后才能进行。所以在科技成果评价指标的设计中,应以结果为标准建立指标体系。对在实践中确实无法量化的一些因素,不列入评价指标。c.评价指标的设计,应体现学校科研体制改革的政策导向,同时能充分地反映各学院科研工作的实际成绩,从而真正起到激励和引导的作用。d.由于科研产出的部分兼容性,指标体系各要素应尽量彼此独立,没有相关关系,以减少评价结果间的矛盾现象。e.指标体系中权重及当量系数的设计,应从科研活动整体出发,辩证、全面、综合地分析,防止片面性,使权重与科研工作量相对应。f.采用正态化的数学方法,使各个孤立的指标组成一个有机联系的统一指标体系,从而进行综合评价。
1.2 指标体系的构成 各学院是学校管理的一级投入产出单位,它的主要任务是培养人才、科学研究、服务社会,其实绩主要在于出成果、出效益。根据评价的目的,采用调查表咨询的方式,反复征求有关领导和专家的意见,并参照相关资料,最后确定各学院科研活动产出的一级评价指标、二级评价指标及权重,见表1。
需要指出是,目前学校对科研成果数量采用的评价指标是鉴定成果数,由于一项科研成果的强度无法通过鉴定成果数来反映,因此鉴定成果数难以对教师的科研工作量作出全面客观的评价。鉴于我国国家自然科学基金等国家项目的相当经费用于择优资助自由申请项目。校级、省部级和国家级不同层次项目的资助金额由低层到高层逐层递增加,项目金额一定程度上反映了科研项目的重要程度、难易程度的现实,本文将科研进款列为重要的评价指标。横向进款额有时会大大超过国家级项目,但其难度及重要性可能不及后者,为了鼓励科研成果转化为生产力,同样把科研进款额作为评价指标。
2 数据来源及合作系数的确定
2.1 数据来源及确认标准 一级指标“科研成果”下二级指标“科研进款额”以每年在财务处的实际到款额为依据;获奖成果、发表论文及著作、授予专利均以科研处或教务处统计的数据为依据。各学院人数为评价当年人事处登记在册的职工人数。其中,著作包括所有“著、编著、编”,论文指已在国内外公开刊物上发表的论文,凡未正式发表的论文以及国内论文摘要不予统计,这样所有的二级指标均可由统计或计算求得。
2.2 合作系数 若某项科技成果为独立承担或与外单位合作承担,则系数T[,mn]取1;若是校内学院之间合作承担,则系数T[,mn]可按表2[3]计算。以获奖成果为例,若一项获奖成果为校内两学院之间合作完成,则各学院此项获奖成果应得当量分值为该获奖成果当量分值乘以合作系数T[,mn]。
3 确定二级评价指标下各三级指标当量分值的计算方法
为了保证评价得到全面、准确的反映,将二级评价指标下不同级别或不同项目的量设成若干三级指标。为了使这些本身不具备可比性的三级指标统一起来,需设计一套当量分值的计算方法。
3.1 科研进款额当量分值及人均科研进款当量分值的计算方法
为了鼓励教师多承担国家级科研项目,科研进款额一方面应根据课题来源设置不同的当量系数;另一方面,各不同学科课题所需购置硬件设备资金差异较大,为了对教师的科研工作量作出客观的评价,需设置学科类别修正系数。课题来源当量系数见表3[3]。其中,国家级课题指国家重点科技攻关、863、国家自然科学基金、国家社会科学基金、国防科研及其他国家专项课题;省部级课题指国家教委、国务院各部、局和省、自治区、计划单列市批准课题及省部基金项目。课题学科类别修正系数见表4。
每笔科研进款额乘以课题当量系数、课题学科类别修正系数可得到该笔科研进款额的当量分值,某学院各笔科研进款的当量分值相加后可得该学院科研进款额的当量分值B[,i1]。某学院科研进款额当量分值除以该学院在册人数可得该学院人均科研进款额当量分值B[,i2]。
3.2 获奖成果当量分值及人均获奖成果当量分值的计算方法 获奖成果包括获奖科技成果、获奖优秀教学成果两类。
3.2.1 获奖科技成果当量分值的计算方法。改革开放以来,我国相继颁布和修订了发明奖励条例、自然科学奖励条例、科技进步奖励条例、人文社科优秀成果奖励条例等科技奖励法规,已基本建立起以国家科技奖励为主体的具有中国特色的奖励体系。各地、各有关部门按规定也设立相应的科技奖励。国家科技奖励的覆盖面基本上包括了我国科技工作三个层次的内容,形成了全国性的比较完整的科技奖励体系。科技成果的评定均按照严格的程序,请权威性的同行专家、学者进行评审。所以科技成果获奖层次和等级的高低,基本能够说明科技成果的水平和质量,因此获奖科技成果可以按照获奖的类别、层次和等级设置相应的当量分值。
在国家科技方针指导下,除了以上由政府部门设立的奖励体系外,各种民间性质的科技奖励也在我国兴起,像中国科协设立的“中国青年科技工作者奖”,“陈嘉庚奖”等也产生了广泛的影响。这些奖励或限制在一个具体的学科和行业中,或以个人为奖励对象,并且宽严不等,不便类比。考虑到这些科技成果均可参加政府部门的评奖,所以对于获奖科技成果,仅以政府性的奖励体系设置当量分值。
目前,国家级和省(部、委)级的科技成果奖励制度比较规范,确定了精神奖励与物质奖励相结合,以精神奖励为主的国家科技奖励原则。其授奖等级是成果水平综合评价的结果和标志,其奖金数与奖励层次和等级的变化呈同向变化,因此,在获奖科技成果当量分值的设置中,可以借用奖金数作为中介判据。设定获奖成果获得奖金一元折合为获奖成果当量分值一分,根据1996年获奖科技成果奖金额(1996年至今获奖科技成果奖金额未变)确定获奖科技成果当量分值如表5所示。
对于表中未列出的由政府部门设立的其他奖项,例如国家社会科学优秀成果奖、优秀论文奖等,可按其奖金额确定当量分值。
由于评奖工作程序是逐级申报,多次逐层受奖,从而使得每年国家级及省部委级奖励的科技成果具有滞后性和重复性。由于成果重复获奖的频率较低,而且多为重大科研成果,所以本文规定,重复获奖可重复得分。这样处理,使同一成果获奖后记分标准升高,它有利于高水平科研工作的开展,同时使统计工作简便易行。某学院每项获奖科研成果的当量分值相加后可得该学院获奖科技成果当量分值。
3.2.2 获奖优秀教学成果当量分值的计算方法。高校教师在教书育人、教学改革、教学管理、提高教育水平方面取得了许多优秀教学成果。为了鼓励各学院在教育教学研究、提高教学水平和教育质量方面作出贡献,同时为了统计数据的方便,在产出指标设计中考虑获奖优秀教学成果。对于获奖优秀教学成果不仅要考虑其数量指标,同时也要考虑其质量指标,即使据获奖的层次和获奖等级设定不同的当量分值。自1989年我国开展全国普通高等学校优秀教学成果奖励工作以来,已经建立起一套比较完整系统的优秀教学成果评奖制度体系。优秀教学成果奖的性质类似于科技成果奖,其评奖工作也是逐级申报,多次逐层受奖,所以,获奖优秀教学成果的当量分值可以参照获奖科技成果当量分值设置的方法确定,见表6。
某学院每项获奖优秀教学成果的当量分值相加后可得该学院获奖优秀教学科技成果当量分值。
3.2.3 获奖成果当量分值及人均获奖成果当量分值的计算方法。某学院获奖科技成果当量分值和获奖优秀教学成果当量分值相加后可得该学院获奖成果当量分值B[,i3];某学院获奖成果当量分值除以其在册人数可得到该学院人均获奖成果当量分值B[,i4]。
3.3 发表论文(著)及人均发表论文(著)当量分值的计算方法 目前,不少部门、单位、学会和协会创办了不同层次、不同等级的学术刊物,登载相应科学领域的学术论文。不同等级刊物学术论文的选登一般都经过不同程度的严格审选。所以论文登载的刊物级别的高低大体上能够说明论文的水平和质量,可以作为论文(著)当量分值的计算方法确定的依据,又由于作为理论研究成果形态的论文和论著不存在重复发表问题,因而论文(著)的当量分值可根据论文登载的期刊级别或论著的字数来确定。表7[3]、表8[3]给出了论文(著)的当量分值。
由于检索工具出版的滞后及中国信息研究所对全国科技论文检索统计分析的滞后,使每年的收录论文奖奖励的均为前两年SCI、EI收录的论文,所以,统计时应按科研处奖励的年限为准。
某学院每篇论文(著)的当量分值相加后可得该学院论文(著)的当量分值B[,i5];某学院发表论文(著)的当量分值除以其在册人数可得到该学院人均发表论文(著)的当量分值B[,i6]。
3.4 专利项目当量分值的计算方法 专利项目当量分值见表9。
4 二级指标标准分的计算方法
同一个二级指标不同级别的量即三级指标通过上述当量化处理后统加,得该二级指标的当量分值。该值仍是一个绝对数,由于按上述方法计算的各二级指标的当量分值并不具有等值性,因此,是不能直接相加的。为了进行数据处理,本文采用标准化的数学方法将参评学院的各二级指标当量分值换算成标准化的分值,这样便于相互比较和进行计算。具体方法见公式(1):
为:用一把尺子去衡量i学院二级评价指标j的实绩究竟排在其平均值的什么位置。
5 一级评价指标标准分的计算方法及一级评价指标对应不同类型学院的权重
5.1 一级评价指标标准分的计算方法 将一级评价指标下的各二级评价指标标准分乘以各自的权重系数即得各一级评价指标标准分,具体公式为(2):
5.2 一级评价指标对应不同类型学院的权重 为便于不同类型学院都能在一个统一的评价指标体系中进行评价,他们的评价指标应相同。但由于各学院的性质任务不尽相同,对于从事以基础研究、人文社科等研究工作的学院,如果按同一要求对待,显然是不合适的,失去科学性、客观性,评价也就没有意义。所以科研产出的各一级评价指标应根据不同类型学院的科技工作特点,对其各一级评价指标调整其权重,用以科学合理地评价各类学院的实际工作。不同类型学院一级指标权重调整系数V[,ij]如表10所示。
6 综合排序公式
将各一级指标的标准分乘以其对应的权重,可得各学院科研总产出的标准分。为了便于比较,可采用公式(3)将标准分转化为人们熟悉的百分制。
E[,i]为i学院科研总产出的综合百分数,表示该学院在全体中处于什么位置。
7 结论
7.1 本评价方法的意义 a. 评价中将各三级评价指标的原始数据转化为当量分值的计算及当量分值转化百分数的计算,均由学校管理部门统一按照转化公式进行技术处理。其转换的原则和方法都是一致的,具有较高的公平性。b.由于一级评价指标及二级评价指标中的不同项目的平均分不同,标准差(即分数高低与集中离散情况)不同,因此其当量分值不具有可加性,用标准分计分的方法能克服其局限性,更有效地体现评价意图,保证评价的合理性。c.用标准分进行评价是一种相对评价法。标准分就是相对分。若直接采用当量分值相加的方法,不能获知各学院在全体中所处的位置,不知其相对水平如何;而标准分反映每个学院在总体中所处的位置,从而决定其科研水平的高低,它能够更科学有效地体现评价的目的和作用。
7.2 评价方法中需解决的问题。 a.本评价方法的缺陷在于产出项目的权重和当量分值是人为设定的。由于科学活动产出是一个非常复杂的多参数变量,各变量之间缺少直接可比性,所以很难说各项的权重系数、当量分值的设计是非常合理的,因而会产生系统误差,不过这种系统误差可以通过调整而不断地趋于合理。b.学科的差异性未能充分考虑。虽然对于不同学院的产出的不同项目设立了不同的权重,但即使均为工程技术学院,其学科差异也较大,在比较不同学科的产出时应该慎重,应根据学科特点调整评价方法中的参数。