国外科研资助机构的学科评价及其启示_学科评估论文

国外科研资助机构的学科评价及其启示_学科评估论文

国外科研资助机构的学科评估及其启示,本文主要内容关键词为:学科论文,启示论文,科研论文,国外论文,机构论文,此文献不代表本站观点,内容供学术参考,文章仅供参考阅读下载。

1 引言

在知识经济时代,科学技术以空前的规模和速度发展,渗透到人类生产生活的诸多领域,对社会经济发展的影响日益加强,人们对国家科技发展的关注程度不断提高[1]。世界各国都在努力把握机遇,制定和调整发展科技的新战略, 加大对科技的投入,力争在科技的竞争中取得先机,以促进经济、社会的发展。但是,随着政府对科技的投入越来越大,科技经费的使用也就越来越受到关注。怎样提高科技资源的配置效率成为各国政府和公众关心的重要问题之一。不仅科学界关注科技投入的力度和方向,同时,公众科学素养和参与意识的不断提高,也使得他们希望了解科技经费的使用状况。因此,政府必须向科学界和公众说明科技经费投入的效率以及未来科技经费资助的优先领域等相关问题[2]。 作为政府管理科技经费的科研资助机构近年来力图通过分析与评价其资助状况,以显示其资源分配和管理工作是有效的。科研资助机构的主要特点是以学科为单元进行资助活动,以学科为单元开展评估工作。通过关注所资助学科的研究产出和综合影响力,可以把握各学科的整体状况,确定学科未来的发展战略,这也是开展学科评估工作的内部需求;而随着现代网络、通讯、数据库和资料管理等技术的日趋完善,开展学科评估工作的外部条件也逐渐成熟。

在1990年至1997年期间,澳大利亚研究理事会(Australian Research Council,简称ARC)对其在数学科学、物理科学、化学科学、生物科学、地球科学、 工程与应用科学、社会科学和人文学科等8大领域中发挥重要作用的24个学科的5年资助工作开展了绩效评估,评价其“分配资源的管理工作”是否有效[3]。与此类似, 在1999年至2002年,英国研究理事会(Research Councils UK,简称RCUK)下属的英国生物技术和生物科学研究理事会(Biotechnology and Biological Sciences Research Council,简称BBSRC)也对其资助的一些学科开展评估工作,如生物化学工程,结构生物学,可持续农业等,评估侧重在如何保持英国未来的国际竞争力,确定该学科未来十年的发展战略,并且为BBSRC在学科的发展作用中定位,确定政府将来的重点投资方向。以科技实力著称于全球的美国一直非常重视科研的评估工作,美国基础科学研究的主要资助机构——美国国家科学基金会(National Science Foundation,简称NSF)也开展了类似的学科评估工作。他们对其支持的一些重大研究计划,如海洋研究计划,地震减灾计划等多年来的工作进行了回溯性的评估。通过评估帮助国家科学基金会下属的一些机构,向他们提供必要的工具和信息,以使得这些机构最大限度地减少资助决定对科学界产生的负面影响,使之能继续保持像过去那样取得高水平研究成果的能力,并且分析NSF在支持该计划中所取得的成就,存在的问题以及未来的支持重点。

本研究在上述三个国家科研资助机构开展的学科评估工作基础上,对学科评估的目的与范围,组织与结果以及方法等相关问题进行了讨论,并结合我国的具体情况提出了学科评估对我国科研管理工作的启示。

2 学科评估的目的与范围

2.1 目的

学科评估的目的从总体上来说,主要是指科研资助机构通过对学科的评估活动最终希望获得学科状况的整体结果,属于宏观层面。从目前已开展的学科评估活动来看,可以区分两种类型的学科评估:一类是诊断性的学科评估,主要通过学科评估来了解学科目前的现状和科研管理中存在的问题,并对解决这些问题提出建议。如澳大利亚研究理事会开展的学科评估,其目的就是对ARC大额类型项目支持下的项目开展研究结果独立评估,考察在这一特定的学科领域进行研究的个人和研究小组的成果及其影响力,既评估ARC大额资助项目的产出状况,同时还对澳大利亚研究理事会具体的科研管理过程包括同行评议、项目申请等细节问题进行评估,以便进一步加以改进[4];另一类是战略性的学科评估,即以学科评估为手段,了解学科目前的国际发展趋势和本国所处的地位,为学科在未来若干年内的发展确定战略计划。如英国研究理事会开展的学科评估,在对英国“结构生物学”的需求评估中,委员会要求评估工作侧重在如何保持英国未来的国际竞争力[5];而在对“生物化学工程”的学科评估中,其评估目的是建议BBSRC 理事会必须适合生物化学工程新的使命,并且建议理事会制定该学科未来十年的发展战略[6]。应当注意,学科评估的这两个目的并不是绝对分开的,通常这两个目的在每个学科评估中都有体现,只是在具体的评估过程中有一个目的占主导地位而已。相对于学科评估的目的,其评估目标则比较具体,主要是指在评估单个学科时的具体目标是什么,属于微观层面。由于学科之间的差异,同一科研资助机构在开展评估活动时可以有一个统一的目的,但对每个具体学科的评估目标则不尽相同。总体来说,学科评估的目标应注重其引导性与概括性,既要包含学科的当前研究和培训概况;也要重视与其它学科的合作关系以及学科的资助模式变化等。

2.2 范围

学科评估的内容直接指向学科本身,即学科的整体产出和综合影响力,以科学分类中的学科作为一个评估单元,通常指的是一类相关的科学研究领域。它并不关注具体的机构和人员,但在学科评估中又离不开机构和人员,它是在相关机构和项目负责人的基础上开展起来的,只是最后将这些结果综合起来分析和考虑。学科评估的范围包含两层涵义,一是指评估的时间范围,二是指评估的学科研究领域范围。如澳大利亚研究理事会对“天文和天体物理学”评估的时间范围是选择在1988—1992年之间,涉及到ARC资助的21个科研项目。学科研究领域范围包括地球物理学、大气物理学、天文学和天体物理学[7]。而美国科学基金会对“地震减灾计划”的评估范围确定为以下研究领域:结构工程、地理技术工程、建筑和机械系统和与地震有关的社会科学;其评估时间跨越很长,从第一个资助计划(1958年)一直到最近的研究计划,评估小组将其分为四个阶段逐一考察[8]。学科评估的范围界定是开展学科评估的前提条件,一般由评估小组和科学共同体一起协商确定。只有将评估的范围界定清楚了,其后的评估工作才能得以顺利展开。

3 学科评估的组织与结果

3.1 组织

学科评估是科研资助机构为达到了解所资助学科的发展状况和科研管理机制中存在的问题以及确定学科今后的发展战略等目的而提出来的,因此学科评估的组织一般由科研资助机构主导。科研资助机构邀请一批该学科领域内的国内外知名专家,利用已有的数据积累,采用一定的方式、对若干年来在其资助下的某个学科所取得的研究产出和综合影响力进行评估,并进而对科研管理过程中存在的问题和该学科今后的发展战略提出政策性建议。学科评估的组织涉及到大量的人力物力,总体上包括三个阶段:1、基础准备阶段:主要任务是根据学科评估的目标确定评估方案和评估指标;2、数据(资料)收集阶段:根据已确定的评估方案和评估指标, 收集准确的相关资料,开展预定的评估活动;3、数据(资料)分析整理阶段:将收集到的数据和信息通过整理分析,形成整体的学科评估报告。

3.2 结果

学科评估工作结束后,评估小组要将结果整理成一份报告递交给科研资助机构,有关部门选取合适的内容向科学界和公众公开学科评估的内容。并及时收集评估对象、科学界和社会公众的反馈意见,根据评估小组所提的建议及时调整科研资助机构的政策和具体的管理工作,提高科学基金管理工作的效率。如澳大利亚研究理事会的学科评估报告分为公开文件和保密文件两个部分,公开文件中省略涉及个人或具体项目的陈述;保密文件则有相关的详细信息,只提供给ARC的少数相关人员。公开的评估报告也包括两部分内容,第一部分是评估专家组提供的可公开的评估报告,第二部分是ARC对评估报告的回应, 尤其是针对评估小组提出的政策建议予以逐项答复。因此,评估的过程既是ARC了解其资助绩效的过程, 也是改进其政策和管理工作的过程。英国BBSRC对学科的评估工作完成后整理成文向公众展示学科取得的成果,以及未来学科发展的重点方向和资助的优先领域。如BBSRC 在对可持续农业的评估完成后立即确定了该学科三个重点资助的优先领域:创新农业实践、新型玉米体系和环境管理生态学[9]。

4 学科评估方法

科技评估的方法主要分为三类:定性方法(同行评议)、半定量方法(回溯法或案例研究)和定量方法(文献计量方法和经济计量方法)[10]。其中同行评议使用最多,然后是非定量的案例研究,而纯定量方法相对使用较少。在实际的评估过程中还可以是以上几种方法的综合运用。通常对基础研究的评估经常用到同行评议,对一些大型的、有多种评估对象和目标的计划则往往要综合运用多种评估工具和手段。本文所论述的学科评估就需要运用多种评估方法,主要有以下几种:

4.1 定量分析

定量分析方法中较常用的一种就是投入—产出分析方法,其特点是简单明了。通过对一定时期内某个学科的经费投入分析,可以了解该学科获得的资助力度。当然,对某个学科的投入是多元的,学科评估主要关心的是政府经费的投入状况。同时,学科的产出比较复杂,它既包括显性的结果如出版物,也有隐性的结果如对科学文化、社会经济进步的贡献等。一般来说,对学科评估简单的产出分析就是用正式发表的论文作为一个指标,在学科评估小组指定的数据库或刊物中,检索出一定时期内在科研资助机构的资助下发表的论文数量有多少。再进行纵向和横向两方面的比较,可以得出该学科在若干年来的发展概况,在全球的总产出中占多大的比例,其国际影响力是增加还是减弱。如BBSRC在对“结构生物学”的评估中, 首先分析了英国对“结构生物学”的投入情况,然后对“结构生物学”的产出作了文献计量分析,由城市大学的信息行为和评估研究中心利用研究产出数据库ROD和ISI,再加上评估小组协商后增加的三种刊物,对英国在1990至1999年发表的论文进行了文献计量分析。结果发现:过去的10年中,英国的结构生物学产出有明显增长,该领域英国对全球的贡献比例从8%上升到12%;其中剑桥、牛津和伦敦大学是该时期内结构生物学研究产出的主力,它们三者的论文在1990年至1999年占了英国总论文产出的40%[5]。

4.2 会议研讨

由于学科评估涉及的科学研究领域一般都比较广泛,对于学科目前的发展状况及存在的问题科学家最有发言权,因此召开科学家之间的会议就成为必要。让科学家畅所欲言,发表他们对学科发展的看法,对改进管理机制提出建议,明确学科今后发展的重点和方向。如果是与技术联系紧密的学科,还可以邀请学术界和企业界的专家一起共同研讨,讨论学科的研究成果如何尽快转化为生产力,也可以明确市场的需求,为下一步的研究确定方向。BBSRC在对“生物化学工程”的评估过程中,1998年9月8日由化学工业协会组织,在英国伦敦召开生物化学工程科学家会议,大约有50人参加,都是英国学术界和企业界的生物化学科学家。讨论诸如:生物化学工程研究的目前状态如何?未来发展方向怎样?未来生物化学工程的培训需求怎样?新出现的技术是什么等问题[6]。

4.3 实地走访

通常每个学科都会有自己的重点实验室或者重大仪器设施基地,这些部门是学科发展的基础,也是科学研究资助机构支持的重点,它们的运行情况在很大程度上影响到学科的发展。因此在学科评估过程中评估小组都会到重点实验室或重大设施基地进行实地考察,分析对它们的支持力度是否合适,研究产出是否达到要求,接下来应该如何对它们进行资助。除了走访本国的重点实验室或相关部门,学科评估中往往还需要走访其他国家的类似实验室或相关部门,以此做一个比较,了解自身的优势以及存在的不足等问题,同时拓宽本国科学家的研究视野,为今后的国际合作打下良好的基础。澳大利亚研究理事会在对“天文学和天体物理学”的评估活动中,评估小组走访了帕斯、阿德雷德、霍巴特、墨尔本和悉尼等地的相关实验室,对涉及21个不同项目的17位受资助者进行了访谈[7]。BBSRC在评估“生物化学工程”过程中,Bath大学的John Howell教授组织了一批年轻的英国化学/生物化学科学家走访了美国相关的部门,以此比较两国的研究状况和拓宽年轻科学家的视野[6]。

4.4 问卷调查

调查问卷是学科评估中使用最频繁的一种方法,几乎每个学科评估都曾采用过。调查问卷一般是面向大型项目的主持人或相关人员及重点实验室的负责人发放,通过他们了解本学科在国际上的影响力如何,科学研究资助机构的资助程序是否合理,经费是否充足,能否及时地开展研究工作,学科发展对于社会的贡献如何,今后的学科发展战略目标是什么等问题。ARC在对“大气和海洋地理学”进行评估时,向ARC大型项目负责人发放了一份问卷,包括两部分内容:第一部分(普通信息)包括个人和职业信息,如姓名、所在单位、最高学术资格、获得最高学历的时间、开始科研的时间、目前的职位等,也要求列出研究职业中的出版物数目、同时要向他们了解申请不成功的项目并且说明是否从其他什么地方得到资助,以及他们未来的研究方向,今后是否继续申请ARC的项目等问题。 第二部分主要包括申请到的项目的一些具体信息等内容[4]。

4.5 信息收集

随着通讯技术的迅速发展,网络成为人们工作的有力工具。在学科评估中,通过网络可以收集社会方方面面的信息,可以汇集除了本学科领域内的专家以外的一些社会人士对该学科的看法以及发展意见,进一步全面了解学科的状况。澳大利亚研究理事会在对“天文学和天体物理学”的评估活动中,为了从更广泛的渠道得到的信息,在《校园评论》上发布广告,类似的信息还通过电子邮件发给澳大利亚天文学会会员,希望通过这两种方式有更多的人参与讨论和评估[7]。NSF在对“重大海洋研究计划”的评估中,也在互联网上发放问卷,了解诸如以下的一些问题:海洋学重大研究计划已经带来对海洋认识的显著增加吗?海洋学重大研究计划已经为你提供了研究中使用的其他研究设备和设施吗?并且还通过问卷收集各界人士对海洋学重大研究计划的建议措施。[11]

4.6 国际比较

对学科的评估不能只是在纵向进行比较,横向的国际比较往往更加重要。学科评估中不仅要了解本学科在国内的发展状况,同时也要清楚该学科在世界上的整体概况,从中了解学科今后发展的趋势,明确本国在该学科今后的发展占据什么样的地位,进而确定一些优先发展领域,保持本学科在世界上的竞争力。如BBSRC 在对“结构生物学”的评估中评估小组经过调查分析认为,在当前的世界上“结构生物学”有三种不同的发展路线,分别是:基于整体基因的方法(结构基因)、基于系统和加工的方法、个体目标(individual targets)。目前美国、日本和欧洲主要的研究集中在“结构基因”方面,其它的研究方向散见于其他的一些国家[5]。

5 启示

我国目前对科技经费的投入力度越来越大,经费的使用效率也越来越受到关注[12]。如何有效的利用科技经费,使之达到最大的效益产出,更加合理有效地对基础科学进行绩效评估,是科研管理工作者应该思考的问题。通过以上介绍的国外科研资助机构的学科评估,我们可以从中获得一些重要的启示与借鉴。

5.1 学科评估是提高我国科学基金使用效率的重要手段

科研资助机构通过开展学科评估工作,可以了解学科发展和科研管理工作中存在的问题。通过对这些问题提出解决方法和建议,有利于提高科研管理工作的效率,使得资助方法和模式更加科学有效,也使得有限的科学基金能发挥出最大的效益。我国的科研管理部门开展过许多类似项目评估和人员评估的工作,取得一定的成效。但是,学科评估针对的是学科整体的发展及基金管理机制等问题,是在整体上把握科学基金资助工作的绩效和管理工作概况,具有项目和人员评估等方式无法触及的角度和深度,是一种值得借鉴的方式。通过学科评估工作可以了解我国科学基金对学科发展所起的作用,以及明确目前的基金项目评审和管理过程是否科学有效等问题,从而提高我国科学基金的使用效率。

5.2 学科评估是制定我国学科规划和发展战略的基础

科学研究必须体现国家的目标和需求[13]。在学科评估中可以了解该学科目前的国际趋势和本国的发展状况以及未来的需求,为制定学科规划的发展战略打下基础,从而引导学科的发展为国家目标服务。目前我国开展的科学研究绩效评估存在一定的问题,主要是过于强调微观的、针对研究人员个人的评价,而宏观的评价不足[14]。学科评估本质上是一种宏观评价,并不过多考虑细节,而是分析学科的综合影响力,注重学科的发展战略等问题。因此,在我国开展学科评估可以拓宽我国科研人员的视野,明确国家的需求和目标,同时也为国家制定学科规划的发展战略打下坚实的基础。

5.3 学科评估可以增加公众对科学和科学基金工作的了解

当今社会科学对人们生活的影响日益增加,人们对科学的兴趣也逐渐浓厚。为了使人们更好地了解科学,了解科学基金工作,开展学科评估是一个很好的方式。通过学科评估的工作,向公众展示科学基金在科学研究和学科发展中所起的重大作用,有利于提升公众对科研资助机构工作的理解和支持。同时,这也是我国政府管理机制民主化的必然要求。我国的科学研究成果转化目前不尽如人意,除了其他的因素,与我国的科学宣传和科普工作不力有很大关系。公众对于科学及科学研究一知半解,这也使得目前各种伪科学大行其道,损害了科学的正面形象。通过向公众展示学科评估的结果,一方面让公众掌握当今科学发展的最近进展,另一方面,让公众明确我国科研经费的投入方向及取得的成果,提升公众对科学研究和科学基金工作的支持力度。

5.4 学科评估的前提和基础是相关数据资料信息的积累

学科评估是在比较的基础上进行的,它既有学科内部的纵向比较,也有横向的国际学科发展比较。而这些比较需要相关的数据和资料等信息,大部分基金项目相关结果的数据和资料是开展学科评估的必要基础。澳大利亚、美国和英国等之所以能够开展大型的学科评估活动,正是由于长期积累的、可开展横向与纵向比较的大量基础数据,而且这些数据能够通过电子系统快速获取。目前我国在科研成果基础数据的积累、获取和共享方面都还存在许多问题,从客观条件上制约了包括学科评估在内的一些绩效评估工作的有效进行[2]。因此,科研资助机构应该加强基金项目申请、评审、结题等相关信息的数据库建设与维护工作,促进数据共享,推动网络化建设,为将来开展包括学科评估在内的各种科技评估工作奠定基础。换言之,开展学科评估也是推动基础数据规范化建设的重要手段。

5.5 学科评估开展的充分和必要条件在我国已逐渐成熟

科学基金制是我国科学研究资助的一种主要方式,其中国家自然科学基金委员会(以下简称基金委)是我国基础研究资助的主体机构[15]。基金委在多年的管理过程中已形成了一套行之有效的绩效评估方法,但主要是针对单个项目。随着基金委的不断发展,对我国科技进步的影响也越来越大,为了更好地把握基金委的管理状况和未来的发展需求,很有必要在更高的层次上开展评估活动。基金委的资助方式也是以学科为单元,一些资助的学科取得了国际性的成果,因此开展学科评估的必要条件已经成熟。而基金委项目评审和项目结题中的资料、数据等信息的完好保留,拥有一大批各个学科领域的专家库,又为学科评估的开展提供了充分条件。因此在基金委资助的一些学科当中,选取一两个有一定国际影响力的学科开展试点评估工作,对基金委提高科学基金的管理效率,明确学科的未来发展方向,应该是极为有利的。

标签:;  ;  ;  ;  ;  

国外科研资助机构的学科评价及其启示_学科评估论文
下载Doc文档

猜你喜欢