科技评价过程的质量控制机制及控制策略研究,本文主要内容关键词为:质量控制论文,机制论文,策略论文,评价论文,过程论文,此文献不代表本站观点,内容供学术参考,文章仅供参考阅读下载。
中图分类号:F204
文献标识码:A
文章编号:1002-0241(2006)03-0040-04
一、问题的提出
科技成果是人类在从事科学技术研究和生产实践活动中,通过创造性劳动所取得的具有深化认识或改造客观世界作用的成就或结果。科技成果通过评价获得社会的承认和实践的检验。另外,科技评价也是科技成果能否成功实施产业化的判断尺度和必经途径。因此,科技评价成为了科技管理活动的重要组成部分之一。
目前科技评价中的评价方法、评价指标、评价标准和评价组织都存在一些问题。其中一个比较显著的问题是:过分强调评价方法和指标体系设计的研究,而对科技评价过程的质量控制机制及其控制策略重视不够。缺乏评价过程的质量控制机制,已经成为致使评价结果不准确的原因之一。评价过程的质量控制不仅影响到最终评价结果的质量,而且也影响到对所评科技成果价值的正确认同,从而影响到将其实施产业化的前景。因此,加强科技评价过程的质量控制研究是十分必要的。
国内许多学者对评价质量这个问题做出了一些研究,并取得了一定的研究成果。清华大学经济管理学院的仝允桓提出了按照评价方法、评价对象、评价目的、过程控制为标维的四维评价法[1]。在这里,他将评价中的过程控制作为单独的一维加以重视,强调了过程控制对评价质量的影响。丁福虎通过对科技评价指标设置误区的研究,间接探讨了评价质量问题。张卫华研究了多指标综合评价的质量内涵与原则问题。张青分析了造成多指标综合评价失效的影响因素及其控制模型。以上学者的研究在一定程度上探讨了科技评价过程的质量控制问题。但是,基于目前科技成果所采用的多指标综合评价体系,如何更加全面的分析评价科技成果,如何系统的分析蕴涵于评价过程中的质量影响因素,如何尽可能的在评价过程中消除质量隐患等问题还有待进一步的研究。鉴此,本文将从系统理论出发,对科技评价过程的质量影响因素进行系统分析,以期建立有效的评价过程质量控制机制,同时,提出相关控制策略,为在实践中提高科技评价质量提供参考。
二、评价过程的质量影响因素分析
科技评价的质量内涵包括评价的可靠性、有效性、适用性、可行性、实效性、合理性[2] 等几个方面。但是,存在于评价过程中的众多因素会对评价质量产生影响,使评价结果有可能产生偏离。因此,要系统分析这些质量影响因素。本文所提及的质量影响因素,不是指那些细节上的数据影响因素,而是指那些从宏观角度出发的阶段性过程影响因素。具体分析如下:
1.评价思想因素
科技评价工作要在一定的指导思想下进行。科技部、教育部等颁布的《关于改进科学技术评价工作的决定》中明确指出,评价中存在重形式走过场、重数量轻质量的倾向[3]。这就是说科研评价中存在指导思想不端正的问题。以什么样的思想为指导决定了评价主体的评价态度,势必影响到最终评价结果的质量。科研评价不能单纯地为了“评价”而评价,而是要通过评价带动新技术的发展以及促进新理念的提升。如果忽略了指导思想这一因素,必将丧失科研评价的真正内涵与作用。因此,明确评价指导思想,端正评价态度,是保证科研评价在大方向上不发生偏离的基本前提,也是评价过程质量控制的首要因素。
2.评价对象因素
科技评价的对象是高新技术研究成果。值得注意的是,就评价对象而言,不同行业或科技领域的科技项目、科技成果和科技组织有很大的差别,处于不同研究阶段的科技项目和科技成果,其性质和特征也存在着明显的差异。科技成果一般包括基础研究成果、应用研究成果、工程化研究成果和产业化研究成果。按此顺序,科技项目和成果的确定性、复杂性和集成度逐步提高,评价问题的机构化程度也逐步提高。对不同的科技成果进行评价,其评价的难度是不同的,这造成了对评价质量的直接影响。因此,评价对象是评价过程质量控制的重要因素。
3.评价目标因素
科技评价的目标一般包括价值度量、转化能力、产业化前景、潜在经济效益、产业化价值等。具体评价目标可以很多,但从时间的角度,评价目标可以分为事前评价目标、事中评价目标和事后评价目标[4]。不同时期,评价目标的侧重点也不同。科技评价的基点是与评价目标相联系的。通常,科技决策需要基于预测的事前评价,科技活动控制需要基于过程的事中评价,科技活动绩效考核需要基于结果的事后评价,而科技成果价值评判则基于成果对目标的贡献[1]。因此,根据评价目标的不同,采取评价的手段就会不同,最终评价的结果也就不同。所以,评价目标是评价过程质量控制的影响因素。
4.评价方法因素
科技评价使用的方法大体上可以归纳为信息获取方法、数据处理方法和评价与决策方法这三大类。进一步细分,还可分为影响与效果辨识方法、操作化设计方法、数据收集方法、数据处理方法、计量方法、分析方法、评价方法等。这些方法既有定量分析方法,也有定性分析方法。每一种评价方法都具有自身的特点,适用于不同的场合。采用不同的评价方法,对最终的评价结果会产生重大影响。评价方法没有优劣之分,关键是使用的是否得当。用好一个方法可以保证评价结果的质量,但若使用不当则可能会导致评价结果产生重大的偏差。所以,评价方法是评价过程质量控制中不可或缺的重要影响因素。
5.评价指标体系因素
目前的科技评价,都不是以单一指标作为衡量标准的。多指标综合评价体系成为了当今科技评价的主流体系。根据评价目的和对象的特点,评价指标体系可包括:筛选性指标、优选性指标和参考性指标三大类[4]。在这个体系中多个指标的相互联系与综合运用,会影响到评价结果的质量。例如,评价指标的同度量化方式和评价标准值的选择;指标权重的分配;指标的合成[5] 等。评价指标体系对科技评价工作起到规范和导向的作用。评价指标体系不合理,则得到的结论模糊性较大、可信度低、指导作用不强。因此,合理科学的指标体系是确保评价质量的关键影响因素。
三、评价过程的质量控制机制模型
1.质量控制机制的含义
科技评价工作是一个复杂性与阶段性相融合的系统过程。评价过程的质量控制机制是指在明确质量影响因素的前提下,通过系统分析方法,剖析这些过程影响因素的内涵与外延,并总结其控制与纠错措施,使其达到在过程中保证质量的目的。结合实际的评价工作,针对科技评价的质量内涵,以“可靠性、有效性、适用性、可行性、实效性、合理性”为控制的基本原则,可以总结出科技评价过程的质量控制机制。
2.评价过程的质量控制机制模型——二维过程质量控制体系
根据前文的分析可以发现,随着评价过程的推进,评价所涉及的内容逐渐增多,评价质量的不可操控性也逐渐增大。例如,在科技评价的初始阶段,只需明确评价的指导思想即可,故其可控性较大,所需控制强度较小;而在指标体系构建阶段,涉及到众多指标的量化和数据的处理等工作,故其可控性较小,所需控制强度也相应变大。因此,可以以控制强度和评价过程为坐标的两轴,构建二维坐标系,用来描述科技评价过程的质量控制。二维过程质量控制系,一方面表现出了评价过程的质量影响因素,另一方面也表现出了随着评价过程的深入,质量控制强度逐步增大的趋势。如图1所示。
图1 科技评价过程的质量控制机制模型
四、评价过程的质量控制策略
1.以发展观为科技评价的指导思想
中共中央十六届三中全会提出了“全面、协调、可持续”的发展观[6],所谓“全面”是指高新技术的转化和高新技术的发展要放到整个社会发展系统中去考虑,不能孤立地研究高新技术发展,高新技术的发展和整个社会的发展形成一个协调的开放系统;所谓“协调”指高新技术的产业化要与劳动密集型企业、资金密集型企业、制造业等各类企业的发展相互衔接,相互促进,良性互动;所谓“可持续”是指在我国经济持续快速增长的同时,高新技术企业的发展要考虑资源约束,考虑人口、资源、环境之间的协调发展。这一发展观的确立,对于科技评价具有指导性意义。只有充分考虑所评科技成果是否符合这一发展趋势,才能在前提上保证科技评价的有效性和合理性。
2.仔细区分不同的评价对象
面对不同的科技成果,所采用的评价方法、指标、体系都是不同的。所以,在进行评价时要区分不同的评价对象。不同的研究成果具有不同的特点,细分科研成果可以更加清楚地发现这些不同点,以保证评价侧重点的正确无误。区分不同的评价对象实质上就是要使科技评价与所评对象更加吻合,从而在可靠性和可行性上达到评价质量的要求。
3.确定有针对性的评价目标
在区分评价对象的基础上,要确定有针对性的评价目标。对任何不同的科技成果进行评价时,都存在特定的评价目标。只有达到了指定的目标,所评的科技成果才是合格的,所进行的评价才是有效的。强调面向评价目标的评价,就是要使科技评价更加具有针对性。所以,明确评价目标,可以在适用性和实效性上保证评价结果的正确性。
4.选择适合评价对象的方法
科技评价使用的评价方法产生于综合评价过程,是对综合评价过程理论的高度概括。具体方法的选择要基于评价对象、面向评价目标,优化、识别最适合的评价方法。没有一种万能的方法适用于所有的科技评价。也并不是越新的方法就越好,而是应用最适合、被接受程度较高的方法,来进行有针对性的评价。国际上一些权威机构,如世界银行评估部明确指出:在选择评估方法时,应首先在成熟、公认的方法中进行恰当的选择,而不是首先考虑开发新方法。所以,选择适合的评价方法可以有效地保证评价质量。
5.建立科学的评价指标体系
基于不同的评价对象,面向不同的评价目标,注重能力价值和战略效益导向,建立一套科学合理的科技评价指标体系和评价标准,使其应用于不同的科研成果是科技评价的核心。科学的构建多指标综合评价体系,可使评价结论更加清晰、可信度高、指导作用增强。另外,要尽量避免科技评价指标设置的误区,如条件指标过度化、绩效指标泡沫化、加权处理主观化[7] 等,这也是保证评价质量的关键。
6.采取逐步检查的控制措施
评价质量控制的一个显著特点是全程监控。除了注意以上几点控制策略外,还应该采取层层把关,逐步检查的控制措施。因为科技评价是一个复杂的系统过程,一旦其中一个环节出现问题就会对最终的评价结果产生影响,而当发生问题时,又往往很难判断是在哪个环节上出了差错。因此,在每一阶段都实行监控有利于在过程中消除质量隐患。
综上所述,科技评价过程的质量控制策略可以用图2模型来表示。
图2 评价过程的质量控制策略模型图
五、结束语
科技评价是一个由政府部门、科研部门、生产部门、技术市场等诸方面因素共同参与的整体系统。评价过程的质量控制十分重要,它贯穿于科技评价过程的始终。没有评价过程的质量控制,就没有科学、正确的科技评价结果。用新发展观指导科技评价,基于不同的评价对象,面向不同的评价目标,采用合理的评价方法,建立科学的指标体系,并于评价过程的不同阶段加强控制力度并采取逐步纠错措施,是保证科技评价质量的方法,也是促进科学技术服务于社会发展的手段。