国外科研资助机构的学科评估及其启示(2)
2013-05-07 01:03
导读:3 学科评估的组织与结果 3.1 组织 学科评估是科研资助机构为达到了解所资助学科的发展状况和科研管理机制中存在的问题以及确定学科今后的发展战略等
3 学科评估的组织与结果
3.1 组织
学科评估是科研资助机构为达到了解所资助学科的发展状况和科研管理机制中存在的问题以及确定学科今后的发展战略等目的而提出来的,因此学科评估的组织一般由科研资助机构主导。科研资助机构邀请一批该学科领域内的国内外知名专家,利用已有的数据积累,采用一定的方式、对若干年来在其资助下的某个学科所取得的研究产出和综合影响力进行评估,并进而对科研管理过程中存在的问题和该学科今后的发展战略提出政策性建议。学科评估的组织涉及到大量的人力物力,总体上包括三个阶段:1、基础准备阶段:主要任务是根据学科评估的目标确定评估方案和评估指标;2、数据(资料)收集阶段:根据已确定的评估方案和评估指标,收集准确的相关资料,开展预定的评估活动;3、数据(资料)分析整理阶段:将收集到的数据和信息通过整理分析,形成整体的学科评估报告。
3.2 结果
学科评估工作结束后,评估小组要将结果整理成一份报告递交给科研资助机构,有关部门选取合适的内容向科学界和公众公开学科评估的内容。并及时收集评估对象、科学界和社会公众的反馈意见,根据评估小组所提的建议及时调整科研资助机构的政策和具体的管理工作,提高科学基金管理工作的效率。如澳大利亚研究理事会的学科评估报告分为公开文件和保密文件两个部分,公开文件中省略涉及个人或具体项目的陈述;保密文件则有相关的详细信息,只提供给ARC的少数相关人员。公开的评估报告也包括两部分内容,第一部分是评估专家组提供的可公开的评估报告,第二部分是ARC对评估报告的回应,尤其是针对评估小组提出的政策建议予以逐项答复。因此,评估的过程既是ARC了解其资助绩效的过程,也是改进其政策和管理工作的过程。英国BBSRC对学科的评估工作完成后整理成文向公众展示学科取得的成果,以及未来学科发展的重点方向和资助的优先领域。如BBSRC 在对可持续农业的评估完成后立即确定了该学科三个重点资助的优先领域:创新农业实践、新型玉米体系和环境管理生态学[9]。
4 学科评估方法
科技评估的方法主要分为三类:定性方法(同行评议)、半定量方法(回溯法或案例研究)和定量方法(文献计量方法和经济计量方法)[10]。其中同行评议使用最多,然后是非定量的案例研究,而纯定量方法相对使用较少。在实际的评估过程中还可以是以上几种方法的综合运用。通常对基础研究的评估经常用到同行评议,对一些大型的、有多种评估对象和目标的计划则往往要综合运用多种评估工具和手段。本文所论述的学科评估就需要运用多种评估方法,主要有以下几种:
(转载自http://zw.NSEaC.com科教作文网)
4.1 定量分析
定量分析方法中较常用的一种就是投入—产出分析方法,其特点是
简单明了。通过对一定时期内某个学科的经费投入分析,可以了解该学科获得的资助力度。当然,对某个学科的投入是多元的,学科评估主要关心的是政府经费的投入状况。同时,学科的产出比较复杂,它既包括显性的结果如出版物,也有隐性的结果如对科学文化、社会经济进步的贡献等。一般来说,对学科评估
简单的产出分析就是用正式发表的
论文作为一个指标,在学科评估小组指定的数据库或刊物中,检索出一定时期内在科研资助机构的资助下发表的
论文数量有多少。再进行纵向和横向两方面的比较,可以得出该学科在若干年来的发展概况,在全球的总产出中占多大的比例,其国际影响力是增加还是减弱。如BBSRC在对“结构生物学”的评估中,首先分析了英国对“结构生物学”的投入情况,然后对“结构生物学”的产出作了文献计量分析,由城市
大学的信息行为和评估研究中心利用研究产出数据库ROD 和ISI,再加上评估小组协商后增加的三种刊物,对英国在1990至1999年发表的
论文进行了文献计量分析。结果发现:过去的10年中,英国的结构生物学产出有明显增长,该领域英国对全球的贡献比例从8%上升到12%;其中剑桥、牛津和伦敦
大学是该时期内结构生物学研究产出的主力,它们三者的论文在 1990年至1999年占了英国总论文产出的40%[5]。
4.2 会议研讨
由于学科评估涉及的科学研究领域一般都比较广泛,对于学科目前的发展状况及存在的问题科学家最有发言权,因此召开科学家之间的会议就成为必要。让科学家畅所欲言,发表他们对学科发展的看法,对改进管理机制提出建议,明确学科今后发展的重点和方向。如果是与技术联系紧密的学科,还可以邀请学术界和企业界的专家一起共同研讨,讨论学科的研究成果如何尽快转化为生产力,也可以明确市场的需求,为下一步的研究确定方向。BBSRC在对“生物化学工程”的评估过程中,1998年9月8日由化学工业协会组织,在英国伦敦召开生物化学工程科学家会议,大约有50人参加,都是英国学术界和企业界的生物化学科学家。讨论诸如:生物化学工程研究的目前状态如何?未来发展方向怎样?未来生物化学工程的培训需求怎样?新出现的技术是什么等问题[6]。
(转载自中国科教评价网www.nseac.com ) 4.3 实地走访
通常每个学科都会有自己的重点实验室或者重大仪器设施基地,这些部门是学科发展的基础,也是科学研究资助机构支持的重点,它们的运行情况在很大程度上影响到学科的发展。因此在学科评估过程中评估小组都会到重点实验室或重大设施基地进行实地考察,分析对它们的支持力度是否合适,研究产出是否达到要求,接下来应该如何对它们进行资助。除了走访本国的重点实验室或相关部门,学科评估中往往还需要走访其他国家的类似实验室或相关部门,以此做一个比较,了解自身的优势以及存在的不足等问题,同时拓宽本国科学家的研究视野,为今后的国际合作打下良好的基础。澳大利亚研究理事会在对“天文学和天体物理学” 的评估活动中,评估小组走访了帕斯、阿德雷德、霍巴特、墨尔本和悉尼等地的相关实验室,对涉及21个不同项目的17位受资助者进行了访谈[7]。 BBSRC在评估“生物化学工程”过程中,Bath大学的John Howell教授组织了一批年轻的英国化学/生物化学科学家走访了美国相关的部门,以此比较两国的研究状况和拓宽年轻科学家的视野[6]。