多国科学家提出科研评价十大原则

作者: 2015-05-30 15:48 来源:战略情报研究部
放大 缩小

3月,中共中央、国务院发布《关于深化体制机制改革加快实施创新驱动发展战略的若干意见》,要“改革高等学校和科研院所科研评价制度”,从研究成果数量转向研究质量、原创价值和实际贡献,对科研评价提出了新要求。4月23日,多国科学家在《自然》(Nature)杂志发布《科研评价莱顿宣言》[1],指出目前科研评价中计量指标被不当利用,许多评价活动过分依赖数据而不是专家判断,并提出恰当运用计量指标进行科研评价的十大原则。这些原则涵盖科研评价过程中的指标选择、评价过程及评价结果利用等若干方面,其中提到的问题也是我国改革和完善科研评价制度中亟待解决的问题。这些原则包括:

1、定量评估应支持定性的专家评估,但不能取而代之。同行评议需要定量评估作为系统的参照信息,但不能仅依靠数字指标。

2、对科研机构、团队和人员绩效的评估应参照其研究使命和目标,评估指标的选择及使用应考虑更广泛的社会经济和文化背景。推进学术知识前沿的研究不同于关注社会问题解决方案的研究,因此评价也要考虑政策、产业或公共利益等多方面的价值。

3、应重视对于非英语的重要研究成果的测度。很多国家对研究成果卓越性评价仅依赖于英文文献的测度,使研究本土问题的优秀研究成果很难得到适当的评价,为此应建立针对高质量非英文文献的评价方法来识别和鼓励此类研究。

4、保证数据收集和分析过程的开放性、透明度和简便性。评估不能进行黑箱操作,要通过简单的指标反映研究过程的复杂性。

5、允许被评估者对数据和评估过程进行复查复核,要为准确、高质量数据的收集和处理提供时间和资金保障。

6、考虑到不同领域论文发表和引文情况的差异,建议提供一套可能的指标,并允许不同的领域从中选择。针对引文率随领域不同的情况,建议采用百分位方法进行指标的归一化处理,以避免一篇高被引论文大幅提升一所大学排名的情况。

7、对科研人员个人的评估要基于其整体学术状况的定性判断,综合考虑个人知识、经验、活动和影响力等,不能仅依赖单一指标。

8、科技指标在概念上易产生歧义和不确定性,因此提倡采用多元指标,尽量提供不确定性和误差的量化信息;指标的测算应避免虚假的精确度,例如以非常小的影响因子差异来区分期刊是没有意义的。

9、指标导向所产生的激励机制可能影响科研系统的发展。由于单一指标可能会导致针对指标的急功近利,将测度本身变成目标,建议采用系列指标。

10、定期审查并调整评价指标。研究使命、评估目标及研究系统本身都在发展变化,因此要不断审查并适时调整评价指标。  

(王建芳)

附件: