科学家提出运用计量方法进行科研评价的十大原则
2015-06-11 14:17 来源:《自然》杂志
4月23日,佐治亚理工学院的Diana Hicks等多国科学家在英国《自然》杂志发布《科研评价莱顿宣言》,指出目前科研评价中计量方法被不当利用,许多评价活动过分依赖数据而不是专家判断,并提出恰当运用计量方法进行科研评价的十大原则:(1)定量评估应支持定性的专家评估,但不能取而代之。(2)对科研机构、团队和人员绩效的评估应参照其研究使命和目标,科研绩效评估指标的选择及使用应考虑更广泛的社会经济和文化背景。(3)应重视对于非英语的重要研究成果的测度,很多国家的研究卓越性评价仅依赖于英文文献的计量,使得研究本土问题的接地气的研究很难得到适当的评价,为此应建立针对高质量非英文文献的计量方法来识别和鼓励此类研究。(4)保证数据收集和分析过程的开放性、透明度和简便性。(5)允许被评估者对数据和评估过程进行复查复核,为准确、高质量数据的收集和处理加强时间和金钱的保障。(6)考虑到不同领域论文发表和引文情况的差异,提倡提供一套可能的指标,并允许不同的领域从中选择。(7)对科研人员个人的评估要基于其整体学术状况的定性判断,不能仅依赖h指数等单一指标。(8)科技指标在概念上容易产生歧义和不确定性,因此提倡采用多元指标,尽量提供不确定性和误差的量化信息,同时指标的测算应避免虚假的精确度,如以非常小的影响因子差异来区分期刊是没有意义的。(9)指标导向所产生的刺激机制可能影响科研系统的发展,由于单一指标可能会导致针对指标的急功近利,将测度本身变成目标,建议采用系列指标。(10)定期审查并更新评价指标。研究的使命、评估的目标,以及研究系统本身都在发展变化,因此也要对评价指标不断进行审查,并适时调整。
(王建芳)