高影响力期刊的论文“含更多统计错误”

点击阅读英文原文

在高影响力期刊上发表论文或许会影响高校的招聘和晋升决策，但一项大规模研究发现，这些期刊与低质量研究工作之间存在一定联系。

这项分析比较了超过5万篇行为和脑科学文章的统计错误与复制研究结果，以及期刊的影响因子和文章层面的引用计量。

研究发现，影响因子较高期刊所发论文，往往有质量较低的统计证据来支持其主张，而且这些研究发现不太可能被其他研究人员成功复制。

尽管该研究处理的数据无法揭示这种影响背后的机制，但作者表示，分析进一步否定了将文献计量学作为衡量研究质量的方法。

顶级期刊的声誉通常被视为一种认可，即这些期刊发表的研究不仅对其他科学领域具有新颖且重要的意义，而且它们所采用的统计测量也是准确无误的。

“你不仅希望它们具有创新性，也期待研究论据质量过硬。” 该研究的作者之一扎卡里·霍恩（Zachary Horne）告诉泰晤士高等教育：“但你看不到这一点，实际上，你会在相反的方向上看到这种关系非常微弱。”

霍恩博士是爱丁堡大学（University of Edinburgh）的心理学讲师，他表示，该分析对围绕研究评估进行更广泛的辩论具有影响。

他说，与其依赖于期刊名声的光芒，“管理者和科学评估人员可能需要更多地关注代表性、样本量以及不含错误的论文”。

此前的研究表明，衡量文章引用可能加固长期存在的职业不平等现象，因为引用习惯往往使女性和那些来自代表性不足群体的学者处于不利地位。

在8月17日发表于《皇家学会开放科学》（Royal Society Open Science）杂志上的这篇论文中，霍恩博士与合著者、马里兰大学（University of Maryland）的心理学家迈克尔·多尔蒂（Michael Dougherty）表示，他们的研究结果还表明，滥用影响因子和引用计量最终可能会促进和鼓励不良科学。

尽管现在有很多人拒绝使用影响因子来评判论文或其作者，但霍恩博士表示，他们仍然在一个默认使用文献计量学的系统中工作。

他说：“我认识的那些真正意识到这些不一定是质量指标的人，更有可能雇用在这些地方没有发表论文的人。”

近年来，对学术期刊“声望经济”的抵制不断增加。一项由欧盟支持的研究评估协议禁止签署方在人事决策中使用引文影响因素，并要求他们提出替代方案的计划。

ben.upton@timeshighereducation.com

本文由Liu Jing为泰晤士高等教育翻译。