详细内容或原文请订阅后点击阅览
资助者说明和资助评审者评估研究的智力价值和其他影响的实践审查
本报告描述了评审员如何评估科学资助提案。我们发现，虽然对智力价值的评估取决于潜在的发现和拟议的方法，但对社会影响的评估往往忽视了如何实现这些结果。
来源:美国数学政策研究中心信息研究人员和政策制定者已经注意到评估科学研究的更广泛影响所面临的挑战。本报告回顾了现有文献，这些文献介绍了美国国家科学基金会 (NSF) 以外机构的评审员如何评估非医学基础研究和应用启发研究以及科学、技术、工程和数学 (STEM) 教育。通过这样做，它提供了有关用于评估资助的标准以及对评估资助提案的智力价值和更广泛影响具有重要、不重要或未经研究的影响的因素的证据。我们发现，在评估智力价值时，资助者和资助评审员似乎同时考虑了科学发现的潜力和科学探究的计划。相比之下，在评估更广泛影响时，资助者和评审员似乎更关注结果，而较少关注实现这些结果的方法。实证文献表明，评审员通常对资助提案的优点意见不一，尽管他们似乎根据经验变得更加一致。文献中提出了一些关于如何支持、修改或取代同行评审的想法，但关于这些想法有效性的证据有限。本文献综述的结果将为流程评估的设计提供参考，该评估将评估 NSF 如何在其工作中应用其“更广泛影响”评审标准。