为什么需要进行可重复性培训?可重复性和可复制性是科学的核心。可重复性是指使用原始研究中使用的数据集和数据分析工作流程重新生成结果的能力,而可复制性是指在不同实验系统中获得类似结果的能力(Leek 和 Peng,2015 年;Schloss,2018 年)。尽管它们很重要,但研究表明,重现和复制同行评审的结果可能相当具有挑战性(Baker 和 Penny,2016 年;Freedman 等人,2015 年)。在过去的几年中,多个多中心项目评估了各个科学领域的可重复性和可复制性水平,并确定了对重复和确认科学结果至关重要的主要因素(Alsheikh-Ali 等人,2011 年;Amaral 等人,2019 年;Baker 等人,2014 年;Button 等人,2013 年;Cova 等人,2021 年;Errington 等人,2014 年;Friedl,2019 年;Hardwicke 等人,2018 年;Lazic,2010 年;Marque´s 等人,2020 年;开放科学合作,2015 年;Shen 等人,2012 年;Stevens,2017 年;
本文表达的观点为作者本人观点,不代表美国国防部、美国政府、作者所属的任何其他机构或美国国家经济研究局的官方政策或立场。特别感谢 Denvil Duncan、Seth Freedman、David R. Henderson、Thomas J. Kniesner、Lisa Robinson、Justin Ross、W. Kip Viscusi、Dan Sacks 以及美国经济协会、成本效益分析协会和南方经济协会会议、内华达大学拉斯维加斯分校、圣地亚哥州立大学和海军研究生院的研讨会参与者提供的有益评论。作者要感谢 Regenstrief Institute, Inc.,尤其是公共关系团队和生物医学信息学中心在疫情期间对此项非资助研究项目的支持。还要感谢研究团队成员 Shaun Grannis、Monica Kasting、Jon Macy 和微软新闻团队在开发和实施横幅广告方面提供的支持(Mary L. Gray、Vera Chan、Juan Lavista Ferres、Matt Lindenburg 和 Erin Van Noy)以及微软研究健康未来小组的 Mandi Hall。我们感谢 Ashley Wiensch 提供的行政支持。
普林斯顿大学,经济学系,客座助理教授,2017-2018 经济顾问委员会,职员经济学家,2010-2011 贝恩资本风险投资公司,分析师,2008-2009 奖学金和奖项: 2022 入围 2022 布拉德福德-奥斯本研究奖 2020-2021 尼古拉斯·尼古拉斯 (Nicholas J. Nicholas Jr.) 研究员,普林斯顿大学格里斯沃尔德经济政策研究中心 2020-2022 斯隆研究员 2018-2023 美国国家科学基金会,CAREER 奖 2016、2017 卓越裁判奖,美国经济评论 2014 WE Upjohn 研究所论文奖,一等奖(共同获奖者) 2014 公共政策研究研究生奖 – 加州大学伯克利分校经济学系 2013 加州大学伯克利分校院长规范时间奖学金 2013 伯奇税收政策和公共财政中心奖学金 2009 加州大学伯克利分校经济系系奖学金 2008 美国国家科学基金会,研究生研究奖学金,荣誉奖 2008 纳尔逊·A·洛克菲勒经济学奖,达特茅斯学院 2008 詹姆斯·O·弗里德曼总统学者,达特茅斯学院 2008 Phi Beta Kappa 同行评审出版物:
Andrea Aaron Annex Plating LLC Mihal & David Ariyeh Muriel Ashley Dale Atkins Darren Bahar Scott Bale Karen Balik Lorill Bean Laura & Keith Berman Terry & Russell Bernard Ruth Binter Anne Birchenough Lorin & Marc Blitzer Beth & Warren Bromberg Stephanie Browner & Rick Hamlin Blake Bueckman Chabad of Westport Oksana Chaklosh Lewis Cherniack Peter Chieco Erica & Gail Cohen Congregation Ahavath Achim Joseph Coviello Cummings & Lockwood, LLC Mary Beth Dale Amy & Aron Davidson Stacey Delikat Devan Acura of Norwalk Diray Media Lucy Effron Linda & Michael Epstein Bobbi & Eliot Essagof Linda & Allen Essner Held Family Nancy Sutin&Tom Federlin Gail Felsenstein Diane Ferber Claudine Feurstein Kara Schiff和Joseph Feuerstein Greenwich Ellen和Ari Fischel Ellen&Ari Fischel Barbara Stern和Robert Fischer和Robert Fischer Theresa&Robert Fischer&Robert Fischer Gavronsky Elisabeth Giles Jennifer&Lawrence Goichman Joanne&Marshall Goldberg Rebecca Goldenberg Audrey Goldfarb
这时,约翰·克劳泽 (John Clauser) 出现在了故事中:首先,当他还是哥伦比亚大学的研究生时,他发现了贝尔定理的一个修改版本,其中的不等式可以应用于实际实验(使用纠缠光子对和对各种极化方向的测量);然后在 1972 年,他与伯克利大学的 Stuart Freedman 一起进行了第一个实验,最终证明贝尔不等式被违反了 5 个标准差以上 [3]。这个实验使用灯来激发原子(激光时代之前!),是一个杰作,数据采集时间为 200 小时。克劳泽的结果后来由 Fry 和 Thompson 在 1976 年通过类似的实验证实。与此同时,从 1974 年开始,Alain Aspect 参与了一项计划,其中通过相对论论证来强制执行对中每个光子的偏振测量之间的独立性。在奥赛光学研究所进行的这些实验中,每个偏振器的设置都在随时间快速变化,因此两个检测通道之间不可能交换有关此设置的信息:在创建纠缠光子对之后,对光子偏振的测量基础的选择已经完成,局域性条件(这是贝尔定理的一个基本假设)成为爱因斯坦因果关系的结果,可防止任何超光速的影响。这导致了 1982 年发表的
Skip Brass, MD, PhD Associate Dean and Director Rahul Kohli, MD, PhD Associate Director Elizabeth Bhoj, MD, PhD Steering Cmt Member Donita Brady, PhD Steering Cmt Member Horace DeLisser, MD Steering Cmt Member C. Jessica Dine, MD, MHSP Steering Cmt Member Robert Heuckeroth, MD, PhD Steering Cmt Member Audrey Odom John, MD, PhD Steering Cmt Member Max Kelz, MD, PhD Steering Cmt Member Erle Robertson, PhD Steering Cmt Member Mike Atchison, PhD Director, VMD-PhD program Bruce Freedman, VMD, PhD Steering Cmt Member, VMD-PhD program Nicola Mason, B Vet Med, PhD, DACVIM Steering Cmt VMD-PHD计划会员Michael May,博士指导CMT成员,VMD-PHD计划Jennifer Punt,VMD,博士学位指导CMT成员,VMD-PHD计划Susan Volk,VMD,VMD,博士学位CMT CMT CMT CMT,VMD-PHD计划MAGGIE KRALL PLAMEND MAGGIE KRALL MAGGIE KRALL MAGGIE MAGGIE KRALL MAGGIE JILL BAXI NADI NAWI NAWI nw.学位Carina Myers,MSED MD-PHD课程MS副总监Hope Charney,MA行政协调员David Bittner,MA协调员,MD-PHD计划Ameena Atif Atif协调员,VMD-PHD Program
•伊曼纽尔·特沃尔德(Emanuel Tewolde),布莱恩·胡(Brian Hu Zhang),卡斯帕(Caspar Oesterheld),图马斯·桑德霍尔姆(Tuomas Sandholm)和文森特·科尼特(Vincent Conitzer)。尊重它们的计算游戏对称性和平衡。促进人工智能(AAAI)的协会,口语,2025年。•Ratip Emin Berker,Emanuel Tewolde,Ioannis Anagnostides,Tuomas Sandholm,Vincent Conitzer。在广泛的游戏中召回的价值。促进人工智能(AAAI)的协会,口语,2025年。•伊曼纽尔·特沃尔德(Emanuel Tewolde),布莱恩·胡(Brian Hu Zhang),卡斯帕(Caspar Oesterheld),马诺利斯·扎佩塔基斯(Manolis Zampetakis),Tuomas Sandholm,Paul W. Goldberg和Vincent Conitzer。不完美的回顾游戏:平衡概念及其复杂性。在国际艺术情报联合会议(IJCAI)中,2024年。•Emanuel Tewolde和Vincent Conitzer。可以保留NASH平衡或最佳响应集的游戏转换。在国际艺术情报联合会议(IJCAI)中,2024年。•(αβ)Vincent Conitzer,Rachel Freedman,Jobs Heitzig,Wesley H. Holliday,Bob M. Jacobs,Nathan Lambert,MilanMossé,Eric Pacuit,Stuart Russell,Hailey Schoelkopf,Hailey Schoelkopf,Emanuel Tewolde和William S. Zwicker。社会选择应指导AI的一致性来处理各种人类反馈。在国际机器学习会议(ICML)中 - 位置纸条曲目,2024。•Emanuel Tewolde,Caspar Oesterheld,Vincent Conitzer和Paul Goldberg。单人游戏不完美的回顾游戏的计算复杂性。在国际人工智能联合会议(IJCAI)中,2023年。
Author Affiliations: Leah C. Stokes and Olivia Quinn, University of California Santa Barbara Sam Ricketts and Bracken Hendricks, Evergreen Collaborative Acknowledgements: For their background research, we thank members of the Evergreen Collaborative policy team including Becca Ellison, Trevor Dolan, Devyn Powell, and Pallavi Sherikar, and for their contributions we thank others from the常绿通信和数字团队,包括Jamal Raad,Jared Leopold,Rainee Taylor,Weston Gobar,Sam Holman和Holly Burke。我们还感谢我们的同事的数据进度,他们为本报告提供了支持,其中包括丹妮尔·迪泽斯(Danielle Deiseroth),麦肯齐·威尔逊(McKenzie Wilson),Marcela Mulholland,Sean McElwee和Julian Noisecat。我们感谢美国进步中心(CAP)州议会大厦的倡议。For lending their ideas, time and feedback to this effort, we thank: Jim Barrett, Adam Browning, Mike Carr, Lew Daly, Bill Dauster, Jessica Eckdish, Josh Freed, Matthew Freedman, Rob Gramlich, Zealan Hoover, Jesse Jenkins, Richard Kogan, Sam Krasnow, Arjun Krishnaswami, Cheryl LaFleur, John Larsen, Ben Longstreth, Alex McDonough, Matto Mildenberger, Steve Nadel, Ellen Nissenbaum, Michael O'Boyle, Dan Reicher, Kevin Rennert , Adrien Salazar, Conrad Schneider, Tyson Slocum, Kim Smaczniak, Ben Serrurier , Todd Tucker, Jason Walsh, Lindsey Walter, Jon Wellinghoff, Michael威廉姆斯和凯特·扎拉(Kate Zyla)等。
约翰·克劳瑟(John Clauser)获得了学士学位1964年,他的M.A.在1966年的物理学和博士学位。 1969年哥伦比亚大学的物理学博士学位。 从1969年到1996年,他曾在劳伦斯·伯克利国家实验室,劳伦斯·利弗莫尔国家实验室和加利福尼亚大学伯克利分校工作。 John于2010年获得沃尔夫物理奖,并于2022年获得诺贝尔奖,以及Alain Factext和Anton Zeilinger对非本地量子纠缠和对当地现实主义的实验测试的观察。 在1969年,他与约翰·贝尔(John Bell)的理论结果启发,与迈克尔·霍恩(Michael Horne),艾伯纳·谢莫尼(Abner Shimony)和理查德·霍尔特(Richard Holt)一起,提出了第一次对当地隐藏变量理论的测试,并为这些理论提供了第一个可检验的Chsh-Bell定理预测 - Clauser-Horne-Horne-Horne-Horne-Horne-Holtony-Holt(Chsh)) 1972年,他与斯图尔特·弗里德曼(Stuart Freedman)合作,对CHSH不平等的预测进行了首次实验测试。 这是世界上对非本地量子纠缠的首次观察,并且是对违反贝尔不平等现象的第一个实验性观察。 1976年,他对CHSH不平等预测进行了世界第二次实验测试。 1974年,他与迈克尔·霍恩(Michael Horne)合作,将当地现实主义理论提出为当地隐藏可变性理论的概括,并首先表明贝尔定理的概括为所有当地现实的自然理论提供了严重的限制。 这项工作引入了克劳斯 - 霍恩(CH)的不平等,是当地现实主义设定的第一个完全一般的实验要求。在1966年的物理学和博士学位。 1969年哥伦比亚大学的物理学博士学位。 从1969年到1996年,他曾在劳伦斯·伯克利国家实验室,劳伦斯·利弗莫尔国家实验室和加利福尼亚大学伯克利分校工作。 John于2010年获得沃尔夫物理奖,并于2022年获得诺贝尔奖,以及Alain Factext和Anton Zeilinger对非本地量子纠缠和对当地现实主义的实验测试的观察。 在1969年,他与约翰·贝尔(John Bell)的理论结果启发,与迈克尔·霍恩(Michael Horne),艾伯纳·谢莫尼(Abner Shimony)和理查德·霍尔特(Richard Holt)一起,提出了第一次对当地隐藏变量理论的测试,并为这些理论提供了第一个可检验的Chsh-Bell定理预测 - Clauser-Horne-Horne-Horne-Horne-Horne-Holtony-Holt(Chsh)) 1972年,他与斯图尔特·弗里德曼(Stuart Freedman)合作,对CHSH不平等的预测进行了首次实验测试。 这是世界上对非本地量子纠缠的首次观察,并且是对违反贝尔不平等现象的第一个实验性观察。 1976年,他对CHSH不平等预测进行了世界第二次实验测试。 1974年,他与迈克尔·霍恩(Michael Horne)合作,将当地现实主义理论提出为当地隐藏可变性理论的概括,并首先表明贝尔定理的概括为所有当地现实的自然理论提供了严重的限制。 这项工作引入了克劳斯 - 霍恩(CH)的不平等,是当地现实主义设定的第一个完全一般的实验要求。在1966年的物理学和博士学位。 1969年哥伦比亚大学的物理学博士学位。从1969年到1996年,他曾在劳伦斯·伯克利国家实验室,劳伦斯·利弗莫尔国家实验室和加利福尼亚大学伯克利分校工作。John于2010年获得沃尔夫物理奖,并于2022年获得诺贝尔奖,以及Alain Factext和Anton Zeilinger对非本地量子纠缠和对当地现实主义的实验测试的观察。在1969年,他与约翰·贝尔(John Bell)的理论结果启发,与迈克尔·霍恩(Michael Horne),艾伯纳·谢莫尼(Abner Shimony)和理查德·霍尔特(Richard Holt)一起,提出了第一次对当地隐藏变量理论的测试,并为这些理论提供了第一个可检验的Chsh-Bell定理预测 - Clauser-Horne-Horne-Horne-Horne-Horne-Holtony-Holt(Chsh))1972年,他与斯图尔特·弗里德曼(Stuart Freedman)合作,对CHSH不平等的预测进行了首次实验测试。这是世界上对非本地量子纠缠的首次观察,并且是对违反贝尔不平等现象的第一个实验性观察。1976年,他对CHSH不平等预测进行了世界第二次实验测试。1974年,他与迈克尔·霍恩(Michael Horne)合作,将当地现实主义理论提出为当地隐藏可变性理论的概括,并首先表明贝尔定理的概括为所有当地现实的自然理论提供了严重的限制。这项工作引入了克劳斯 - 霍恩(CH)的不平等,是当地现实主义设定的第一个完全一般的实验要求。它直到最近(2013年)进行了实验测试。他还引入了“无增强假设”,因此CH不平等降低了CHSH不平等,因此相关的实验测试也限制了局部现实主义。在1974年,他首先观察到光线统计的光(违反了古典电磁场的Cauchy – Schwarz不平等),因此首先在实验上证明了光子可以像局部粒子一样行事,并且不像电子辐射的简短脉冲。在1987年至1991年,他提出(并获得专利)原子干涉仪作为有用的超敏感性和重力传感器。在1992年,他与Matthias Reinsch一起,首先推导了分数Talbot效应的数量理论特性,并发明了Talbot-Lau干涉仪。在1990 - 1997年间,他与Shifang Li首次使用Talbot-Lau干涉法来构建原子干涉仪。在1998年,他发明并获得了专利的使用TALBOT-LAU干涉仪,用于“超高分辨率干涉X射线成像”。这本发明又允许软组织的X射线相对比医学成像。