AEPP 新专刊探讨农业经济学研究的可重复性问题
2023年6月, 美国农业与应用经济学会(AAEA)旗下Applied Economic Perspectives and Policy杂志出版专刊,探讨农业经济学研究中的可重复性问题。
论文和研究的可重复性(Replicability)是科学进步的基石。虽然农业经济学家经常向利益相关者提供建议,为政策制定提供信息,但我们目前缺乏对主流农业经济学期刊上发论文的重复/复现。这无疑增加了农经研究结果不可复制/不可靠的风险,会导致资源分配效率低下。在本文中,我们为农业经济学中的研究重复提供了一个框架,并讨论了促进研究结果可重复性文化的挑战和机遇。我们为如何挖掘这一潜力提供了途径,并为在农业经济领域更加重视结果的重复性提供了指导。本专刊包括11篇文章,这些文章复现了已发表文章中提出的各种实证分析,并推进了原始论文中使用的分析,以提供进一步的见解。
本专刊的总体目标是将可重复性纳入农业经济学专业的议程,建立意识,引导研究人员进行复制,同时培养一种环境,使可重复性工作在领先的农业经济学杂志上发表。在这一期关于农业经济学期刊可重复性的专刊中,文章是根据以下程序收录的。首先,通过在行业内广泛宣传的论文征集,例如通过农业和应用经济学协会的网络,招募潜在作者。其次,特邀编辑主持了一个在线研讨会,更广泛地讨论可重复性问题,更具体地讨论特刊,澄清提交论文的要求,并回答问题。
我们使用了一个两阶段的选择程序。首先,有兴趣为专刊投稿的作者提交了一份两页的概念说明,描述他们设想的内容和方法。第二轮筛选论文的标准是可重复性的研究与学术界内外的农业经济学家的相关性,以及可重复性研究对该领域知识的预期贡献。接下来,特邀编辑邀请选定的作者提交完整的论文。这种两阶段的方法使人们在早期就能对适合该特刊的复制研究的可行途径进行反馈。这第一步也为可重复性研究的作者创造了一些确定性,即他们是在 "正确的轨道 "上。在第二步中提交的完整论文必须包括两部分。在第一部分,根据与原始研究相同的数据集、实验或模型,复制(或不复制)原始研究的关键发现,评估可重复性。如果原始结果不能被完全复制,那么复制的研究人员需要与原作者联系,以调和任何差异。在第二部分,原始研究必须进行扩展,以评估内部有效性/稳健性和/或外部有效性/普遍性,例如,使用替代的变量规格、新的(更近期的、来自另一个环境的等)数据、替代的实验设置、替代的估计程序、其他优化或模拟模型,或这些模型的其他规格。这种方法要求作者在可重复性的基础上再推进原始研究。
2、Wimmer和Dakpo(2023),《Components of agricultural productivity change: Replication of US evidence and extension to the EU》,链接:https://doi.org/10.1002/aepp.13377
简介:作者以O'Donnell(2012)AJAE论文为对象,复现美国的证据并扩展到欧盟。他们成功地重复了原来的分析,发现大多数结果对方法的改变是稳健的,但生产力指数的选择会影响政策建议。通过三个不同的数据集,他们一致发现技术进步推动了美国的生产力增长,但欧盟的情况并非如此。
3、Rommel et al.(2022), 《Farmers' risk preferences in 11 European farming systems: A multi-country replication of Bocquého et al. (2014)》,链接:https://doi.org/10.1002/aepp.13330
简介:作者以Bocquého等(2014)ERAE论文为对象,通过使用原始数据集的两个不同子集,确认了原始分析的可重复性及其稳健性。此外,他们收集了11个欧洲农业系统的新数据。总体而言,他们确认了最初的研究和结论。然而,新数据集中的农民对参照物的依赖性较低,更容易受到概率扭曲的影响。他们强调了在不同的背景下,实验的复制会有多大的挑战性。