Journal of Structural Engineering-ASCE论文的可重复性

1月前浏览1433

Journal of Structural Engineering-ASCE论文的可重复性

Reproducibility in Journal of Structural Engineering Papers

作者 John W. van de Lindt, Sriram Narasimhan

https://ascelibrary.org/doi/10.1061/JSENDH.STENG-13725

研究结果的可重复性是推进学术研究的核心，但也因为准备论文文档的工作量增加、数据存储和计算需求等技术限制以及所有权问题而面临挑战。在2020年，ASCE Journal Water Resources Planning and Management期刊采纳并发布了关于可重复性的政策。为了促进该期刊论文的可重复性，对于符合标准的论文引入了几项激励措施。这一举措是及时且必要的一步，也是向正确的方向迈出的一步，以使研究更有影响力，并使得后续工作得以快速推进。

Journal of Structural Engineering-ASCE和Journal of Bridge Engineering-ASCE也需要发展类似的研究结果可重复性方法，这篇社论是由这两本期刊的主编共同撰写的。同时，考虑本领域内研究的特性和文化也很重要。可重复性不能简单地用是或否来回答，而是存在于从数据可用性到完全可重复性的连续区间上，结果的可重复性位于两者之间。在结构工程领域关于可重复性的政策必须认识到，大部分工作涉及实验室或现场样品的物理测试，其结果的完全可重复可能并不实际。此外，更广泛的模型专注于完整的系统和系统的系统，这又增加了一层复杂性，这通常需要由于缺乏数据而产生的固有假设。尽管如此，仍应在所有期刊中鼓励通过可以重复的模型产生的结果。

Journal of Structural Engineering-ASCE正在推动一种新的研究文章分类，强调了已发表结果可重复性的重要性。考虑到这一领域的研究性质，鼓励在这些期刊上发表论文的作者提供数据，并包括足够的元数据，使得世界各地未参与原始工作的人员也能够使用这些数据。显然我们认识到，虽然数据的可获取性并不意味着结果是完全可重复的，但这是可重复性的重要的第一步。虽然政策仅限于数据可获取（包括robust metadata），但强烈鼓励作者超越可获取性，将模型和其他材料放在存储库中，使结果可重复。

为了激励研究并在这两个期刊中提供数据，将为相应论文提供一个明显的认可徽章，上面醒目地写着“开放数据/模型/代码”。这样的论文也将在期刊内得到推荐，并可能在编辑推荐下被考虑赋予特别认可，例如年度最佳数据验证论文奖。

在提交论文时，作者应该指出他们的论文是否应该被视为候选的数据验证论文（data-verified paper，DVP）。如果是，DVP的作者将被要求包括一个“数据可获取性描述”部分，描述提供的数据（例如，哪些图表、章节），存储库位置，以及与共享数据相关的详细信息（例如，硬件和软件，版本）。作者声称可获取的所有数据都应在审查期间在公共存储库中提供。关于如何在公共存储库中提供此类数据的指南在 Rosenberg 等（2020）中进行了总结，包括标准化格式、详细说明、包括相关元数据、代码版本控制，以及在因所有权问题难以分享原始数据时使用的合成数据及其结果。

对于 DVP 的审查流程将如下进行。将任命三名副编辑，他们共同担任数据验证编辑的职位，利用他们的专业知识来确定数据是否符合论文作者所声明的内容，并确保数据无需与作者直接交流即可全球任何人使用。这将与正常的技术审查流程同时进行，并不会延长论文审查周期。