当前位置: X-MOL 学术Behav. Res. Methods › 论文详情
Our official English website, www.x-mol.net, welcomes your feedback! (Note: you will need to create a separate account there.)
A meta-review of transparency and reproducibility-related reporting practices in published meta-analyses on clinical psychological interventions (2000–2020)
Behavior Research Methods ( IF 4.6 ) Pub Date : 2021-06-26 , DOI: 10.3758/s13428-021-01644-z
Rubén López-Nicolás 1 , José Antonio López-López 1 , María Rubio-Aparicio 2 , Julio Sánchez-Meca 1
Affiliation  

Meta-analysis is a powerful and important tool to synthesize the literature about a research topic. Like other kinds of research, meta-analyses must be reproducible to be compliant with the principles of the scientific method. Furthermore, reproducible meta-analyses can be easily updated with new data and reanalysed applying new and more refined analysis techniques. We attempted to empirically assess the prevalence of transparency and reproducibility-related reporting practices in published meta-analyses from clinical psychology by examining a random sample of 100 meta-analyses. Our purpose was to identify the key points that could be improved, with the aim of providing some recommendations for carrying out reproducible meta-analyses. We conducted a meta-review of meta-analyses of psychological interventions published between 2000 and 2020. We searched PubMed, PsycInfo and Web of Science databases. A structured coding form to assess transparency indicators was created based on previous studies and existing meta-analysis guidelines. We found major issues concerning: completely reproducible search procedures report, specification of the exact method to compute effect sizes, choice of weighting factors and estimators, lack of availability of the raw statistics used to compute the effect size and of interoperability of available data, and practically total absence of analysis script code sharing. Based on our findings, we conclude with recommendations intended to improve the transparency, openness, and reproducibility-related reporting practices of meta-analyses in clinical psychology and related areas.



中文翻译:

对已发表的临床心理干预(2000-2020)荟萃分析中透明度和可重复性相关报告实践的荟萃审查

荟萃分析是综合有关研究主题的文献的强大而重要的工具。与其他类型的研究一样,荟萃分析必须是可重复的,以符合科学方法的原则。此外,可以使用新数据轻松更新可重复的荟萃分析,并应用新的和更精细的分析技术进行重新分析。我们试图通过检查 100 个荟萃分析的随机样本,从经验上评估临床心理学已发表荟萃分析中透明度和可重复性相关报告实践的普遍性。我们的目的是确定可以改进的关键点,目的是为进行可重复的荟萃分析提供一些建议。我们对 2000 年至 2020 年间发表的心理干预荟萃分析进行了荟萃审查。我们搜索了 PubMed、PsycInfo 和 Web of Science 数据库。根据先前的研究和现有的荟萃分析指南,创建了用于评估透明度指标的结构化编码表格。我们发现了以下主要问题:完全可重复的搜索程序报告、计算效果大小的确切方法的规范、加权因子和估计器的选择、用于计算效果大小的原始统计数据的可用性和可用数据的互操作性的缺乏,以及几乎完全没有分析脚本代码共享。根据我们的发现,我们提出了旨在提高临床心理学和相关领域荟萃分析的透明度、开放性和可重复性相关报告实践的建议。根据先前的研究和现有的荟萃分析指南,创建了用于评估透明度指标的结构化编码表格。我们发现了以下主要问题:完全可重复的搜索程序报告、计算效果大小的确切方法的规范、加权因子和估计器的选择、用于计算效果大小的原始统计数据的可用性和可用数据的互操作性的缺乏,以及几乎完全没有分析脚本代码共享。根据我们的发现,我们提出了旨在提高临床心理学和相关领域荟萃分析的透明度、开放性和可重复性相关报告实践的建议。根据先前的研究和现有的荟萃分析指南,创建了用于评估透明度指标的结构化编码表格。我们发现了以下主要问题:完全可重复的搜索程序报告、计算效果大小的确切方法的规范、加权因子和估计器的选择、用于计算效果大小的原始统计数据的可用性和可用数据的互操作性的缺乏,以及几乎完全没有分析脚本代码共享。根据我们的发现,我们提出了旨在提高临床心理学和相关领域荟萃分析的透明度、开放性和可重复性相关报告实践的建议。完全可重复的搜索程序报告,计算效果大小的确切方法的规范,加权因子和估计量的选择,用于计算效果大小的原始统计数据的可用性和可用数据的互操作性,以及实际上完全没有分析脚本代码共享。根据我们的发现,我们提出了旨在提高临床心理学和相关领域荟萃分析的透明度、开放性和可重复性相关报告实践的建议。完全可重复的搜索程序报告,计算效果大小的确切方法的规范,加权因子和估计量的选择,用于计算效果大小的原始统计数据的可用性和可用数据的互操作性,以及实际上完全没有分析脚本代码共享。根据我们的发现,我们提出了旨在提高临床心理学和相关领域荟萃分析的透明度、开放性和可重复性相关报告实践的建议。并且几乎完全没有分析脚本代码共享。根据我们的发现,我们提出了旨在提高临床心理学和相关领域荟萃分析的透明度、开放性和可重复性相关报告实践的建议。并且几乎完全没有分析脚本代码共享。根据我们的发现,我们提出了旨在提高临床心理学和相关领域荟萃分析的透明度、开放性和可重复性相关报告实践的建议。

更新日期:2021-06-28
down
wechat
bug