系统性文献综述&元分析数据分析及报告的29个建议
尽管近年来有很多人诟病文献综述或者元分析成为很多人灌水文章的手段，一个不可否认的事实是通过一篇优秀的系统性的文献综述或者说元分析我们可以快速对这个领域有初步了解。然而，如果我们阅读近年发表在好刊物(if 较高)的文章，我们就会发现至少方法层面是比较严谨。这些体现在很多细节方面，包括文献的检索，数据分析，及结果报告。那么一篇优秀的文献综述在这些方面是如何做的呢?这里我简单根据发表在2019年及2020年有关元分析方法的三篇文章来进行探讨，分享他们提到的29个建议。
1
文献检索 (Literature Searches)
Literature searches in systematic reviews and meta-analyses: A review, evaluation, and recommendations (Harari, Parola, Hartwell,& Riegelman, 2020).
系统性的文献综述，不管是定性综述还是元分析，对于总结相关领域已有研究都是非常有用的工具。这些文章无论是对于研究还是实践政策的制定都具有较为重大的意义。为了述评大量的研究，研究者第一步要做的就是查找相关研究，即文献检索。
Kepes, McDaniel, Brannick, & Banks(2013), “Search strategies, including the literature review […], are among the most important aspects of a meta-analytic review” (p. 123).
毋庸置疑，文献检索是一篇综述或者元分析的基石，一旦文献检索不够系统所有的结论都可能产生偏差，甚至得出误导性的结论。往往在文献检索时候我们常常会遇到很多看似细节的问题，比如到底如何选关键词，选数据库，选几个数据库，除了检索数据库还有哪些检索方式？下面将根据2019年及2020年最新相关文献，为这些细节问题提供答案。
第一问：常见的文献检索方式有哪些？
Harari 等人2020年发表在JVB的一篇综述，系统分析了发表在组织心理学，咨询心理学及管理学领域顶刊的152篇综述文章。常见的文献检索方式及使用频次如下：数据库检索是最为常用的检索方式，其次为backward search, manual search等。
来源：Harariet al. (2020)
第二问：如何选关键词
(The specific search terms used)
数据库检索的很关键的一点是选取关键词。Best practice suggests that reviews use peer review in making these decisions, most often through consultation with a librarian (Koffel, 2015). Other methods, such as Peer Review of Electronic Search Strategies (PRESS), a guideline for evaluating search strategies (McGowan et al., 2016).
通常建议咨询图书馆相关检索人员。
建议查找3-5篇领域内的相关综述性文章和元分析文章，然后把这些文章中用到的关键词及同义词。
比如我们以2019年发表在Annual review of Psychology上的那篇来进行说明。首先将研究问题细化为可以检索的关键词，然后查找关键词的同义词以及在文献种常用的同义词。
来源：Siddaway et al. (2019)
第三问：如何根据关键词写
searchstring (d) (Boolean phrases used in the search)
每个数据库检索词不一样，其检索方式略有差异。通常在确定好关键词之后先写完一个数据库，然后再取修改其它数据库。我个人通常喜欢先写出WEB OF SCIENCE. TS 比较简单。TS = Title, abstract, keywords；用AND OR NOT 等连接起来即可。
(TS = "leadership") AND(TS = "creativity" OR TS = "innovation" ) AND (TS ="meta-analysis " OR TS = "meta analysis")
具体文献检索可以参考，之前推送： 高级检索,文献管理,两秒完成英文参考文献核对
第四问：选择几个数据库？
(The specific databases searched)
根据Harari等人对于152篇相关领域发表的文章来看，平均而言，大家会检索3个数据库。最小是1，最多的检索了10个数据库。
建议：最少检索3个数据库。一般5-7个完全可以。
来源：Siddaway et al. (2019)
第五问：管理学/心理学领域有
哪些最常用的数据库？
管理学/工业组织心理学领域研究者们使用最多如下：
PsycINFO (63.33%)
Google Scholar (38.67%)
ProQuest Dissertations andTheses (30.67%)
ABI/Inform (29.33%) was particularly common.
再加上Web of Science 5个数据库最低要求已经达到，然后同样可以参考对于你要研究主题之前研究者采用的适当加1-2个即可。
第六问：数据库检索之外
补充检索做什么？
(Supplementary search)
通常作为数据库检索外，一般综述研究还会进行一些补充检索以挖掘尽可能多的文献。Harari (2020), 在其搜集的152篇文章中，发现大家除了数据库检索，平均而言还会纳入两种补充检索方式。
Of the 152 studies included in our database, 29 (19.08%) didn’t incorporate any complementary strategies, 35(23.02%) used one, 29 (19.08%) used two, 34 (22.37%) used three, and 25(16.44%) used four or more.
那么至少要进行两种补充检索。如果要发好的期刊推荐使用3-4种补充检索。最常用的补充检索：
Backward searches (61.84%) (i.e., searching through references of other articles)
manual searches of relevantjournals (32.89%) 尤其是in press的文章。
forward searching (i.e.,identify studies that cited a particular article) classic or otherwise well-cited articles (21.71%)
Backward search 和forward searching 看来似乎都是通过特定文章或者参考文献取检索二者有何区分。举例而言，如果我要做关于abusive supervision 的文献检索
Backward search, 因为近几年发表了多篇关于abusive supervision 相关的综述和元分析，我只需要取查看这些文章纳入的分析的文章，顺藤摸瓜去找之前发表的文章。
forward searching 因为Abusive supervision 最初是Tepper 2000年提出来的，所以一旦有人研究就要引用这篇，因此我只需要查找引用这篇文章的文章即可。
这篇文章被引用了3281次，所以我们可以去从这3281篇搜集。
比如我们关注abusive supervision 与员工工作满意度，在search within citing articles 查找即可。
第七问：未发表文章的检索
(“grey”literature)
第一，会议文章，比如AOM. Through conference programs was the most frequently used method in our sample of reviews (32.89%).
第二，联系作者。Personal correspondence (e.g., with researchers who are known to carry out work in the area being reviewed) and announcements (e.g., Listserv postings) were also used to identify non-indexed studies with reasonable frequency (26.32% and 21.71% for personal correspondence and announcements, respectively).
第八问：文献检索有何建议？十个建议
来源：Harariet al. (2020)
2
元分析统计分析的19个建议(for Best Practices)
2020年JVB一篇Meta-Analysis in Vocational Behavior: A Systematic Review and Recommendations for Best Practices文章专门针对，元分析统计的问题提出了19个最佳建议。如果以后管理学领域或者组织行为领域，这些建议或者应该是需要注意的。
这篇文章仅仅分析了发表在JVB的68篇元分析而非所有管理学顶刊的元分析。
来源：Rudolph,C. W., Chang, K., Rauvola, R. S., & Zacher, H. (2020). Meta-analysis in vocationalbehavior: A systematic review and recommendations for best practices. Journalof Vocational Behavior, 103397.
3
元分析及文献综述报告的最佳建议
已经有很多指导准测对于如何进行报告及检索，包括PRISMA (Preferred Reporting in Systematic Reviewsand Meta-Analysis; Moher et al., 2009), 国内也有刘宇等人（2018）提出元分析的报告标准。更多可以推荐阅读Annual Review of Psychology 19年的这篇文章：Siddaway, A. P., Wood, A. M., & Hedges, L. V. (2019). How to Do a Systematic Review: A Best Practice Guide for Conducting and ReportingNarrative Reviews, Meta-Analyses, and Meta-Syntheses. Annual Review ofPsychology, 70(1), 747–770.
写作相关素材：重磅|20万字英文学术写作句库笔记正式发布
参考文献
Cort W. Rudolph, Kahea Chang, Rachel S. Rauvola, H. Z.(2019). Meta-analysis in vocational behavior: A systematic review andrecommendations for best practices. Journal of Plant Physiology, 153057.https://doi.org/10.1016/j.jplph.2019.153057
Michael B. Harari, Heather R. Parola, Christopher J.Hartwell, A. R. (2020). Literature searches in systematic reviews andmeta-analyses: A review, evaluation, and recommendations. Journal of Vocational Behavior, 106192.https://doi.org/10.1016/j.eplepsyres.2019.106192
Siddaway, A. P., Wood, A. M., & Hedges, L. V. (2019). Howto Do a Systematic Review: A Best Practice Guide for Conducting and ReportingNarrative Reviews, Meta-Analyses, and Meta-Syntheses. Annual Review ofPsychology, 70(1), 747–770.https://doi.org/10.1146/annurev-psych-010418-102803
刘宇, 陈树铨, 樊富珉, 邸新, 范会勇, 封春亮, & 胡传鹏. (2018). 心理学研究的元分析报告标准: 现状与建议.
● 关于作者
李培凯，就读于荷兰乌特勒支大学，博士生在读，研究兴趣集中于员工对于工作压力的评估，及复杂统计方法在工业组织心理学领域应用。尤其对于Leadership 相关的元分析。如果你有好的idea或主题与Leadership 相关的元分析或者实证，欢迎合作。个人邮箱p.li@uu.li。如果是公众号相关事宜请联系uunotebook@163.com
特别活动
20万字英文学术写作句库笔记 7天限时特惠活动将于北京时间2020年3月7日晚24：00正式结束。从3月8号恢复原价90元。如有需要，请点击下面链接购买（支付一定要备注姓名，并填写问卷）
此外，荷兰心理统计联盟第三期线上学习活动也将于3月16日启动：用R进行元分析 涉及基础到高级，如元分析中介，多水平，网络元分析等
加入条件：免费,但是需要担任笔记分享。
学习什么？
Harrer, M., Cuijpers, P., Furukawa, T.A, & Ebert, D. D. (2019). Doing Meta-Analysis in R: A Hands-on Guide. 这本书。如何加入？点击阅读原文，填写问卷信息。问卷链接见文章底部留言评论
往期精选：