教育研究人員越來越重視系統性綜述(回顧)的質量,因為綜述結果在影響政策和實踐決策中扮演著關𨫡角色。Nordström及同事最近發表的一項研究評估了教育研究中系統性綜述的偏差風險和開放科學實踐。
該研究評估了2019年至2021年間發表的88篇綜述,重點關注K-12干預措施對學生成績的影響。ROBIS(Risk Of Bias In Systematic reviews)量表用於評估系統性綜述的質量和可信度。該量表包括四個領域:資格標準、研究的認別和選擇、數據收集和研究評估以及綜合和發現。還評估了開放科學實踐,例如預先註冊實驗方案和數據的可用性。
結果顯示,88%的綜述存在高偏差風險。其中,31篇綜述沒有進行全面和可重複的檢索。大約30篇綜述沒有正式評估原始研究的偏差風險。小部分綜述(11%)被認為具有低偏差風險。其中,只有6篇綜述預先註冊了方案,3篇綜述分享了他們的數據。
作者得出的結論是,實施系統性綜述報告的所有方面在未來的研究中至關重要,以確保研究的可重複性。開放科學也被視為一個需要改進的領域。
文獻來源(開放取用):Nordström, T., Kalmendal, A., & Batinovic, L. (2023). Risk of bias and open science practices in systematic reviews of educational effectiveness: A meta-review. Review of Education, 11(3), e3443. https://doi.org/10.1002/rev3.3443

