Categories
教育行政及領導 數學及理科學習 中學教育

有效且經濟:ASSISTments在線數學課程的成本分析

隨著對人工智能(AI)支援和技術導向的干預之興趣日益濃厚,需要更多關於干預相對成本效益的資訊,以幫助政策制定者在學校預算往往很緊絀的情況下,選擇那些既能提高學生學習效果,又能保持在學校預算範圍內的干預措施。

WestEd的Feng及團隊進於行了一項研究分析了ASSISTments計劃的成本和影響。ASSISTments 計劃是一個在線的一對一數學功課支援計劃,可以在課堂內外使用,為學生提供即時反饋,並讓教師實時了解學生的進度。最初的研究(涉及北卡羅來納州41個地區的63所學校的5,912 名7年級學生進行的隨機對照試驗)顯示效應值為+0.10的積極影響,且在計劃結束後一年持續存在。

當前研究建以這些實證證據為基礎,估計了產生這些收益所需的成本。具體來說,他們估計每位學生增加0.1標準差的數學成績需要46.23美元。這估計(及成本效益比率)與許多其他類似的干預相比相當低,並且考慮到產生估計影響的嚴謹研究設計(隨機化;大型而多樣的樣本;和長期影響估計),更令人印象深刻。

這項研究為快速應用成本分析方法提供了指南,包括細分每個組成部分之成本(表1)。此外,作者還討論了實施替代方案的可能性,以及如何將其整合到成本分析中。

文獻來源(開放取用):Feng, M., Weiser, G., & Collins, K. (2024). Cost and cost effectiveness of ASSISTments online math support: Analysis from a randomized controlled study in middle school. WestEd. Report_Cost-and-Cost-Effectiveness-of-ASSISTments-Online-Math-Support_FINAL-ADA-v2Read the rest

Categories
高等教育 教育行政及領導 中學教育

考試焦慮如何通過自我測試練習影響考試結果?

先前的研究已證明,測驗練習或回顧練習是一種有效的學習技巧。這種方法可以通過兩種方式實施:通過強制性測試(如課堂測驗)或通過沒有測驗規則的自願自我測試練習。關於後者,Liu及團隊進行了一項研究,以探討考試焦慮和考試風險會否影響自我測試的使用,繼而影響學習表現。

該研究包括一項調查和四項實驗。調查研究的數據來自中國西北一所學校的459名11年級學生。它使用自我報告問卷來測量特質考試焦慮,並以一條問題詢問自我測試的頻率。學業成果通過學校考試成績來評估。中介分析表明,高考試焦慮的學生不僅直接降低了考試成績,還通過減少自我測試頻率間接降低了考試成績。

在實驗室實驗中,參與者經歷了三個階段:學習材料、選擇複習策略(重新學習或自我測試)和參加考試。在北京師範大學進行的第一個實驗中,70名本科生的回應反映高特質考試焦慮減少了選擇自我測試的可能性。第二個實驗(25人)顯示,對於高風險考試而言,自我測試比低風險考試更不常見。第三個實驗(36人)證明了高風險顯著地通過降低自我測試損害了考試表現。

最後的準實驗結合了考試風險、考試焦慮、自我測試使用和考試表現。該實驗將天津職業學院的兩班學生隨機分配到高風險或低風險的測試條件。狀態考試焦慮在實驗開始時、在學生被告知考試風險後以及在學習階段後的三個時間點進行測量。統計數據指出,與低風險組相比,高風險組在得知測試風險後的狀態焦慮增加幅度更大。鏈式中介分析顯示,高風險會增加狀態焦慮,減少選擇自我測試,繼而降低考試成績。

研究結果支持作者提出的機制,即考試焦慮通過減低自我測試以致負面地影響學習成績。

文獻來源:Liu, S., Zhao, W., Shanks, D. R., Hu, X., Luo, L., & Yang, C. (2024). Effects of test anxiety on self-testing and learning performance. Educational Psychology Review, 36(2), 59. https://doi.org/10.1007/s10648-024-09882-1Read the rest

Categories
教育行政及領導 中學教育

上課時間可遲不可短?

政策制定者注意到,由於美國學校的上課時間不如其他國家的學校長,且美國學生總是沒有效利用在學校時間,因此相較於全球的同齡人,美國學生處於不利地位。加上Covid-19學校關閉的影響,一些學區增加了4至5週的學年時間來彌補,而其他仍面臨人手短缺和預算減少的學區則不得不採取每週四天上課的方式來應對。

Kraft 和 Novicoff進行了全面分析來探討了主動學習時間的障礙,檢查了時間如何影響學生成績的證據,並檢查了來自學區、國家和國際的數據。他們的研究結果強調了在學校時間與學生成績之間的正相關。值得注意的是,國際研究顯示,當在校時間實質增加(例如,增加3小時)時,成績會顯著改善,即使是較小的增加(少於90分鐘)也帶來適度的改善。

該研究還發現,每週四天上課很少能提高學業成績,而較晚的開課時間則能提高學業成績。主動學習的障礙包括學生無故缺勤、外界干擾和教師缺席。作者以一個學區作為個案研究,發現該區的高中學生因這些因素失去了25%的教學時間。為了彌補這損失,需要增加每天1.85小時的上課時間。

Kraft 和 Novicoff還討論了公平性和延長學習時間的問題,強調雖然延長學習可以能參與學生受益,但需要小心以確保這不會限制校外的寶貴經驗。政策影響包括需要公平的參與機會、平衡的課程安排以滿足不同的學生需求,以及在延長的時間內確保教學質量。

文獻來源:Kraft, M. A., & Novicoff, S. (2024). Time in school: A conceptual framework, synthesis of the causal research, and empirical exploration. American Educational Research Journal, 00028312241251857. https://doi.org/10.3102/00028312241251857Read the rest

Categories
社交及情意成果 學業成績 小學教育 中學教育

學生參與度與學業成績和主觀幸福感的關聯

學生參與度是反映學習動機及學習成果的關鍵結構之一。Wong 及團隊進行了一項系統綜述,包括137項研究,以檢視學生參與度(即情感、行為和認知)的操測量及其與學業成績和主觀幸福感(SWB)的關聯。該綜述發現三個參與維度可分別區分為不同的子類型:

  • 情感參與可區分為(a)關係參與,(b)學校的情感參與和(c)學習的情感參與的操作定義。
  • 行為參與分為(a)參與式和(b)努力式參與。
  • 認知參與包括(a)動機式、(b)自我調節和(c)努力式。而努力式重疊於行為參與及認知參與,因為對兩者的測量使用了相同的指標。

使用穩健變異數估計的統合分析綜合了110項研究的533個效應值,發現學生參與度與學業成績之間存在中等平均相關(r=+0.33)。行為參與的相關性最大(r=+0.39),其次是認知(r=+0.31)和情感(r=+0.26)。使用多個調節因數進行統合回歸的結果揭示了:

  • 與學生報告的測量相比,教師報告的參與度與學業成績的關聯更強。
  • 與標準化考試成績相比,學校成績顯示出更高的效應值。
  • 當學業成績與學生參與度在同一年份測量時,相關性更強。
  • 情感參與的子類型顯著調節了與學業成績的關聯,其中學習活動的情感效應最大(r=+0.33)。此外,與努力式參與(r=+0.38)相比,參與式行為參與也顯示出更強的關聯(r=+0.40)。

使用 18項研究的 158 個效應值,統合分析發現學生參與度與SWB之間存在顯著相關性(r=+0.35)。與認知參與(r=+0.35)和行為參與(r=+0.31)相比,情感參與顯示出最大的相關性(r=+0.40)。與正面情緒(r=+0.36)或生活滿意度(r=+0.39)相較,當 SWB 以負面情緒 (r=-0.20) 來衡量時,相關性顯著較小。

研究結果強調了準確定義和測量參與度子型的重要性,以避免過度概括並提高概念的清晰度。該研究鼓勵學者改進和澄清參與研究中使用的操作定義。

文獻來源:Wong, Z. Y., Liem, G. A. D., Chan, M., & Datu, J. A. D. (2024). Student engagement and its association with academic achievement and subjective well-being: A systematic review and meta-analysis. Journal of Educational Psychology, 116(1), 48–75. https://doi.org/10.1037/edu0000833Read the rest

Categories
計劃評鑑 語言發展 中學教育

語文之旅:了解ALFA計劃對有閱讀困難學生的幫助

ALFA(Accelerating Literacy for Adolescents 加速青少年識字)實驗室為有閱讀困難的九年級學生提供為期一學期的計劃。課程包括三個單元,聚焦於基本問題,每週進行一到兩天每次90分鐘課程。學生分小組輪流進行四個工作站學習,促進個人和小組協作能力。主要目標是通過引人入勝的材料提高閱讀動機、詞彙量、理解力和流暢度。這種教學方法不僅促進了更緊密的師生聯繫的形成,還可以讓學生更有自信地表達自己的想法。

最近的一項研究採用斷點迴歸設計(regression discontinuity design)來評估一個學期的ALFA實驗室課程對九年級學生成績的影響。研究員根據閱讀的前測分數,把得分低於預設閾值的學生分配到ALFA實驗室,而得分高於預設閾值的學生則作為對照組。該研究涉及四所學校,三年內共有1378名學生參與。

研究結果顯示ALFA對閱讀成績(干預意向(ITT)的效應值 = +0.11;接受干預(TOT)的效應值 = +0.10)、閱讀動機(ITT的效應值 = +0.11;的TOT的效應值 = +0.15)和閱讀頻率(ITT的效應值 = +0.43;TOT的效應值 = +0.51)產生了正面影響。儘管這些效應值缺乏統計學意義上的顯著性,但貝葉斯後驗分佈(Bayesian posterior distributions)強烈表明其具有正面效果(對於閱讀成績,ITT為+0.83,TOT為+0.80;閱讀動機,ITT為+0.79,TOT為+0.85;閱讀頻率,ITT為+0.27至+0.65,TOT為+0.42至+1.09)。此外,該研究得出ALFA方法可能對非裔美國人和西班牙裔男學生特別有益。然而,可能是由於研究本身檢驗功效不足導致研究結果缺乏統計學意義上的顯著性,同時COVID-19 疫情可能加劇了這一情況,因此尚不能就 ALFA 的正面效果得出有力的因果結論。儘管如此,ALFA實驗室的結果似乎甚具潛力,值得進一步探索其影響。

文獻來源:Davis, M. H., Davis, M. H., Schoeneberger, J., Rhoads, C., Mac Iver, D. J., Zhang, X., Mac Iver, M., & Spinney, S. (2024). Accelerating Literacy for Adolescents (ALFA): Evaluating ALFA Lab Using a Regression Discontinuity Study. Journal of Research on Educational Effectiveness, 1–27. https://doi.org/10.1080/19345747.2024.2338129Read the rest

Categories
社交及情意成果 教育行政及領導 中學教育

回顧初中生和高中生的SEL課程:綜合指南

隨著政策制定者尋求解決學生日益嚴重的心理健康危機,社會情感學習(SEL)持續獲得關注和資助。哈佛大學 GSE的EASEL實驗室和華萊士基金會(Wallace Foundation)回顧了18個初中和高中 SEL課程,旨在為實踐者選擇和實施 SEL課程提供指導。這份綜合指南涵蓋了SEL計劃的典範實務(在設計和實施中)、與校外時間計劃相的可能結合,以及整合公平和創傷知情反應。此外,該資源根據包含的技能、策略和組成部分比較了這些計劃,並提供詳細的計劃配概況。

在所回顧的計劃中,有14項在隨機對照試驗(RCTs)中顯示出正面影響,而其他4個是只有第IV級證據的新計劃。作者指出,針對初中和高中學生的SEL計劃的證據落後於小學生。此外,該回顧不包括PBIS或恢復性實踐等計劃,這些計劃被視為支援系統,而不是僅僅關注SEL。

文獻來源(開放取用):Jones, S. M., Brush, K. E., Wettje, S., Ramirez, T., Poddar, A., Kannarr, A., Barnes, S. P., Hooper, A., Brion-Meisels, G., & Chng, E. (2022). Navigating SEL from the inside out: Looking inside & across leading SEL programs: A practical resource for schools and OST providers. Ecological Approaches to Social and Emotional Learning Laboratory, Harvard Graduate School of Education. https://wallacefoundation.org/sites/default/files/2023-09/navigating-social-and-emotional-learning-from-the-inside-out-middle-high-school.pdfRead the rest