Categories
語言發展 高等教育

GenAI 聊天機器人會增強EFL學生的自主學習和閱讀投入度嗎?

Pan及其同事的一項準實驗探討了生成式AI聊天機器人Reade 是否可以增強英語作為外語(EFL)學生在自主學習(SRL)閱讀策略和閱讀投入度。該研對象為中國東部一所大學的61名英語系大一學生(超過80%為女性,平均年齡 = 18.5歲)。兩個班級被隨機分配到實驗組(31人)或對照組(30人)。

通過使用研究團隊開發的ReadMate平台(由ChatGPT 3.5Turbo驅動),學生可使用Reade兩大核心功能:(1)根據學生英語水平與喜好推薦閱讀材料,以及(2)通過「計劃–執行–反思」方法支援自主閱讀策略。在「執行」階段,實驗組學生可以使用ReadMate中的全部功能,包括GenAI支援的互動SRL以獲取更多SRL策略指導,而對照組使用不包括這項功能的ReadMate。為期12週的研究中,參與者需通過ReadMate完成作為課程作業的閱讀任務。在干預前和干預後三週收集了關於自主閱讀策略運用和閱讀投入度的自我報告問卷。

在控制基線分數後,結果顯示實驗組在後測中顯著優於對照組,於後設認知、認知、動機和行為維度的SRL策略使用上。平台記錄顯示,實驗組更頻繁地使用計劃策略和自我檢查清單的功能。此外,實驗組在認知、行為和情感維度的閱讀投入度更高,在平台上投入閱讀任務的時間和努力也更多。

儘管該研究強調了像Reade這樣的GenAI聊天機器人在支援 SRL和閱讀投入方面的潛力,但其依賴小樣本和自我報告數據的局限性表明需要更嚴謹的研究來探索AI在提升EFL學生閱讀成果方面的作用。

 

文獻來源:Pan, M., Lai, C., & Guo, K. (2025). Effects of GenAI-empowered interactive support on university EFL students’ self-regulated strategy use and engagement in reading. The Internet and Higher Education, 65, 100991. https://doi.org/10.1016/j.iheduc.2024.100991Read the rest

Categories
高等教育 教育行政及領導

比較人工製作和AI生成的教學錄影的學習效果

在生成式人工智能(AI)時代,生成式AI製作的教學視像錄影能否提供與人工製作錄影相當的學習成果?最近的一項研究通過比較管理課程中四個生成式AI製作的錄影與四個人工製作的錄影在相同主題上的有效性來探討這個問題。這項在線干預涉及 447名美國外行人,其中大多數人已經完成了高等教育。該研究包括兩個實驗條件:第一個,213 名參與者以人類-AI-人類- AI的順序觀看了四個教學視頻;在第二個條件中,234 名參與者以 AI-人類-AI-人類的順序觀看了它們。每段錄影結束後,參與者完成了一項評估他們學習體驗的問卷調查,然後進行多項選擇題考試以評估學習成果。

結果表明,人工製作錄影在學習體驗方面提供了很小但具有統計學意義的優勢,表明參與者仍然更喜歡錄影中的真人教師。在學習成果方面,兩種情況下的參與者都獲得相似程度的知識。作者指出,隨著生成式 AI 製作的教學錄影因其易於製作而日益普及,研究人員和教育工作者應該批判性地探索使用生成式 AI 製作內容來改善學習體驗的方法,同時注意製作和使用中的潛在限制和倫理考慮。

 

文獻來源(開放取用):Netland, T., von Dzengelevski, O., Tesch, K., & Kwasnitschka, D. (2025). Comparing human-made and AI-generated teaching videos: An experimental study on learning effects. Computers & Education, 224, 105164. https://doi.org/10.1016/j.compedu.2024.105164Read the rest

Categories
社交及情意成果 高等教育 教育行政及領導

哪些大學生較可能依賴AI呢?

生成式AI工具正逐漸在全球的課堂和學生筆記型電腦中普及。政策制定者、教育工作者和其他具影響力者必須了解不健康依賴AI的負面影響。研究人員使用「人–情感–認知–執行的互動」(I-PACE)模型研究了心理因素與科技使用問題的關係,研究人員調查了首爾300名大學生的對AI依賴性。雖然他們假設自我效能感(學生對自己能力的信念)與依賴AI之間存在關聯,但他們沒有發現直接相關。相反,學術壓力卻為依賴AI的主要驅動因素。換句話說,學生的學業壓力越大,他們依賴AI工具的可能性便越高。

值得注意的是,84% 的受訪學生使用 ChatGPT 來獲取學術幫助,儘管並非所有學生都表現出依賴的跡象。研究人員還尋找依賴AI的負面後果。學生們報告說,對人工智能的依賴導致懶惰增加、錯誤資訊的傳播、創造力下降以及批判性和獨立思考能力的降低。研究人員還檢視了學業期望的角色:認為人工智能有助於他們學業成績的學生更有可能變得依賴AI。

人工智能工具在學校的出現是一個產生不同的觀點和政策建議的難題。與其主要聚焦於如何限制AI和教授AI素養,學校不如優先考慮壓力管理和低風險的實踐機會,以減少對AI的依賴。

 

文獻來源(開放用取):Zhang, S., Zhao, X., Zhou, T., & Kim, J. H. (2024). Do you have AI dependency? The roles of academic self-efficacy, academic stress, and performance expectations on problematic AI usage behavior. International Journal of Educational Technology in Higher Education, 21(1), 34. https://doi.org/10.1186/s41239-024-00467-0Read the rest

Categories
K-12 教育階段 數學及理科學習 有效教學法

AI也能成補習教師的指導?

有效的補習可以顯著提高學生的學習成果,但許多學生,尤其是在資源匱乏社區的學生,往往因資源有限和缺乏訓練有素的教育人員,無法獲得高質量的專家指導。斯坦福大學的研究人員對Tutor CoPilot (一項人工智能系統)進行了首次隨機對照試驗,該系統旨在為 K-12教師提供實時、專家般的指導,從而探索其在即時課堂上對提升教師輔導效率的影響。研究人員與FEV 教師和美國南部一個學區合作,進行了一項干預,涉及900名教師和1,800名來自Title I學校的學生,他們參與了一項以數學為重點的校內虛擬補習項目。

研究發現,使用Tutor CoPilot的補習教師,其學生在掌握數學課程主題方面的能力,比對照組高出4個百分點的可能性。這種影響在水平較低的教師所教授的學生中更加顯著,他們的掌握能力度提高了9個百分點。該系統還促進了應用專家教學策略,例如提示學生解釋他們的推理和提出引導性問題,而非直接提供答案,這有助於提升學生的理解能力。儘管存在一些挑戰,例如AI的建議偶爾與學生年級水平不一致,但教師仍然表示Tutor CoPilot 幫助他們更好地滿足了學生的需求。每位教師Tutor CoPilot 的年費用僅為20 美元,Tutor CoPilot 能在經驗豐富的教學人員稀缺的情況下,提升教學輔導質量,提供了一個可擴展及經濟實惠的方案。這項研究展示了像 Tutor CoPilot 這樣的人類人工智慧系統使所有學生都能獲得高質量學習的潛力。

 

文獻來源(開放取用):Wang, Rose E., Ribeiro, Ana T., Robinson, Carly D., Loeb, Susanna, & Demszky, Dorottya. (2024). Tutor copilot: A human-AI approach for scaling real-time expertise. (EdWorkingPaper: 24 -1056). Retrieved from Annenberg Institute at Brown University: https://doi.org/10.26300/81NH-8262Read the rest

Categories
語言發展 數學及理科學習 中學教育

ChatGPT能否取代人類批改學生的寫作?

自動寫作評估 (AWE)工具協助教育人員評估學生的寫作,但經常以準確性和清晰度作為代價,並且設置過程需要大量的精力和資源。相比之下,像 ChatGPT的生成式 AI 提供及時、有針對性和適應性的反饋,可以提高學生的寫作能力。最近的一項研究比較了ChatGPT 和人類評分者的反饋質量,以及對基於過程的寫作評估的潛在影響。

該研究涉及來自南加州兩個學區隨機抽樣的200 名 6-12 年級學生。在兩節50分鐘的課堂上,學生的任務是回答兩個寫作要求的其中一個。每項寫作都要求他們閱讀四個一手資料和二手資料,並使用證據、理由和所需的寫作技巧來建構一個分析歷史解釋的論證。研究招募並培訓了來自不同學科16 名經驗豐富的中學教育工作者,以提供形成性反饋。然後將這些反饋與 ChatGPT的反饋進行比較,後者被提示使用與教育工作者相同的情境。研究人員對反饋進行編碼、分析和比較。

研究發現顯示,訓練有素、受薪且時間相對充裕的人類評分員在五個關鍵領域的四個領域提供了更高品質的反饋:改進方向的清晰度、準確性、基本特徵的優先順序以及支援語氣的使用(第五個領域:基於標準的反饋)。然而,ChatGPT的寫作反饋在質量上與人類反饋非常接近,不需要額外培訓,而且考慮到整體質量和時間節省,ChatGPT 和人類反饋之間的質量差異不大。研究人員得出結論,生成式 AI 在特定情況下是一個有用的工具,尤其是對於形成性草稿或缺乏訓練有素的教育人員的情境下。

 

文獻來源(開放取用):Steiss, J., Tate, T., Graham, S., Cruz, J., Hebert, M., Wang, J., Moon, Y., Tseng, W., Warschauer, M., & Olson, C. B. (2024). Comparing the quality of human and ChatGPT feedback of students’ writing. Learning and Instruction, 91, 101894. https://doi.org/10.1016/j.learninstruc.2024.101894Read the rest

Categories
計劃評鑑 數學及理科學習 中學教育

生成式AI對學生成績的影響:一把雙刃劍

諸如OpenAI的GPT-4等生成式AI工具,被越來越多地整合到教育環境中,有望增強學習和效率。然而,AI對學習成果的長期影響仍待考查。賓夕法尼亞大學沃頓商學院(Wharton School)最近的一篇研究論文詳細介紹了一項大規模隨機對照試驗(RCT),該試驗旨在評估生成式 AI 如何影響學生學習,特別專注高中教育的數學課程。該研究涉及三個年級(9-10年級)的近1,000 名學生,評估了兩個以GPT-4為本的輔助工具:GPT Base和 GPT Tutor。GPT Base 提供了一個標準的 ChatGPT 介面,而 GPT Tutor 則結合了安全措施來支援學習,而無需提供直接答案。

結果顯示,雖然GPT-4顯著即時提升了學生解答難題的成績——GPT Base 提升了48%,GPT Tutor 提高了127%——但這些成效並沒有轉化為長期學習成果。當在考試期間,學生不許使用GPT-4時,使用過GPT Base的學生的表現比從未使過的學生差17%,這表明其對學習產生了不利影響。然而,GPT Tutor 卻減輕了這種負面影響,學習成績的差異在統計學上變得不顯著。

該研究強調了生成式 AI 提高短期效用的潛力,但也強調了過度依賴這些工具的風險,這可能會防礙學生解答難題技能的發展。在教育機構越來越傾向於使用AI驅動工具的背景下,研究結果強調了設計周全安措施的必要性,以確保學生能持續學習並保留關鍵技能。

 

文獻來源(開放取用):Bastani, H., Bastani, O., Sungu, A., Ge, H., Kabakcı, Ö., & Mariman, R. (2024). Generative AI can harm learning. The Wharton School Research Paper. https://www.ssrn.com/abstract=4895486Read the rest