问小白 wenxiaobai
资讯
历史
科技
环境与自然
成长
游戏
财经
文学与艺术
美食
健康
家居
文化
情感
汽车
三农
军事
旅行
运动
教育
生活
星座命理

ChatGPT助力EFL学生写作:实证研究揭示显著成效

创作时间:
作者:
@小白创作中心

ChatGPT助力EFL学生写作:实证研究揭示显著成效

引用
1
来源
1.
https://www.hanspub.org/journal/paperinformation?paperid=108311

随着人工智能技术的快速发展,ChatGPT等大语言模型在教育领域的应用日益广泛。特别是在英语作为外语(EFL)教学中,ChatGPT能否有效提升学生的写作能力?本文通过实证研究,探讨了ChatGPT在EFL学生写作教学中的应用效果。

研究背景与意义

在当今全球化时代,英语作为国际交流的重要工具,其写作能力的培养显得尤为重要。然而,EFL学生在写作过程中常常面临诸多挑战,如语法错误、词汇贫乏和文体不当等。传统的英语教学方式往往难以提供及时、个性化的反馈,这限制了学生写作能力的提升。

近年来,生成式人工智能(GAI)技术的迅猛发展为解决这一难题提供了新的可能。ChatGPT等大语言模型以其强大的自然语言处理能力,为学生提供了实时的语言建议、句法纠错以及创意激发,有望在写作过程中充实他们的语言素材库并提高他们的表达能力。

文献综述

英语写作的现实困境

写作对EFL学生来说是一项困难的技能,因为他们必须把自己的思想转化为外语。在传统的英语写作课堂中,教师通常简单地传授写作技巧,并最终通过教师的书面反馈来评估学生的写作能力。然而,这种教学方式存在着缺乏个性化教学和实时反馈的弊端。

AI技术的迭代

人工智能是一种可以使计算机系统、软件甚至机器人像类人一样进行工作和“思考”的技术。随着信息技术和计算机科学的发展,自然语言处理领域得到了进一步拓展,大语言模型(LLM)作为一种基于深度学习技术的先进NLP模型,其核心特征在于其巨大的神经网络结构,该结构具有数十亿甚至数百亿的参数,使其能够自动地从大规模文本数据中学习语言的模式和规律。

基于LLM的GAI在教育中的应用

基于LLM的GAI其本身所具备的卓越的“泛化性”和出色的“知识迁移性”,如果配合有效的教学设计,将会有望成为高效的教育教学工具。在学习层面,GAI可以为学生提供高度个性化的学习路径和教育资源,根据学生的学科兴趣、学习进度和弱点来定制教育内容。在教学层面,GAI可以帮助教师个性化教育,根据每位学生的学习需求和水平制定定制化的教育计划。

研究目的与问题

本研究尝试将以ChatGPT为代表的GAI工具投入到EFL学生的英语写作中,以探究ChatGPT对EFL学生的英文写作内容和质量的影响。具体内容包括:1) ChatGPT在提升学生写作质量方面的效果如何?2) 学生在使用ChatGPT时的体验和反应如何?3) ChatGPT在EFL学生写作中的应用是否存在局限性?如何进一步优化其在写作教育中的应用效果?

研究设计

研究对象

本研究是在中国某大学的英语专业课上进行的,以54名大一英语专业的本科生为研究样本,其中实验组25名和控制组为29名。所有的学生以随机组合的方式分为5个5~6人的学习小组。学习活动一共进行了5周,第一周为预实验,其余四周进行实验活动。期间,由一名具有十年以上丰富教学经验的英语教师进行选题,并制定相应的学习目标,实验组和控制组均由该教师发布学习任务。

实验流程

在开始教学活动之前,教师向学生们明确本节课的学习目标和学习活动。教师进行示范,向同学们讲述具体的操作。之后介绍本节课的相关主题,教师让学生们自由讨论本节课的主题,进行头脑风暴,形成初步的思路和写作方向,并将自己的英语作文写在Word文档上。然后,学生与ChatGPT交互,向其输入指令(在实验活动正式开始前,教师就已经讲授过指令的输入技巧),将自己创作的英语作文输入给ChatGPT,如图1所示。ChatGPT接受之后对作文内容进行反馈,学生收到反馈后对自己的论文进行修改。之后,学生再次输入修改后的作文,ChatGPT在此基础上会提供更高一层的修改意见。如图2所示,ChatGPT提供的反馈内容具有个性化的特点。

在第一周的预实验中,为了确保每位学生在实验开始前都有相同的英语写作技能和知识,我们对他们进行了英文写作预测试和写作动机、自我效能感和写作焦虑问卷。在第二周开始正式的实验活动之前,老师花了20分钟的时间向学生们介绍本次活动的学习目标和工具平台。在接下来的四周时间里,学生们参加了四个不同写作主题的学习活动,包括有:“Aging of Population in China”、“Exploring Cultural Diversity in a Globalized World”、“The Pros and Cons of Online Education”、“Climate Change: Causes, Effects, and Solutions”。实验组的学生在ChatGPT的辅助下进行英文写作,对照组的学生使用传统写作方法。学习活动结束后,两组学生均进行英文写作后测试与后问卷调查。


图1.与ChatGPT进行交互

实验工具

本研究所采用的学习平台为ChatGPT,测量工具包括英文写作打分表和学习动机问卷。

英文写作打分表

本研究的写作测试是由具有丰富英语教学经验的两位英语教师选择和修改的。该测试旨在考察学生对章节结构、词汇使用、拼写和语法以及英语写作内容的掌握程度。如表1所示,参考Fu等人[29]的研究,本研究中采用的英语写作表现的规则包括五个维度:内容的组织、语言的准确性、原创性、流畅性和详细阐述。内容的组织是指写作的一致性和逻辑性;语言的准确性表明语法和拼写的正确用法;创造力是指在内容或表达上是否有创新;流畅性是指产生更多的想法;精化是指发展带有大量细节的想法。学生的写作工作由两位经验丰富的教师进行评估,他们长期指导英语写作。前测和后测的总得分为100分,每个维度的分值为各20分。两名专业英语教师按标题评分,内部一致性为0.83。

学习动机问卷

在Wang和Chen开发的学习动机问卷[30]中,得出了6个问题(3个内在动机,3个外在动机)。比如,“我喜欢真正挑战我的课程内容,所以我可以学习新的东西”,这是内在动机的一个例子。“现在对我来说最令人满意的是在这门课上取得一个好成绩”是一个关于外部动机的项目。该调查采用了5分李克特量表,Cronbach’sα系数值为0.81。

图2.基于GAI的写作反馈流程

表1.写作表现打分表

维度
5分
10分
15分
20分
内容的组织
写作根本不连贯,很难理解内容
写作不连贯或不一致,经常只列出信息
写作合乎逻辑,内容易懂
写作连贯且合乎逻辑
语言准确性
有超过15个语法错误或拼写错误
有10个或更多的语法错误或拼写错误
有8~9个语法错误或拼写错误
语法错误或拼写错误少于8个
创意
写作的主题(或原因)很正常
写作的题目(或理由)有点新颖
写作的主题(或理由)新颖
写作的题目(或理由)很新颖
流利程度
没有或很少产生想法
产生一些想法
产生了不少想法
产生各种各样的想法
精化
细节不完整或未开发的模糊想法
用一点细节简要阐述想法
通过一些相关细节清晰地提出想法
用丰富的细节清晰、充分地阐述想法

研究结果

本研究采用定量统计分析的方法,从两个方面探析ChatGPT对学习效果的影响:① 学生在进行ChatGPT辅助英文写作前后写作成绩的变化;② 学生在进行ChatGPT辅助英文写作前后学习动机的变化。经过为期四周的准实验,我们发现实验组的学生在英语写作成绩和学习动机方面均发生了一定程度的变化。

英语写作表现

为了评估ChatGPT对学生英语写作成绩的影响,本研究采用了one-way ANCOVA方法,如表2所示。对于英文写作表现,Levene方差检验质量表明(F = 0.093, p = 0.761 > 0.05)各组方差同质性的假设是满足的。因此,可以进行ANCOVA分析。如表2所示,在排除预问卷的影响后,实验组在英文写作方面的表现显著优于对照组(F = 5.378, p = 0.025 < 0.05)。总分的影响大小为大效应(η2= 0.097)。实验组学生英语写作成绩的修正均值和标准误差分别为81.313和1.109,对照组学生英语写作成绩的修正均值和标准误差分别为77.330和1.228。研究结果表明,ChatGPT支持英语写作的学生,其英语写作成绩显著高于传统教学形式下的学生。

表2.两组英语写作表现的ANCOVA分析结果

组别
N
Mean
SD
Adjusted mean
Std. error
F
η2
实验组
25
78.69
7.579
81.313
1.109
5.378*
0.097
控制组
29
80.50
10.738
77.330
1.228

注:*表示p < 0.05。

学习动机

对于学习动机,如表3所示。Levene方差检验质量表明(F = 0.239, p = 0.627 > 0.05)各组方差同质性的假设是满足的。因此,可以进行ANCOVA分析。如表3所示,在排除预问卷的影响后,实验组在学习动机方面显著优于对照组(F = 4.179, p = 0.046 < 0.05)。总分的影响大小为大效应(η2= 0.077)。实验组学生学习动机的修正均值和标准误差分别为23.955和0.740,对照组学生学习动力的修正均值为21.928和0.673。研究结果表明,ChatGPT支持英语写作的学生,其学习动机显著高于传统教学形式下的学生。

表3.两组学习动机的ANCOVA分析结果

组别
N
Mean
SD
Adjusted mean
Std. error
F
η2
实验组
25
23.79
2.413
23.955
0.740
4.179*
0.077
控制组
29
22.10
4.988
21.928
0.673

注:*表示p < 0.05。

结语

本研究发现,采用ChatGPT进行英语写作的学生相较于传统教学模式下进行英语写作的学生能呈现出更好的英语写作表现。另外,由ChatGPT支持的写作学习活动更能激发学生的学习动机。采用ChatGPT进行英语写作的学生有更好的写作表现。ChatGPT作为一个可随时访问的在线资源,鼓励学生主动寻求解决写作问题的方法,培养了他们的自主学习意愿。学生在与ChatGPT交互的过程中可以主动识别错误,从中发现并自行修正问题,锻炼了学生的独立问题解决能力。采用ChatGPT进行英语写作的学生有更好的写作表现和更强的学习动机。因此,本研究建议在英语写作教学中充分整合GAI技术,以帮助学生提高英语写作成绩、提升解决问题能力,从而获得高质量的学习表现。

需要指出的是,本研究还存在一些不足,如本实验仅针对写作质量进行了探究,未来的研究可以探索ChatGPT等GAI工具在改进特定的写作类型(例如:描述型、辩论型、叙事型等方面)的有效性。此外,本实验的实验周期较短,写作能力的提升需要一定时间的培养,所以本研究所得出的结论在未来有待通过较长的学习周期来验证。其次,本次实验的研究对象是中国某大学的英语专业学生,未来的研究可以把研究对象扩展到不同地域、不同年级、不同专业的学生中去,以便提高实验结果的有效性和可推广性。

© 2023 北京元石科技有限公司 ◎ 京公网安备 11010802042949号