AI 反馈能帮助提高写作吗?研究给了哪些依据
现有研究为把 AI 反馈用于写作练习提供了支持。对学习者更有帮助的追问是:研究里的人怎么使用反馈,最后检查了什么变化?
这会影响我们怎样安排练习,也会影响你怎样判断一次使用是否值得。
自动写作反馈:看整体,也看条件
Fleckenstein、Liebenow 与 Meyer 在 2023 年发表的元分析报告,自动写作反馈对写作表现的总体效应量为 g = 0.55,但研究结果之间存在显著异质性。查看论文
g 是用于综合不同研究的标准化效应量,不能理解为成绩提高了 55%。这项研究讨论的是自动写作评价工具,不能把所有结果直接套用到今天任意一个聊天模型上。
对我们的启发是,把 AI 反馈放进有明确任务的写作练习中,并继续检查修改发生在哪里。工具提供了帮助的可能,具体练法仍然重要。
大语言模型反馈:一次英语议论文研究
Meyer 等人 2024 年的研究比较了两种修改条件:一组学生获得大语言模型生成的反馈,另一组在没有反馈的情况下修改原文。论文报告,反馈组的修改表现更好,效应量为 d = 0.19。查看研究机构说明
这个对照很关键:它比较的是有反馈与无反馈。修改质量由自动作文评分评估,所以不能据此得出“AI 优于专业教师”或“参加雅思考试就会涨分”的结论。
但它支持一个具体用途:让已经写出文章的人获得反馈,并继续修改自己的文字。这与我们希望连接的环节很接近。
为什么网站要把反馈和 Quiz 放在一起?
因为一条反馈之后,还需要一个能执行的动作。
如果你读到“解释不清楚”,下一步可以缩成写一个短答;如果你读到段落主旨与例子不一致,下一步可以重新组织段落开头。网站用针对性小题承接这一步,让你先尝试,再获得对自己答案的反馈。
把 AI 反馈、拆解和 Quiz 连起来,是我们的教学设计。 上述研究支持其中一些组成部分,并没有直接测试 IELTS Writing Studio 的完整流程。
你可以用自己的作品检查这套练法是否帮到了你:找到具体问题了吗?完成一次修改了吗?能说明为什么这样改吗?随后遇到不同内容,能否继续使用这个做法?
使用 AI 反馈时,先核对什么?
先核对反馈是否准确引用了你的意思,再看它指出的问题是否真的影响当前段落。建议必须能接回题目和原文,否则很难判断是否值得采用。
接着保留第一版,再自己写第二版。两版放在一起,观察你想表达的关系是否更明确,而不只是句子是否变长。
最后,再安排一次没有现成答案的新任务。如果独立写作时仍然出现相同的问题,就继续练相应动作;如果已经能处理,就把注意力转向下一处值得改进的地方。
从什么地方开始最合适?
从你已经写过的一篇文章开始。这样,反馈有上下文,练习有来源,修改也有可以对照的起点。