半分写作
写作与修改方法 · 雾港练法

AI 反馈能帮助提高写作吗?研究给了哪些依据

现有研究为把 AI 反馈用于写作练习提供了支持。对学习者更有帮助的追问是:研究里的人怎么使用反馈,最后检查了什么变化?

这会影响我们怎样安排练习,也会影响你怎样判断一次使用是否值得。

自动写作反馈:看整体,也看条件

Fleckenstein、Liebenow 与 Meyer 在 2023 年发表的元分析报告,自动写作反馈对写作表现的总体效应量为 g = 0.55,同时研究结果之间存在显著异质性。查看论文

g 是用于综合不同研究的标准化效应量,读它时把它当作效果大小,和百分比分开理解。这项研究讨论的是自动写作评价工具;用到今天的大语言模型上时,要看具体的使用方式。

对我们的启发是,把 AI 反馈放进有明确任务的写作练习中,并继续检查修改发生在哪里。工具提供了帮助的可能,具体练法同样重要。

大语言模型反馈:一次英语议论文研究

Meyer 等人 2024 年的研究比较了两种修改条件:一组学生获得大语言模型生成的反馈,另一组在零反馈条件下修改原文。论文报告,反馈组的修改表现更好,效应量为 d = 0.19。查看研究机构说明

这个对照很关键:它比较的是有反馈与零反馈两种条件。修改质量由自动作文评分评估,所以这项研究回答的是“反馈能否帮助当次修改”,和教师批改的比较、雅思考试分数属于另外的问题。

它支持一个具体用途:让已经写出文章的人获得反馈,并继续修改自己的文字。这正是雾港希望连接的环节。

为什么雾港让读者回信,再让你改一稿?

因为一条反馈之后,还需要一个能执行的动作。

雾港的读者回信会引用你的原句,说出读者读到的意思。按回信决定下一步:

  • 读者读偏了:补一句解释
  • 读到的重点和你的预测不同:重写段落开头

改完再寄一次,看理解是否更接近你想表达的。

把 AI 读者、分步提示和关卡连起来,是我们的教学设计。 上述研究支持其中一些组成部分;雾港的完整流程,要靠你自己的作品来检验。

这套练法是否帮到了你,问自己四个问题:

  • 找到具体要改的句子了吗
  • 完成一次修改了吗
  • 能说明为什么这样改吗
  • 换了材料,还能用这个做法吗

读 AI 反馈时,先核对什么?

先核对反馈是否准确引用了你的原句、是否理解了你的意思,再看它指出的问题是否真的影响当前段落。能接回题目和原文的建议,才方便判断是否值得采用。

接着保留第一稿,自己写第二稿。两稿放在一起,观察你想表达的关系是否更明确,重点看意思,句子长短其次。

最后,再安排一次全新的任务,独立完成。如果相同的问题再次出现,就继续练相应动作;如果已经能处理,就把注意力转向下一处值得改进的地方。

从什么地方开始最合适?

从你自己写下的文字开始:反馈有上下文,修改也有对照的起点。在雾港里,这个起点就是每一关你寄出的第一稿。

回到雾港的写作练法 · 继续读:练过之后如何检查迁移