科学杂志封面文章:ChatGPT助力缩小写作能力差距

发表时间: 2023-07-14 16:44

自 2022 年 11 月发布以来,许多人都在使用 ChatGPT 来帮助他们完成工作,各行各业的人都在使用,从撰写营销材料,到起草电子邮件,再到生成报告。


现在,我们终于知道了它在工作场所会造成何种影响。MIT 的两名经济学研究生今天发表在 Science 杂志上的一项封面论文表明,它可以帮助缩小员工之间写作能力的差距。


图 | 论文封面(来源:Science)


论文题目为《关于生成式人工智能的生产力效应的实验证据》(Experimental evidence on the productivity effects of generative artificial intelligence),夏克德·诺伊(Shakked Noy)和惠特尼·张(Whitney Zhang)是共同作者[1]。


图 | 相关论文(来源:Science)


他们发现,它可以极大地提升缺乏写作技能的或写作经验不足的员工的能力,使其能够完成与写作水平更高的同事质量相当的工作。


研究人员招募了 453 名营销人员、数据分析师和受过大学教育的专业人士,让他们每个人完成日常工作中常见的两种任务,比如撰写新闻稿、制作简短报告或分析计划。一半的人可以选择使用 ChatGPT 来帮助他们完成两项任务中的第二项。


然后,一组其他专业人员对结果进行了质量检查,以 1 到 7 的等级对写作进行评分,其中 7 分为最高分。每份工作都由从事相同职业的三个人进行评估,他们是通过研究平台 Prolific 聘用的。


选择使用 ChatGPT 的人完成任务所需的时间减少了 40%,并且完成质量比不使用它的参与者高出 18%。写作水平已经很高的人能够减少他们在工作上花费的时间,而那些被认为是水平较弱的人一旦获得 ChatGPT 聊天机器人的帮助,就会产生质量更高的作品。


“ChatGPT 非常擅长制作这种书面内容,因此使用它来自动化一部分写作过程似乎可以节省大量时间,”该研究的第一作者诺伊说。


“有一点很清楚,这对白领工作非常有用——很多人都会使用它,这将对白领工作的形式和结构产生相当大的影响,”他补充道。


然而,ChatGPT 和其他生成式人工智能模型的输出并不可靠。ChatGPT 非常擅长将虚假信息包装成看似真实的东西,这意味着尽管员工可以利用它来帮助他们更快地完成更多工作,但他们也冒着犯错误的风险。


根据职务工作性质,就算是不起眼的错误也可能会产生严重影响。美国律师史蒂文·施瓦茨(Steven Schwartz)上个月被法官罚款 5,000 美元,原因是他使用 ChatGPT 制作了一份包含虚构的司法意见和法条引用的法律摘要。


“技术进步是司空见惯的,使用可靠的人工智能工具寻求帮助本身并没有什么不妥,”法官凯文·卡斯特尔(Kevin Castel)写道,“但现有规则要求律师扮演好‘守门员’的角色,以确保其提交文件的准确性。


卡内基梅隆大学研究员工使用大型语言模型的研究员陆·荒川(Riku Arakawa)表示,这项研究暗示了人工智能可以通过扮演虚拟助手的角色在工作场合提供帮助。他没有参与这项研究。


“我认为这是一个非常有趣的结果,展示了人类与人工智能在多种任务中是如何良好合作的。当人类利用人工智能来完善他们的输出时,他们可以产生更好的内容,”他补充道。


参考资料:

1.Noy S, Zhang W. Experimental evidence on the productivity effects of generative artificial intelligence[J]. Available at SSRN 4375283, 2023.


支持:Ren