研究发现ChatGPT提高了员工在某些写作任务中的工作效率

2023年07月17日 由 Susan 发表 761846 0
麻省理工学院(MIT)的研究人员最新的一项研究向人们揭示了生成式人工智能技术对工作的影响,研究发现它可以提高承担任务如写求职信、处理敏感电子邮件和成本效益分析的员工的工作效率。

这项研究中的任务并不完全是真实工作的复制品:它们不需要精确的事实准确性,也不需要了解公司的目标或客户的喜好等背景信息。然而,研究的一些参与者表示,这些任务与他们真实工作中写过的东西相似,而且效益显著。参与者使用辅助聊天机器人ChatGPT后,完成任务的时间减少了40%,独立评估者衡量的输出质量提高了18%。

这项研究今天发表在开放获取期刊Science上,研究人员希望这项研究能帮助人们理解像ChatGPT这样的人工智能工具对劳动力的影响。

麻省理工学院经济学系的博士生Shakked Noy与同级的Whitney Zhang共同撰写了该论文,并表示:“我们可以肯定的是,生成式人工智能将对白领工作产生重大影响。我认为我们的研究表明,这种技术在白领工作中有重要的应用。这是一种有用的技术。但是现在还为时过早,我们无法确定它是好还是坏,以及它将如何引起社会的调整。”

为聊天机器人模拟工作


几个世纪以来,人们一直担心新的技术进步会导致大规模的自动化和失业。但是新技术也会创造新的工作岗位,并且当它们提高工人的生产力时,它们对经济可能会产生净正面影响。

Noy表示:“在考虑新技术发展时,经济学家们非常关注生产力。经济学的经典观点是,技术进步最重要的作用是提高生产力,以便更高效地生产经济产出。”

为了研究生成式人工智能对工人生产力的影响,研究人员向453名接受过大学教育的市场营销人员、写作顾问、数据分析师、人力资源专业人员和经理人员提供了与其职业相关的两个写作任务。这些任务需要花费20至30分钟,包括为资助申请撰写求职信、关于组织重组的电子邮件以及基于给定的客户数据,制定发送推送通知给哪些客户的分析计划。同样从事与每位参与者相同职业的经验丰富的专业人士评估了每个提交的作品,就像他们在工作场所遇到它时一样。评估者不知道哪些提交是利用ChatGPT的帮助创建的。

在第二个任务中,有一半的参与者可以使用由OpenAI开发的聊天机器人ChatGPT-3.5。相比对照组,这些用户完成任务的时间快了11分钟,平均质量评估提升了18%。

数据还显示,工人之间的绩效差距减少了,这意味着在第一个任务中成绩较低的工人在使用ChatGPT完成第二个任务时获益更多。

研究人员表示,这些任务在广泛意义上代表了这些专业人士在真实工作中遇到的任务,但他们指出了一些限制。由于正在使用匿名参与者,研究人员不能要求他们具备关于特定公司或客户的背景知识。他们还必须为每项任务提供明确的说明,而真实世界中的任务可能更加开放性。此外,研究人员认为雇用事实核查人员评估输出的准确性是不可行的。准确性是当今生成式人工智能技术面临的一个重要问题。

研究人员表示,这些限制可能会降低ChatGPT在现实世界中提高生产力的潜力。尽管如此,他们相信研究结果显示了这项技术的潜力。这一观点也得到了研究中另一个发现的支持:在实验期后的两周内,接触到ChatGPT的工人在真实工作中使用它的可能性增加了一倍。

Noy表示:“该实验证明它确实带来了显著的速度优势,即使在真实世界中这些速度优势较小,因为您需要花时间核实事实并编写提示。”

宏观视角


这项研究对像ChatGPT这样的工具对特定写作任务的影响进行了近距离观察。但是将这种影响推广出来以理解生成式人工智能对经济的影响更加困难。这正是研究人员希望进一步研究的内容。

Zhang表示:“还有许多其他因素将影响工资、就业和部门之间的转变,这需要的证据不在我们的文章中。但是在我们的论文中,节省的时间和质量提高幅度非常大,所以它似乎在某些工作领域中具有革命性。”

两位研究人员都认为,即使可以接受ChatGPT将提高许多工人的工作效率这一点,社会仍有很多工作要做,以确定如何应对生成式人工智能的普及。

Zhang表示:“根据未来的研究结果,需要不同的政策来调整这些技术。如果我们认为这将提高低薪工人的工资,那就和提高已经高收入者的工资会增加工资差距的情况截然不同。我认为有许多下游经济和政治效应是重要的,需要把握住。”

该研究得到了Emergent Ventures grant、Mercatus Center、乔治梅森大学、George和Obie Shultz Fund grant、MIT经济学系以及国家科学基金会研究生研究奖学金的支持。

 

来源:https://news.mit.edu/2023/study-finds-chatgpt-boosts-worker-productivity-writing-0714
欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
写评论取消
回复取消