一项由麻省理工学院经济学系的Shakked Noy和Whitney Zhang进行的实验表明,像ChatGPT这样的AI工具可以显著提高受过教育的专业人士的工作效率和质量,尤其是对那些技能较弱的人而言。
该研究涉及453名在营销、数据分析和人力资源等领域受过大学教育的专业人士,他们接受了有奖励的写作任务。
那些使用ChatGPT与GPT 3.5的参与者的工作效率显著提高 – 任务完成时间减少了40%,输出质量提高了18%。
被指派使用ChatGPT的参与者报告称对任务更有兴趣,并且在实验结束后的两周内继续使用该AI工具的可能性是不使用的人的两倍,在两个月后则是1.6倍。这表明像ChatGPT这样的AI工具可以成为各种领域的专业人士的宝贵助手。
ChatGPT在清晰和有说服力的写作方面表现出色
研究中给予参与者的任务,例如撰写新闻稿或简短的分析报告,旨在类似于他们在日常工作中可能遇到的实际任务。这些任务充分发挥了ChatGPT的优势,其中包括清晰和有说服力的写作。
参与者中一半的人被随机分配到一个组,允许他们在第二项任务中使用AI工具。另一半组成了对照组,并被指示使用不同的非AI工具,但并未鼓励他们在任务中使用。
然后,这些专业人士的工作由同一领域的其他专业人士进行评估。他们被要求尽可能接近他们在日常工作环境中遇到的情况来评估工作的质量。他们将工作质量评分在1到7的等级上。
研究人员收集了有关参与者完成任务所花费的时间以及他们工作质量的数据和信息。他们还监控了参与者在任务中的工作进展,以测量活动水平,并验证他们是否使用了AI工具。
此外,他们还记录了一些背景变量,例如参与者的退出率和就业状态,并追踪是否他们是人力资源专业人士。这个想法是看看这些外部因素是否会影响结果,但研究人员发现这些变量对结果没有显著影响。总体而言,ChatGPT在提高写作质量和生产率方面表现出色,并在不同类型的专业人士中得到了证实。
然而,这项研究也发现了一些限制 – AI工具在需要背景知识或精确事实准确性的任务,或者对于更模糊的提示,需要很多主动性的任务中表现较差。
尽管存在这些限制,许多参与者报告称ChatGPT在他们的实际工作中有所帮助,这表明即使是更新版本的工具也可能越来越有用。例如,ChatGPT可以被教导使用上下文因素来进行回答,这可能使它在越来越多的职业中变得有用。
虽然像ChatGPT这样的AI工具可能不会使人类专家变得过时,但这项研究的证据表明它们可以补充人类技能,提高生产率的同时减少工人之间的不平等。
然而,有一个矛盾的发现是,使用ChatGPT的参与者大多数提交了轻度编辑或未经编辑的AI输出,这表明在这个实验中,技术取代了而不是增强了人类的努力。
不管怎样,Noy和Zhang的研究结果只是对AI工具如ChatGPT的即时生产力效应的一瞥;它们并未涉及对劳动力市场和组织结构潜在长期影响的讨论。GPT能够改进的程度是其影响的一个关键问题。
现实世界比研究设置更加复杂
研究人员指出了许多限制。该研究主要集中在需要泛化写作的特定任务上 – 清晰、有说服力,并且不太依赖特定语境。
尽管ChatGPT在这类任务上表现出色,但大多数真实世界的专业项目需要特定语境的知识和高度的事实准确性,这正是当前AI写作工具如ChatGPT可能不足的领域,正如上文所述。
许多专业人员面临的任务可能涉及更加模糊的目标和指示,人类的创造力、适应性和决策能力可能至关重要。与人类工作者不同,AI工具无法完全理解任务的微妙差异和复杂性,也无法在指示不明确时自行适应。
另一个重要的限制是实验依赖直接基于绩效的激励,以输出质量为基础进行奖金支付。除了基本报酬(10美元),参与者可以根据他们的工作质量获得最高14美元的额外奖金,以鼓励高绩效。研究人员写道,这些短期奖金可能无法准确反映真实世界的激励方式,通常包括长期晋升前景、职业发展目标以及保持个人风格或品牌的重要性。这些长期激励实际上可能降低AI写作工具如ChatGPT的实用性。
最明显的遗漏是,研究没有考虑事实核查ChatGPT输出所需的时间和精力。
虽然AI工具可以加快写作过程,甚至提高质量,但所需的事实核查可能会抵消这些节省时间的好处,特别是对于需要准确事实的任务。未来AI技术的进步需要在这方面有显著的提高,才能更可靠地发挥作用。
AI对就业市场的潜在影响
研究人员推测,服务需求的增加可能是一个重要因素,因为由于AI提高的生产力,服务变得更加廉价。
例如,如果由于AI效率的提高,编程服务的价格大幅下降,可能会导致需求激增,从而在该领域增加就业。然而,对于广告或传播等专业而言,情况可能并非如此。需求可能保持平稳,而就业可能减少,因为需要更少的工人。
AI的引入还可能影响劳动力的组成。在广告等专业中,由于需要创造力和判断力,组织内的角色可能会发生变化。问题在于,例如,初级角色是否可以专门用于调整AI输出,而高级角色则提供概念输入。这可能会显着改变行业的运作方式和就业方式。
AI在编程等领域的角色对薪资可能会产生不同的影响。如果AI工具需要专业程序员来审查其输出并改进提示,可能会因对专业人员的需求增加而导致薪资上涨。然而,如果只需要基本的编程技能来使用AI,这可能会导致熟练程序员的供应过剩,尽管生产力增加,薪资可能下降。
广泛采用ChatGPT等AI技术也可能影响传统的晋升和招聘方式。例如,AI工具可以通过记录和观察员工来改变绩效评估的方式。这个过程可能影响薪资标准和招聘方式,同时改变组织文化,关于付出和绩效的态度也可能发生改变。