教育资源平台 EduRef 进行的一项评测显示，使用 GPT-3 生成的论文基本达到了及格线。虽然其表现尚未达到优秀水平，但在一定程度上展现了这项技术的潜力。
2020年5月，OpenAI推出了具有1750亿参数的GPT-3，这是目前规模最大的人工智能模型。它不仅能够进行答题、翻译和写作，还具备一定的数学计算能力。自发布以来，GPT-3在多个领域展示了其应用潜力，例如搜索引擎、对话交互、代码生成、绘图以及图像补全等方面。
然而，GPT-3的应用前景仍在不断拓展中……
近日，EduRef邀请了一组教授开展了一项特别测试。他们为一组应届毕业生和本科生提供了写作提示，同时让GPT-3也根据相同提示进行写作。之后，教授们对所有提交的作品进行了匿名评分，并追踪作者的表现情况。结果显示，GPT-3的得分并不总是优于人类作者，表现仍存在差距。
GPT-3在多数写作测试中表现尚可
俗话说：“C等级就能毕业”。GPT-3的写作水平大致相当于一名自由职业写作者，尚未达到完美状态。
在关于COVID-19疫苗研究方法的论文中，人类作者的得分多在B或D之间，而GPT-3多为C。在美国历史相关任务中，人类作者通常能获得B或C+，而GPT-3则多为B-。在法学课程中的政策文件写作中，GPT-3得分为B-，而三名学生中只有一人获得了较高的分数。
以下图表展示了不同学科中人类作者与GPT-3的得分对比：
GPT-3仅用20分钟完成论文
虽然不同教授的评分略有差异，但评审团由两名博士和一名医学硕士组成，他们累计拥有超过55年的高中及大学教学经验。参与写作的学生包括应届毕业生和本科生，其中一些人曾在自己的研究领域提出过写作提示。平均而言，完成一篇论文通常需要3天时间。
对于大多数学生来说，三天完成一篇大学论文几乎是不可能的任务，时间限制成为主要难题。而GPT-3只用20分钟便完成了整个写作过程。它利用深度学习技术，生成类似人类的文本内容，每次任务的耗时大多在3到20分钟之间，甚至可以用更长时间进行创造性表达。为了确保内容的真实性，GPT-3的输出几乎未经过人为干预，仅对长度和重复部分略作调整，其生成的内容、信息准确性和语法结构都保持良好状态。
以下是由GPT-3生成的美国历史类文章示例：
GPT-3能够产出类似人类的写作内容
即使没有人为干预，GPT-3的作品也会受到相似的评审反馈。数据显示，49.2%的评论涉及语法和句法结构，26.2%关注文章重点和细节，语气和行文风格的评论占12.3%和10.8%。这些比例与人类作者的反馈几乎一致：大约一半的评价集中在语法和句法，另一半则关注内容的焦点和细节，此外也涉及专业知识和整体风格。
人类作者与GPT-3在写作反馈中的比较：
尽管评论的内容风格类似，但两者的写作结构存在差异。以最常用的两个词组为例，GPT-3偏好使用“of the”、“People who”、“IT is”等搭配，而人类作者则更常用“to the”、“in the”、“on the”。这些差异反映了人工智能与人类在表达方式上的不同偏好和习惯。
在用词习惯方面的差异分析：
考虑到GPT-3在论文评分中的优秀表现，统计分析显示，人类作者的作品更具个性化，内容也更丰富多样。这表明，尽管AI可以快速生成合格的文本，但在创造性和独特性方面，仍有明显优势的人类作者。
虽然GPT-3在短时间内能够产出质量尚可的论文，但目前还难以完全取代人类在大学学位中的核心作用。其在创意和深度方面仍有不足。未来，AI技术的不断进步令人期待，但对于高等教育中的学术标准而言，仍需综合考量人机结合的写作方式。
