不会数学了!GPT-4“智力”大幅下降

参考消息网7月22日报道 据美国《财富》杂志网站7月20日报道,斯坦福大学的一项研究发现,广受关注的聊天机器人ChatGPT在6月份执行某些任务的表现比3月份的时候变得更糟了。

该研究对由开放人工智能研究中心(OpenAI)创造的这款聊天机器人数月时间内在执行4项“差异化”任务——解数学题、回答敏感问题、编写软件代码、视觉推理——的表现进行了比较。

研究人员发现这项技术执行某些任务的能力存在巨大波动——即“漂移”。该研究考察了OpenAI技术在这一时间段的两个版本:GPT-3.5和GPT-4。最值得注意的结果来自对GPT-4解答数学题能力的研究。在研究过程中,研究人员发现,在3月份时GPT-4能够在97.6%的答题时间里正确识别出数字17077为质数。但是仅仅3个月后,其答题的正确率却骤降至极低的2.4%。与此同时,GPT-3.5的表现轨迹则几乎相反,其在3月时回答同一问题的正确率仅为7.4%,而在6月时的回答大多是正确的,答题正确率达86.8%。

当研究人员要求这两个版本编写代码和接受视觉推理测试——即要求该技术预测某个图案中的下一个形象——时,出现了类似的差异化结果。

研究报告的作者之一、斯坦福大学计算机科学教授詹姆斯·邹(音)说,“如此巨大的差异程度”对于“尖端的ChatGPT”而言是意想不到的。

詹姆斯·邹说:“当我们在对大型语言模式进行调整,以改善其在某些任务中的表现时,这样做实际上可能会有许多意想不到的后果,它们或许会影响这个模型在处理其他任务时的表现。在人工智能模型如何回答问题方面,存在各式各样耐人寻味的相互依赖,它们可能在一定程度上导致我们所观察到的这些每况愈下的表现。”

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

(0)
上一篇 2024年4月20日 下午12:03
下一篇 2024年4月20日 下午12:15

相关推荐

  • 中农集团科研项目有哪些

    中农集团科研项目有哪些 中农集团是中国农业领域的领军企业之一,一直致力于推动农业科技创新和农业发展。在多年的发展中,中农集团不断开展各种科研项目,以提高农业生产效率和保障农产品质量…

    科研百科 2025年1月30日
    0
  • 广西工程建设项目合同管理办法最新3043065378

    广西工程建设项目合同管理办法最新 近年来,随着广西壮族自治区工程建设项目的不断增长,工程建设项目合同管理的重要性也越来越凸显。为了规范工程建设项目合同管理工作,保障工程质量和工程投…

    科研百科 2024年11月9日
    2
  • 科研APP

    科研APP: 科研助手,助力科研进展 科研APP是近年来发展起来的一款面向科研团队和学者的移动应用,旨在提供高效、便捷的科研工具和服务。随着科技的不断发展,科研APP已经成为科研领…

    科研百科 2024年11月25日
    0
  • 合同管理目录表怎么做(合同管理目录表)

    合同管理目录表 合同管理是一个非常重要的管理工作,涉及到企业的运营和决策。一个完善的合同管理系统可以提高合同管理的效率,减少合同风险,降低企业的成本,提升企业的竞争力。 下面是一个…

    科研百科 2024年6月5日
    41
  • 项目管理系统功能介绍

    项目管理系统是一种用于管理项目的工具,能够帮助项目经理和团队成员高效地协作和推进项目。以下是一些常见的项目管理系统功能: 1. 任务管理:任务管理功能可以帮助项目经理查看和管理项目…

    科研百科 2024年7月15日
    39
  • 如何做好基层党建工作(基层组织建设五个基本内容)

    党的基层组织建设,从来就是一个大而实的课题。之所以大,因为它重要,是党的基层战斗堡垒,是党的根基,是党的力量和基础所在,直接影响党和国家的大局;之所以实,因为它复杂、具体,它处在党…

    科研百科 2023年2月2日
    728
  • 公安部项目管理系统

    公安部项目管理系统 随着公安机关在工作中的数字化和信息化要求越来越高,公安部项目管理系统应运而生。它是在公安部领导的支持下,由多家单位共同开发的一套集项目管理、协同办公、资源管理、…

    科研百科 2024年12月25日
    4
  • 信息系统项目管理师封面

    信息系统项目管理师封面 随着信息技术的快速发展,信息系统项目管理师的职业前景也越来越广阔。作为信息技术领域的重要职业之一,信息系统项目管理师负责规划和实施信息系统项目,确保项目在预…

    科研百科 2025年1月24日
    1
  • 党员充电必备!推荐一批最新党建读物,快来尝鲜(畅销党建读物)

    《学习贯彻习近平新时代中国特色社会主义思想打赢新冠肺炎疫情防控人民战争总体战阻击战案例》《应急管理体系和能力建设干部读本》 全国干部培训教材编审指导委员会办公室 组织编写   《案…

    科研百科 2023年1月17日
    662
  • 美国科研项目(科研项目对美研申请有用吗)

    科研项目对美研申请有用吗? 科研项目是美研申请中的重要组成部分,不仅能够展示研究能力和学术兴趣,还可以为申请增加亮点。本文将探讨科研项目对美研申请的影响和作用。 科研项目能够展示研…

    科研百科 2024年8月5日
    30