不会数学了!GPT-4“智力”大幅下降

参考消息网7月22日报道 据美国《财富》杂志网站7月20日报道,斯坦福大学的一项研究发现,广受关注的聊天机器人ChatGPT在6月份执行某些任务的表现比3月份的时候变得更糟了。

该研究对由开放人工智能研究中心(OpenAI)创造的这款聊天机器人数月时间内在执行4项“差异化”任务——解数学题、回答敏感问题、编写软件代码、视觉推理——的表现进行了比较。

研究人员发现这项技术执行某些任务的能力存在巨大波动——即“漂移”。该研究考察了OpenAI技术在这一时间段的两个版本:GPT-3.5和GPT-4。最值得注意的结果来自对GPT-4解答数学题能力的研究。在研究过程中,研究人员发现,在3月份时GPT-4能够在97.6%的答题时间里正确识别出数字17077为质数。但是仅仅3个月后,其答题的正确率却骤降至极低的2.4%。与此同时,GPT-3.5的表现轨迹则几乎相反,其在3月时回答同一问题的正确率仅为7.4%,而在6月时的回答大多是正确的,答题正确率达86.8%。

当研究人员要求这两个版本编写代码和接受视觉推理测试——即要求该技术预测某个图案中的下一个形象——时,出现了类似的差异化结果。

研究报告的作者之一、斯坦福大学计算机科学教授詹姆斯·邹(音)说,“如此巨大的差异程度”对于“尖端的ChatGPT”而言是意想不到的。

詹姆斯·邹说:“当我们在对大型语言模式进行调整,以改善其在某些任务中的表现时,这样做实际上可能会有许多意想不到的后果,它们或许会影响这个模型在处理其他任务时的表现。在人工智能模型如何回答问题方面,存在各式各样耐人寻味的相互依赖,它们可能在一定程度上导致我们所观察到的这些每况愈下的表现。”

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

(0)
上一篇 2024年4月20日 下午12:03
下一篇 2024年4月20日 下午12:15

相关推荐

  • 工厂自动化办公系统有哪些(工厂自动化办公系统)

    工厂自动化办公系统: 提升生产效率和质量的关键技术 随着工业化的不断推进,工厂自动化办公系统逐渐成为提升生产效率和质量的关键技术。工厂自动化办公系统是指利用计算机技术和自动化设备,…

    科研百科 2024年6月5日
    45
  • 海外科研项目申报材料有哪些海外科研项目申报材料有哪些

    海外科研项目申报材料有哪些 随着全球化的不断深入,海外科研项目越来越受到人们的关注。在申报海外科研项目时,需要提交一系列的材料,这些材料有助于评估项目的真实性和可行性,并为项目提供…

    科研百科 2024年9月8日
    18
  • 项目管理中成本进度质量是怎样的关系(项目管理 质量 进度 成本)

    项目管理质量进度成本项目管理质量进度成本一、工作量的要求1.根据年收入,合理分配一天的工作量。2.与客户相关的工作量包括:1.完成作业;2.注意车辆停运;3.了解客户通讯需求;4….

    科研百科 2024年5月19日
    62
  • ikid儿童app免费版

    ikid儿童app免费版: 一款优秀的儿童教育应用 近年来,随着科技的不断发展,儿童教育领域也迎来了许多新的应用。其中,ikid儿童app免费版是一款非常受欢迎的儿童教育应用,它提…

    科研百科 2024年9月30日
    17
  • 湖南省教育厅科学研究项目结题报告

    湖南省教育厅科学研究项目结题报告 湖南省教育厅科学研究项目结题报告 尊敬的领导、各位评审专家: 我谨以此报告的形式,向大家汇报我参与的湖南省教育厅科学研究项目——“汉语语法修辞学理…

    科研百科 2024年11月9日
    0
  • 大学生科研项目经费预算明细(大学生科研项目费用明细表图片)

    大学生科研项目费用明细表图片 近年来,随着大学生科研活动的普及,越来越多的大学生参与科研项目,这为大学生提供了更多的机会和平台,同时也促进了科学事业的发展。然而,科研项目的顺利进行…

    科研百科 2024年4月2日
    71
  • 节能报告编制费

    节能报告编制费:企业节能的关键点 近年来,随着全球能源消耗的增加和气候变化的加剧,节能成为了全球各国政府重点推动的一项重要任务。而节能报告编制费则是企业实现节能目标的重要手段之一。…

    科研百科 2024年10月21日
    0
  • 物业党建存在问题

    物业党建存在问题 物业党建是物业管理行业中非常重要的一个环节,它是连接物业管理和党的工作之间的桥梁,对于提高物业管理水平、促进社区发展具有重要的作用。然而,在实际操作中,物业党建存…

    科研百科 2024年10月11日
    11
  • 项目管理系统组成

    项目管理系统组成 项目管理系统是一种用于管理项目的工具,它可以帮助项目经理和团队成员协调工作,确保项目按时完成并达到高质量标准。项目管理系统通常由以下几个部分组成: 1. 项目计划…

    科研百科 2024年5月28日
    62
  • 客户关系管理之二:规模与利润(顾客关系管理包括顾客利润分析)

    01 — 不是所有客户都是上帝 顾客上帝的由来 其实国外没有“顾客就是上帝”一说。最早在19世纪中叶,英国一家百货公司提出了"顾客总是对的"(The custo…

    科研百科 2022年11月19日
    569