智快网
快讯 行业 产业 汽车 科技 AI+ 热点

苹果研究:AI大模型在高复杂度任务中推理能力遭质疑

2025-06-08来源:ITBEAR编辑:瑞雪

苹果机器学习研究中心近日发布了一篇引人深思的研究论文,对当前人工智能(AI)模型的思维能力与推理能力提出了质疑。论文指出,现有的AI模型,尽管在某些任务上表现出色,但实际上主要依赖模式匹配与记忆,特别是在面对复杂任务时,这一局限性尤为明显。

为了深入探讨这一问题,苹果的研究人员对当前前沿的“大型推理模型”进行了全面评估,这些模型包括OpenAI的o3-mini、DeepSeek-R1、Anthropic的Claude 3.7 Sonnet Thinking,以及谷歌的Gemini Thinking等。这些模型被广泛应用于各种场景,尤其是在生成详细“思考链”方面展现出了独特的优势。

然而,研究却发现,当问题的复杂度超过某个临界点时,这些模型的推理能力会急剧下降,甚至完全崩溃,准确率降至零。更令人惊讶的是,在推理过程中,尽管算力充足,但模型用于“思考”的token数量却随着问题难度的增加而减少,这进一步揭示了现有推理方法的根本局限性。

论文《思考的幻象:通过问题复杂性的视角理解推理模型的优势与局限》由Parshin Shojaee等人撰写,深入剖析了当前AI模型在推理方面的不足。研究人员指出,目前对AI模型的评估主要集中在数学和编程基准测试上,这种评估方式虽然可以反映模型的最终答案准确性,但却忽略了数据污染问题,也无法揭示模型内部推理轨迹的结构和质量。

为了更深入地了解AI模型的推理过程,研究人员设计了一系列可控的解谜环境,这些环境允许精确操纵问题的复杂性,同时保持逻辑结构的一致性。通过这种方式,研究人员不仅可以分析模型的最终答案,还可以深入探究模型的内部推理轨迹,从而揭示模型是如何“思考”的。

研究团队发现,模型的表现可以清晰地分为三个阶段:在低复杂度任务中,传统大模型(如Claude-3.7无思维版本)表现更佳;在中等复杂度任务中,具备思维机制的大型推理模型(LRMs)更占优势;然而,在高复杂度任务中,两类模型均陷入完全失效状态。

特别研究还发现LRMs在执行精确计算方面存在明显局限性,它们无法使用显式算法进行推理,且在不同谜题之间的推理表现也呈现出不一致性。这一发现进一步强调了当前AI模型在推理能力方面的不足。

研究还指出,当前业界对LRMs的评估范式主要基于已建立的数学基准,这种评估方式可能无法全面反映模型的真实能力。因此,研究人员呼吁需要更加细致的实验设置来探索这些问题,以更深入地了解AI模型的推理能力和局限性。

论文的发布引起了业界的广泛关注。研究人员表示,这些发现不仅揭示了现有LRMs的优点和局限性,还引发了关于这些系统推理本质的问题。这些问题对于AI系统的设计和部署具有重要意义,将推动相关领域的研究不断向前发展。

华为顶级旗舰价格大跳水,16GB+512GB直降2100元,为新机让路
这段时间虽然登场了很多新旗舰,但阿维觉得挺遗憾的,因为绝大多数新旗舰都只是常规升级,单纯为了启用第五代骁龙8至尊版和天玑9500,在这种情况下,甚至就连小米17 Pro系列上并不算多大创新的背屏也成为了大家津…

2025-11-15

高通跃龙IQ-X系列工业级PC处理器发布,为工业自动化注入AI新动力
高通跃龙 IQ-X 系列为工业自动化提供了 AI 基础设施,能够实现 AI模型移植,以及面向预测性维护、状态监测和缺陷检测等关键用例的应用开发。 该平台支持Qt、CODESYS等工业软件工具,通过高通AI软…

2025-11-14

华为PC业务双线并行:鸿蒙PC加速突破,智选PC延续Windows生态
11月13日消息,虽然有了鸿蒙PC,但华为似乎短期并不想放弃Windows系统。 有博主给出的消息显示,华为在PC业务上仍将维持“鸿蒙PC”与“智选PC”双线并行的策略,短期内不会放弃基于Windows系统的…

2025-11-13

荣耀500系列全渠道预约开启 2亿像素主摄+8000mAh大电池成亮点
影像方面,荣耀500系列可能全系标配2亿像素主摄,采用1/1.4英寸大底传感器,并引入雅顾影像调校技术。其中,Pro版或加入潜望式长焦镜头,支持高倍率光学变焦。 续航方面,荣耀500系列预计内置一块高达800…

2025-11-13

大疆新品亮点频现:Avata 360无人机配旋转云台,Osmo Action 6相机可变光圈
在镜头和视频规格方面,Action 6 将配备全新的 F2.0-F4.0 可变光圈镜头,等效焦距为 16mm;支持录制带有 HDR 和ProRes 编码的 8K / 30fps 视频,还支持 5.3K /…

2025-11-13

中国中煤突破!世界首台套600MW级超超临界锅炉实现煤气高效掺烧
IT之家 11 月 12 日消息,中国中煤官方今日宣布,其牵头成功研发世界首台套耦合副产煤气 600MW 级超超临界二次再热锅炉。该设备近日还成功入选国家能源局公告发布第五批能源领域首台(套)重大技术装备名单…

2025-11-12

华硕提前布局库存应对存储涨价,后续将灵活调整产品与售价策略
IT之家 11 月 12 日消息,华硕联席 CEO 胡书宾昨日在公司的 2025 年第三季法人说明会上表示,该企业已建立一定库存应对目前的DRAM 内存和 NAND 闪存涨价情况;华硕将调整产品组合,适度灵…

2025-11-12

2025年Q3中国平板市场:出货量增10.9%,华为连续八季领跑
11月10日,近日,国际数据公司(IDC)发布了2025年第三季度中国平板电脑市场季度跟踪报告。 数据显示,2025年第三季度中国平板电脑市场出货量为849万台,同比增长10.9%。其中,消费市场出货量同比增…

2025-11-12

摩托罗拉Edge 70 Ultra现身跑分平台,处理器型号成谜引猜测
IT之家 11 月 11 日消息,据科技媒体 NoteBook Check 今天报道,摩托罗拉上周刚刚推出 Edge 70 手机(对应国行版联想moto X70 Air),如今种种蛛丝马迹证明这家公司计划进…

2025-11-12