news 2026/1/16 6:01:58

多模态推理新范式:上海AI Lab新作证明“画”出答案比“说”出答案更靠谱

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
多模态推理新范式:上海AI Lab新作证明“画”出答案比“说”出答案更靠谱

在通往 AGI 的道路上,大语言模型(LLM)和多模态大模型(MLLM)的自回归架构似乎已经成为了“真理”。然而,这种基于一维序列的线性推理模式,在处理长程、视觉中心任务时,正暴露出明显的短板——它缺乏全局观,且难以纠错。

近日,上海人工智能实验室联合南京大学、香港中文大学及上海交通大学,在这个MLLM 统治的多模态推理领域撕开了一道口子。

他们提出的DiffThinker模型,并没有试图教会 MLLM 如何更好地“说话”,而是利用扩散模型(Diffusion Models)构建了一种全新的视觉推理范式,在视觉中心任务上,其准确率足以碾压 GPT-5 和 Gemini-3-Flash,以及同数据训练的Qwen3-VL-32B。

  • 论文地址:https://arxiv.org/pdf/2512.24165

  • 项目主页:https://diffthinker-project.github.io

  • 代码仓库:https://github.com/lcqysl/DiffThinker

逃离一维诅咒:为什么选 Diffusion?

当人类解决一个迷宫问题时,我们不会像 LLM 那样,在脑子里一行行地写出“先向左 3 步,再向上 2 步……”的文本代码。相反,我们会俯瞰全局,在瞬间构建出一条视觉路径。

这正是 DiffThinker 的核心洞见:复杂的视觉推理,不应被强行降维成符号序列。

扩散模型的“天赋”:原生并行推理

DiffThinker 的成功,很大程度上归功于扩散模型自带的物理特性。在推理的初始阶段(高噪声状态),DiffThinker 并不是像 LLM 那样只能试探一条路。相反,它在潜在空间中同时激活了多条可能的路径分布。随着去噪步数的推进,那些不符合约束条件的路径概率逐渐消失,模型自动收敛到最优解,实现了原生的并行推理(Native Parallel Reasoning)。

实验结果:碾压级的性能

研究团队在四个领域的七大任务上进行了系统评测,包括:

  • 长程规划:VSP, VSP-Super, Maze(迷宫)

  • 组合优化:TSP(旅行商问题)

  • 约束满足:Sudoku(数独)

  • 空间推理:Jigsaw(拼图), VisPuzzle

主要结果如下:

DiffThinker在所有任务上的平均得分高达87.4,而 GPT-5 仅为 21.1,Gemini-3-Flash 为 41.3。同数据训练的Qwen3-VL-32B也只有62.9。

1+1 > 2:DiffThinker与MLLM合作

扩散模型虽然直觉强,但会不会缺乏逻辑严密性?

DiffThinker 给出的方案是:协同推理(Collaborative Reasoning)。
在实验中,DiffThinker 扮演了“直觉系统”的角色,快速生成多个高置信度的候选视觉解;而 MLLM 则扮演“验证系统”,负责对这些视觉解进行校验。

结果显示,这种合作实现1+1>2的效果,超过各自单一模型。

结语

如果说 Transformer 代表了人类的逻辑与语言能力,那么 Diffusion Model 正逐渐展示出推理中所需的空间直觉与想象力。当两者真正结合,我们要面对的,可能才是真正的通用智能。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/1/11 5:11:12

企业级网络叠加工具实战:提升带宽利用率案例

快速体验 打开 InsCode(快马)平台 https://www.inscode.net输入框内输入如下内容: 为一个中型企业设计网络叠加解决方案,需要整合3条不同运营商的宽带线路(100M200M50M)。要求实现智能流量分配、自动故障切换和QoS策略管理。提供…

作者头像 李华
网站建设 2026/1/11 17:46:17

Spotify音乐下载神器:打造永久珍藏的音乐宝库

Spotify音乐下载神器:打造永久珍藏的音乐宝库 【免费下载链接】spotify-downloader Download your Spotify playlists and songs along with album art and metadata (from YouTube if a match is found). 项目地址: https://gitcode.com/gh_mirrors/spotifydownl…

作者头像 李华
网站建设 2026/1/14 18:11:16

电商数据分析:SQL实战案例解析

快速体验 打开 InsCode(快马)平台 https://www.inscode.net输入框内输入如下内容: 创建一个电商数据分析演示项目,包含用户表、订单表、商品表等模拟数据。实现以下SQL查询案例:1) 用户购买转化漏斗分析 2) 商品销售排行榜 3) RFM用户分群模…

作者头像 李华
网站建设 2026/1/13 16:45:59

Python自动化抢票神器:告别手动抢票的烦恼

Python自动化抢票神器:告别手动抢票的烦恼 【免费下载链接】DamaiHelper 大麦网演唱会演出抢票脚本。 项目地址: https://gitcode.com/gh_mirrors/dama/DamaiHelper 还在为热门演出门票一票难求而苦恼吗?面对黄牛高价票和瞬间售罄的尴尬局面&…

作者头像 李华
网站建设 2026/1/15 16:35:55

AI如何帮你快速理解DESMOS函数入口

快速体验 打开 InsCode(快马)平台 https://www.inscode.net输入框内输入如下内容: 使用快马平台,输入以下提示词:创建一个DESMOS函数入口解析工具,能够自动识别用户输入的函数表达式,生成对应的DESMOS可执行代码&…

作者头像 李华
网站建设 2026/1/12 10:31:57

传统登录开发 vs 98T.IA AI方案:效率对比实验

快速体验 打开 InsCode(快马)平台 https://www.inscode.net输入框内输入如下内容: 构建一个对比测试项目,分别展示:1) 手工开发登录模块的全过程 2) 使用98T.IA AI生成的方案 3) 自动化测试脚本对比两种方案的代码行数、开发时长和接口响应…

作者头像 李华