天脉资讯
财经快讯 价值公司 财经人物 IPO解读 热门赛道 经济解码 科技业界 文化艺术 消费零售 大燕公益 商业快讯

李飞飞新文解析:视频生成、机器人与NVIDIA的“世界模型”之争与分类新解

2026-06-04来源:快讯编辑:瑞雪

在人工智能领域,“世界模型”已成为近期最受关注且争议不断的话题。自Sora被OpenAI定义为世界模拟器以来,各类技术纷纷冠以此名:从Genie的交互式画面生成,到机器人公司的研发方向,再到NVIDIA的Omniverse基础设施,甚至游戏引擎也被纳入这一概念框架。尽管术语统一,不同团队对“世界模型”的理解却大相径庭,导致行业交流中存在显著隔阂。

斯坦福大学教授李飞飞近日在个人专栏中提出一套功能分类法,试图厘清这一混乱局面。她以强化学习领域经典的“部分可观测马尔可夫决策过程”(POMDP)闭环为理论基础,指出当前被称作“世界模型”的技术实为该闭环的三种投影:渲染器输出视觉观测(像素),模拟器输出物理状态(几何与动力学表征),规划器输出智能体动作。这一分类标准基于输出内容与闭环环节的对应关系,为技术评估提供了清晰框架。

三类模型中,渲染器的商业化进程最为领先。以文本生成视频技术为代表的产品已覆盖消费级与企业市场,例如Google的Nano Banana模型用户规模可能达数亿。然而,这类模型的核心目标是视觉逼真度,而非物理准确性——其生成的华丽画面可能存在结构缺陷,无法直接用于建筑设计或机器人训练。相比之下,规划器虽被视为最具潜力的方向,但目前仍处于实验室阶段,真实场景部署面临复杂度、多样性与持续性的三重挑战。

模拟器则被李飞飞定义为连接两者的关键枢纽。该技术需在几何、物理与动力学层面构建世界的基础表征:向上可投射为人类可感知的视觉画面,向下可推导出智能体动作的物理后果。例如,NVIDIA的Omniverse平台已应用于工厂、仓库与数字孪生领域,其目标市场规模据估算超过万亿美元。但模拟器发展面临数据稀缺、计算成本高昂等瓶颈,尤其是同时模拟刚体、流体与布料等多物理交互的场景,其资源消耗仍远高于单一领域模拟。

当前行业最显著的趋势是三类模型的边界逐渐模糊。部分机器人实验室已证明,预训练视频渲染器可同时支持世界预测与动作预测,在单一架构内实现渲染与规划的融合。李飞飞团队开发的Marble模型则进一步突破,通过多模态输入生成可探索的3D环境,并同步输出高斯泼溅(用于视觉渲染)与碰撞网格(用于物理模拟),尝试统一渲染器与模拟器的功能。这种技术融合的逻辑终点,是一个能根据需求切换输出模态的基础模型——既可生成照片级画面,也能模拟物理交互,甚至规划动作序列。

尽管前景广阔,统一模型的实现仍面临多重挑战:渲染器依赖的互联网视频数据与模拟器所需的3D标注数据存在数量级差异;视觉优化目标与机器人精度需求可能产生冲突;单一架构内调和不同模态的张力仍是核心开放问题。但可以确定的是,渲染、模拟与规划三条技术路径的交汇,正在重新定义机器智能与物理世界的关系——这或许正是空间智能发展的终极方向。

字节跳动高层发声:张一鸣倡长期主义,梁汝波强调自研深耕AGI未来
快科技8月6日消息,据媒体消息,在字节跳动近日举行的内部会议中,创始人张一鸣表示,做模型要坚持长期主义、延迟满足感,而不是用别人的输出,换一时的榜单排名。 梁汝波表示,在大语言模型上,接下来字节跳动还是会坚持…

2026-08-07

字节梁汝波坦言大语言模型与海外差距,坚持自研锚定AI长期发展
在战略层面,梁汝波提出2026年业务发展的三大原则:“高度优先,粗主干,优化长期”。目前,字节跳动将AI、信息平台、交易服务列为三大核心业务支柱。 梁汝波表示,豆包未来将承担更重要的角色,希望通过豆包和相…

2026-08-06

字节高层齐发声:张一鸣倡长期主义,梁汝波强调自研深耕AGI未来
快科技8月6日消息,据媒体消息,在字节跳动近日举行的内部会议中,创始人张一鸣表示,做模型要坚持长期主义、延迟满足感,而不是用别人的输出,换一时的榜单排名。 梁汝波表示,在大语言模型上,接下来字节跳动还是会坚持…

2026-08-06

马斯克力推的AI百科Grokipedia超三月未更新,用户猜测是否已“停摆”?
根据 grokipedia.com/live 页面显示,目前平台已升级至 2025 年 11 月发布的 v0.2 版本,文章总数已超过 600万篇。 与此同时,Reddit 和 X 平台上已有不少用户开始猜…

2026-08-06

华夏出版社标注“禁用于AI训练”引关注 负责人:维权难但声明态度很重要
8月4日,华夏出版社相关负责人向红星资本局表示,如果书籍内容在未被授权的情况下用于人工智能训练,这很难维权,但出版社仍会标注,“要有态度和这样的声明,这可能会让大家意识到图书是有版权的”。 该负责人还告诉红…

2026-08-06

马斯克7月身家缩水2.45万亿元 亏掉的钱够花994年 本人发帖自嘲成“前万亿富翁”
快科技8月5日消息,6月12日SpaceX正式上市之后,马斯克成为人类历史上首位身家突破万亿的全球富豪。这串长达13位数字的天价身家并没有维持太久。 此前一路被追捧得持续飞升的SpaceX股价,近期快速回落到…

2026-08-06

2026世界机器人大会启幕 屠静领衔共探具身智能商业落地新路径
借助世界机器人大会这一顶级平台,依托亿欧长期积累沉淀的产业资源、行业Know-how,「2026世界机器人大会·具身智能商业落地论坛」向全球发出邀请,论坛将汇聚全球领袖企业家、先锋创业者、顶尖学术专家、知名…

2026-08-05

马斯克宣布SpaceX与英伟达深度合作 Starmind卫星将搭载英伟达芯片升空
马斯克还预告称,首批StarmindAI卫星将于明年开始发射升空。据悉,这套系统将真正把算力搬上太空,每颗Starmind卫星都将搭载英伟达Rubin GPU和Vera CPU。此前,SpaceX于6月1…

2026-08-05

金佰利Q2在华业绩受挫 好奇纸尿裤甲酰胺舆情下CEO称冲击大但品牌稳健
虽然金佰利上半年有机销售额增长1.2%,但其第二季度有机销售额下滑0.1%,金佰利表示,中国社交媒体业务受到干扰对此带来了50个基点的负面影响,同时,叠加金佰利退出美国自有品牌纸尿裤业务,这给金佰利营业利润…

2026-08-05

Waymo CEO:纯视觉路线存局限,多传感器融合才是完全自动驾驶关键
但若要实现完全自动驾驶和远超人类的安全性能,“弱感知会导致安全曲线过早趋于平缓”。Waymo采用摄像头、激光雷达和毫米波雷达三种传感器融合方案。 更直观的是, 一片树叶遮住摄像头就能让无人车完全停驶,而Wa…

2026-08-05