news 2026/5/19 15:31:07

英伟达机器人掌门人Jim Fan年度复盘:Vibe Coding火出圈,机器人领域却依然焦头烂额

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
英伟达机器人掌门人Jim Fan年度复盘:Vibe Coding火出圈,机器人领域却依然焦头烂额

英伟达机器人业务负责人、GEAR实验室联合负责人Jim Fan泼了一盆冷水,jim fan 认为机器人领域还处于混乱状态,就连发展方向都有可能是错的。

AK这两天发了一篇推文,引爆了媒体,因为Vibe Coding真的太厉害了,厉害到连AK都焦虑了,AK认为过去一个月没有跟上节奏的人已经对软件行业的认知out了。

与此同时,2025年的机器人领域发展可能是另一番景象,英伟达机器人业务负责人、GEAR实验室联合负责人Jim Fan泼了一盆冷水,jim fan 认为机器人领域还处于混乱状态,就连发展方向都有可能是错的。

Jim Fan刚刚分享了他对机器人领域现状的焦虑,这是他在2025年学到的3个教训。

1. 硬件虽领先软件,但可靠性严重拖累迭代速度

我们已经见证了精湛的工程艺术,比如Optimus、e-Atlas、Figure、Neo、G1等等。

现状是,身体的能力超过了大脑的指挥能力,我们要用到最好的AI,并没有榨干这些前沿硬件的全部汁水。

然而,照看这些机器人需要整整一个运营团队。

不像人类,机器人没法从瘀伤中自愈。过热、电机损坏、离奇的固件问题每天都在困扰着我们。错误是不可逆的,也是不可原谅的。

Jim Fan感叹:唯一能随着规模增长的,只有我的耐心。

2. Benchmark在机器人领域仍是一场灾难

LLM圈的普通人以为MMLU和SWE-Bench是常识。但在机器人领域?先别急。

在这里,没有人对任何事情达成一致:无论是硬件平台、任务定义、评分标准、模拟器,还是现实世界的设置。

每个人都在针对每个新闻发布临时定义的基准测试上,宣称自己是SOTA(当前最佳)。每个人都从100次重试中,挑樱桃般选出看起来最漂亮的那一次演示。

Jim Fan呼吁:2026年我们必须做得更好,停止将可复现性和科学纪律视为二等公民。

3. 基于VLM的VLA路线「感觉不对」

VLA(视觉-语言-动作)模型一直是机器人大脑的主流方法。配方很简单:拿一个预训练的VLM(视觉语言模型)检查点,在上面嫁接一个动作模块。

但仔细想想,VLM是为“视觉问答”这类Benchmark高度优化的。

这意味着两个问题:

1.VLM中的大多数参数是为语言和知识服务的,而不是为物理学服务的;2.视觉编码器为了高层理解(Q&A),会主动调整以丢弃低级细节。

但微小的细节对灵巧性至关重要。

Jim Fan认为,没有理由相信VLA的性能会随着VLM参数的增加而扩展。预训练是错位的。

相比之下,视觉世界模型(Video World Model)似乎是机器人策略更好的预训练目标。Jim Fan表示正在押注于此。

质疑与回应

针对Jim Fan的观点,网友Stewart Alsop提出了尖锐的质疑:

如果视频世界模型是更好的预训练目标,为什么Helix、GR00T N1和π0这些真正交付结果的模型,依然构建在VLM骨干之上?

世界模型的方法目前大多只用于策略评估和合成数据,而非直接的运动控制。

另外,既然硬件瓶颈限制了迭代速度,这难道不适用于任何预训练路线吗?直到我们解决机器人数据缺口之前。

Jim Fan:

它们是2025年的模型,期待2026年的下一个大模型。

我个人认为2026年还是要看谷歌,DeepMind还在憋大招,8月份时已经展示过Genie 3这个强大的世界模型了,Genie 4有可能真正让机器人拥有在现实世界连续执行任务的大脑。

如果你想更深入地学习大模型,以下是一些非常有价值的学习资源,这些资源将帮助你从不同角度学习大模型,提升你的实践能力。

一、全套AGI大模型学习路线

AI大模型时代的学习之旅:从基础到前沿,掌握人工智能的核心技能!​

因篇幅有限,仅展示部分资料,需要点击文章最下方名片即可前往获取

二、640套AI大模型报告合集

这套包含640份报告的合集,涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师,还是对AI大模型感兴趣的爱好者,这套报告合集都将为您提供宝贵的信息和启示

因篇幅有限,仅展示部分资料,需要点击文章最下方名片即可前往获取

三、AI大模型经典PDF籍

随着人工智能技术的飞速发展,AI大模型已经成为了当今科技领域的一大热点。这些大型预训练模型,如GPT-3、BERT、XLNet等,以其强大的语言理解和生成能力,正在改变我们对人工智能的认识。 那以下这些PDF籍就是非常不错的学习资源。

因篇幅有限,仅展示部分资料,需要点击文章最下方名片即可前往获取

四、AI大模型商业化落地方案

作为普通人,入局大模型时代需要持续学习和实践,不断提高自己的技能和认知水平,同时也需要有责任感和伦理意识,为人工智能的健康发展贡献力量。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/5/18 11:35:28

GitHub热门PyTorch项目推荐:基于PyTorch-CUDA-v2.7镜像快速部署

GitHub热门PyTorch项目推荐:基于PyTorch-CUDA-v2.7镜像快速部署 在深度学习项目开发中,最让人头疼的往往不是模型设计本身,而是环境配置——明明代码没问题,却因为CUDA版本不匹配、驱动缺失或依赖冲突导致ImportError: libcudart.…

作者头像 李华
网站建设 2026/5/15 6:34:57

PyTorch模型推理加速方案:使用TensorRT集成CUDA优化

PyTorch模型推理加速方案:使用TensorRT集成CUDA优化 在当前AI产品化浪潮中,一个训练好的深度学习模型能否高效部署,往往决定了其商业价值的上限。尤其是在视频分析、自动驾驶、实时推荐等对延迟敏感的场景下,即便是几十毫秒的性能…

作者头像 李华
网站建设 2026/5/16 18:22:13

专科生必看!8个AI论文软件推荐,轻松搞定毕业论文格式规范!

专科生必看!8个AI论文软件推荐,轻松搞定毕业论文格式规范! AI 工具如何让论文写作更轻松? 对于专科生来说,撰写毕业论文是一项既重要又复杂的任务。尤其是在格式规范、内容逻辑和语言表达方面,稍有不慎就可…

作者头像 李华
网站建设 2026/5/15 13:30:24

DiskInfo下载官网替代方案:监控GPU存储状态以优化PyTorch训练

DiskInfo下载官网替代方案:监控GPU存储状态以优化PyTorch训练 在深度学习模型日益庞大的今天,一个常见的场景是:你启动了训练脚本,满怀期待地等待结果,几分钟后却突然收到一条冷冰冰的错误提示——CUDA out of memory。…

作者头像 李华
网站建设 2026/5/2 18:05:27

清华镜像源加速PyTorch安装:高效配置GPU训练环境技巧

清华镜像源加速PyTorch安装:高效配置GPU训练环境技巧 在人工智能项目开发中,最让人头疼的往往不是模型设计本身,而是环境搭建——尤其是当你面对“下载卡在30%”、“CUDA版本不匹配导致ImportError”这类问题时。一个本该十分钟完成的依赖安…

作者头像 李华
网站建设 2026/5/16 18:02:54

CNN手写数字识别实战:基于PyTorch-CUDA-v2.7快速上手

CNN手写数字识别实战:基于PyTorch-CUDA-v2.7快速上手 在深度学习初学者的“成长路线图”中,MNIST 手写数字识别几乎是一个绕不开的起点。它像是一把钥匙,打开了理解神经网络工作原理的大门。但真正动手时,很多人却被挡在了门外——…

作者头像 李华