广场
最新
热门
资讯
我的主页
发布
Leo lau
2025-12-29 10:39:00
关注
2025年,机器人领域教给我的3件事 @DrJimFan
1⃣️硬件走在软件前面,但硬件可靠性严重限制了软件迭代速度我们已经看到了极其精妙的工程杰作:Optimus、e-Atlas、Figure、Neo、G1等等。但问题是,我们最好的AI还远没有把这些前沿硬件的潜力榨干。(机器人)身体的能力,明显强过大脑目前能发出的指令。然而,要“伺候”这些机器人,往往需要一整个运维团队。机器人不像人类那样会自我修复:过热、马达损坏、诡异的固件问题,几乎是日常噩梦。错误一旦发生,就是不可逆、也不宽容的。真正被scaling的,只有我的耐心。
2⃣️机器人领域的基准测试,依然是一场史诗级灾难在大模型世界里,人人都知道MMLU、SWE-Bench是怎么回事。但在机器人领域没有任何共识:用什么硬件平台、任务如何定义、评分标准是什么、用哪种模拟器,还是直接上真实世界?按定义来说,每个人都是SOTA——因为每次发新闻,都会临时定义一个新的benchmark。每个人都会从100次失败里,挑出那次最好看的demo。到2026年,我们这个领域必须做得更好,不能再把可复现性和科学规范当成二等公民。
3⃣️基于VLM的VLA路线,总感觉不太对VLA指的是Vision-Language-Action(视觉-语言-动作)模型,目前这是机器人大脑的主流范式。配方也很简单:拿一个预训练好的VLM checkpoint,在上面“嫁接”一个动作模块。但仔细想想就会发现问题。VLM 本质上是被高度优化用来爬诸如视觉问答这类 benchmark的,这直接带来两个后果:VLM的大多数参数,都服务于语言和知识,而不是物理世界;视觉编码器被主动训练去丢弃低层细节,因为问答任务只需要高层理解,但对机器人来说,微小细节对灵巧操作至关重要。因此,VLA 的性能没有理由随着VLM参数规模的增长而线性提升。问题出在预训练目标本身就不对齐。 #AI #Robtics
此页面可能包含第三方内容,仅供参考(非陈述/保证),不应被视为 Gate 认可其观点表述,也不得被视为财务或专业建议。详见
声明
。
赞赏
点赞
评论
转发
分享
评论
0/400
评论
暂无评论
热门话题
查看更多
#
我的周末交易计划
3.47万 热度
#
GateLive直播挖矿公测开启
6.95万 热度
#
加密市场回调
36.98万 热度
#
贵金属行情下跌
4.9万 热度
#
中东局势升级
6.48万 热度
热门 Gate Fun
查看更多
Gate Fun
KOL
最新发币
即将上市
成功上市
1
qf
买了跌卖了涨
市值:
$0.1
持有人数:
1
0.00%
2
YY
殷悦起飞啦
市值:
$2789.65
持有人数:
1
0.00%
3
服
我tm服了
市值:
$0.1
持有人数:
1
0.00%
4
Msfc
马上发财
市值:
$2796.55
持有人数:
1
0.00%
5
Doraemon
Doraemon
市值:
$2793.1
持有人数:
1
0.00%
置顶
网站地图
2025年,机器人领域教给我的3件事 @DrJimFan
1⃣️硬件走在软件前面,但硬件可靠性严重限制了软件迭代速度我们已经看到了极其精妙的工程杰作:Optimus、e-Atlas、Figure、Neo、G1等等。但问题是,我们最好的AI还远没有把这些前沿硬件的潜力榨干。(机器人)身体的能力,明显强过大脑目前能发出的指令。然而,要“伺候”这些机器人,往往需要一整个运维团队。机器人不像人类那样会自我修复:过热、马达损坏、诡异的固件问题,几乎是日常噩梦。错误一旦发生,就是不可逆、也不宽容的。真正被scaling的,只有我的耐心。
2⃣️机器人领域的基准测试,依然是一场史诗级灾难在大模型世界里,人人都知道MMLU、SWE-Bench是怎么回事。但在机器人领域没有任何共识:用什么硬件平台、任务如何定义、评分标准是什么、用哪种模拟器,还是直接上真实世界?按定义来说,每个人都是SOTA——因为每次发新闻,都会临时定义一个新的benchmark。每个人都会从100次失败里,挑出那次最好看的demo。到2026年,我们这个领域必须做得更好,不能再把可复现性和科学规范当成二等公民。
3⃣️基于VLM的VLA路线,总感觉不太对VLA指的是Vision-Language-Action(视觉-语言-动作)模型,目前这是机器人大脑的主流范式。配方也很简单:拿一个预训练好的VLM checkpoint,在上面“嫁接”一个动作模块。但仔细想想就会发现问题。VLM 本质上是被高度优化用来爬诸如视觉问答这类 benchmark的,这直接带来两个后果:VLM的大多数参数,都服务于语言和知识,而不是物理世界;视觉编码器被主动训练去丢弃低层细节,因为问答任务只需要高层理解,但对机器人来说,微小细节对灵巧操作至关重要。因此,VLA 的性能没有理由随着VLM参数规模的增长而线性提升。问题出在预训练目标本身就不对齐。 #AI #Robtics