今日场景今天具身赛道的主线是把机器人训练变便宜、把模型内部看清楚。SuperMimic 用一个可求导的世界模型,让人形机器人学全身动作的算力从上百张卡降到一张卡几小时;另一篇拆开三个 VLA 模型,发现动作只依赖少数几层,剪掉其余连接就能省下三分之一计算。其余几篇关注真实环境里的麻烦:旁边有人走动、长时间任务要记住环境变化、部署后不断学新技能,以及叠衣服这类软物体操作。 — 评分 49 篇,入选 10 篇,分数 3.40 – 4.74

本期目录 · 10 篇
  1. 01SuperMimic: Scaling Humanoid Whole-Body Control with One Differentiable World Model
  2. 02Causal Analysis of Robot Foundation Models Enables Efficiency Gains
  3. 03Compositional Diffusion Policy for Vision–Language–Action Agents
  4. 04Online Robot Manipulation Error Detection and Description
  5. 05HARP-Bench: Benchmarking Robot Manipulation Around Active Humans
  6. 06Towards Human-like Physical Intelligence: Lifelong Vision-Language-Action Learning for Robotic Manipulation
  7. 07HARP-VLA: Human-Robot Aligned Representation Learning for Vision-Language-Action Model
  8. 08SERF: Spatiotemporal Environment and Robot Feature Map for Long-Horizon Mobile Manipulation
  9. 09In-Context Learning World Models for Robot Dual-Arm Manipulation of Soft Garment with Partial Observations
  10. 10AGIBOT introduces Worken to measure robot productivity at AGIBOT Innovation Day 2026
LEAD STORY · 今日必读

SuperMimic: Scaling Humanoid Whole-Body Control with One Differentiable World Model

让人形机器人跟着大量人体动作数据学全身控制,现在的主流做法很费算力:最强的动作跟踪器 SONIC(此前公开的、用 PPO 在集群上训练的方案)要在 128 张 GPU 上训练约 7 天。SuperMimic 的出发点是,动作虽然千差万别,机器人身体的物理规律是同一套。它先用仿真器的日志数据学一个可求导的世界模型,再让策略在这个模型里做短程想象,直接对动作求梯度。结果是单卡训练 3 小时,回报就超过了 SONIC,GPU 时数省了 1000 多倍。瓶颈从算力转到了动作数据本身,扩更多动作变得便宜。

相关 5新颖 5实用 4证据 5时效 4
4.65
综合分 / 5
偏好调整 4.74
Qiayuan Liao, Yiyang Shao, Junfeng Long, Kevin Zakka, Roberto Horowitz, Pieter Abbeel 等 7 人 · 2026-10-20 · arXiv

今日其余入选

9 篇 · 按综合排名
02 4.40

Causal Analysis of Robot Foundation Models Enables Efficiency Gains

VLA 模型的动作模块通常在每一层都去读语言模型主干的信息,但其实只有中后段很窄的几层真正影响动作。作者在三个开源 VLA 模型上做了这样的实验:桌上有香蕉和苹果,一次让机器人拿香蕉,另一次两者换个位置、让它拿苹果,把前一次某一层的内部激活抄进后一次,看机器人会不会改去拿香蕉,逐层试下来得出了这个结论。指令里目标物体那个词在前中层决定抓哪个物体,往哪边动的空间信息则在中后层。按这个发现,只让 MolmoBot 的动作模块读其中 3 层,推理计算量最多省 33%,成功率几乎不变。

Aiden Swann, Mathilde Papillon, Mozes Jacobs, Siddharth Boppana, Tal Haklay, Eric Bigelow 等 16 人
arXiv·2026-10-14·Relevance 5 · Novelty 4 · Practical 4 · Evidence 5 · Timely 4
03 4.30

Compositional Diffusion Policy for Vision–Language–Action Agents

机器人执行一条指令时,要做什么和动作能不能做到,是两类不同的要求,而且会被重新组合成没见过的任务。现有策略把它们混在一个表示里学,遇到新组合就容易泛化不好,生成的动作也可能不平滑或机械臂够不着。这篇把动作轨迹的生成拆成几项能量相加:指令里的物体、位置等语义各对应一项,由网络学出来,给候选轨迹打分,越符合这条要求分数越好;动作平滑、机械臂好不好发力这些物理约束写成可求导的显式项,一起引导扩散模型生成轨迹。拆开以后,新组合只是把已有的几项重新加起来,真机和公开基准上组合泛化和动作可行性都更好。

Yuxuan Xu, Jianzhe Gao, Hanlin Kong, Zhen Yin, Yonggen Ling, Wenguan Wang
OpenReview·2026-09-04·Relevance 5 · Novelty 4 · Practical 4 · Evidence 3 · Timely 5
04 4.10

Online Robot Manipulation Error Detection and Description

机器人操作出错时,现有方法要么每帧只给一个出错或没出错的分数,要么要等整段视频录完才能分析。这篇把出错检测改成边看边判:模型一段一段读实时视频,用一个记忆库存下看过的画面,出错时同时给出这次失误从哪一刻开始到哪一刻结束,以及一句话描述发生了什么。通用视频模型不懂机器人操作,作者先拿现有机器人数据集额外做了一轮预训练。最终模型定位失误时间段的 mIoU 是 0.232,最强的在线基线是 0.194。对做线上监控的人来说,能实时说出哪里错了,比事后打分更有用。

Yung-Shun Chan, Kuniaki Saito, Cristian Camilo Beltran-Hernandez, Jeremy Siburian, Masashi Hamaya 等 6 人
OpenReview·2026-09-04·Relevance 4 · Novelty 4 · Practical 4 · Evidence 4 · Timely 5
05 4.00

HARP-Bench: Benchmarking Robot Manipulation Around Active Humans

现有机器人操作基准大多默认工作台前只有机器人在动,可真实环境里人常常就在旁边:用手一指暗示想要哪个,临时拿走要用的东西,顺手把任务做了一半,或者站在机械臂要经过的地方。HARP-Bench 把这些情况当成任务本身的一部分,分成提示、打断、帮忙和同处一个空间四类,每个日常任务都配一个没人在场的对照版本,方便直接比较。作者测了 VLA、模仿学习和规则策略,有人在场时它们都明显变差;用这个基准采集的演示数据训练后,这些情况下的表现会提升,真机实验也印证了这一点。

Qinhong Zhou, Riley Zong, Chunru Lin, Diyi Hu, Shivraj Singh Bhatti, Hongxin Zhang, Lin Qiu 等 9 人
OpenReview·2026-09-04·Relevance 4 · Novelty 4 · Practical 4 · Evidence 3 · Timely 5
06 4.00

Towards Human-like Physical Intelligence: Lifelong Vision-Language-Action Learning for Robotic Manipulation

机器人部署后要不断学新技能,可一学新的就忘旧的,想记牢旧的又学不进新的。LifelongVLA 给 VLA 模型挂了两组 LoRA:一组只用新任务的数据训练,学得快;另一组只用旧技能的复习样本和蒸馏信号训练,学习率更低,变得慢,用来守住学过的东西。一个门控按当前输入决定两组各占多少。复习时每个旧技能只随机留少量样本,不存整条带图像的演示。依次学完多个任务后,平均成功率 83.2%,比最强基线高 13 个点,遗忘率也低了 8.2 个点。

Yao He, Gan Sun, Wenqi Liang, Fazeng Li, Yang Cong
OpenReview·2026-09-04·Relevance 4 · Novelty 4 · Practical 4 · Evidence 3 · Timely 5
07 4.00

HARP-VLA: Human-Robot Aligned Representation Learning for Vision-Language-Action Model

用海量人类操作视频来训练机器人策略,难点不只是人手和机械臂动作不同,还在于同样的操作,人和机器人的画面会被视觉编码器编到两片互不相干的特征里,混在一起训练效果就打折扣。HARP 用少量人和机器人做同一件事的配对演示当桥梁,把机器人的视觉特征往人类那边对齐,同时让不同配对的演示彼此仍然分得开;大量不配对的视频则用来训练一个模型,从相邻两帧画面的变化里推出这一步做了什么动作,得到一种人和机器人通用的动作编码,策略先学预测这种编码,再由一个小模块把它转成机器人的控制指令。对齐之后,人类视频才真正帮上忙:在 CALVIN 上平均能连续完成 4.481 个任务,真机成功率比最强基线高 7.1%。

Xiang Zhu, Puzhen Yuan, Yichen Liu, Jianyu Chen
OpenReview·2026-09-04·Relevance 4 · Novelty 4 · Practical 4 · Evidence 3 · Timely 5
08 4.00

SERF: Spatiotemporal Environment and Robot Feature Map for Long-Horizon Mobile Manipulation

移动机器人做收拾房间这种长任务,要一直知道自己在哪、周围什么变了、任务做到哪一步,只看当前画面很难答上来。SERF 维护一张随时间更新的特征地图,把环境里的物体和机器人自己的身体都表示成同一空间里的一堆特征点:物体动了就跟着刚体跟踪更新,机器人的点按关节角度算出位置。VLA 策略除了图像,还分别以机械手和机器人底座为中心,从这张图上取近处和大范围的特征当输入。在 BEHAVIOR-1K 的三个家务任务上,平均完成进度从 44.0% 提到 58.7%,去没到过的区域时提升更明显。

Sunghwan Kim, Byeonghyun Pak, Kehan Long, Yulun Tian, Nikolay Atanasov
OpenReview·2026-09-04·Relevance 4 · Novelty 4 · Practical 4 · Evidence 3 · Timely 5
09 3.95

In-Context Learning World Models for Robot Dual-Arm Manipulation of Soft Garment with Partial Observations

叠衣服难,是因为布料大半被自己挡住,而且同样一拉,厚布和薄布的变化完全不同。人看几眼就能猜出衣服的形状和料子,这篇让机器人也这么做:用一个 transformer 世界模型,在大量仿真布料数据上训练,输入最近几帧看到的局部点云,补全整件衣服的形状,并预测下一个动作会让它变成什么样。料子的软硬不用重新训练,模型从输入的这几帧历史里自己推出来,所以换衣服、换料子、换机器人都不用更新权重。接上一个按目标形状规划动作的模块后,双臂叠衣服在仿真和真机上的重建精度、预测准确度和成功率都有提升。

Hengyi Sim, Quentin Rouxel, Dennis Hong, Darwin Caldwell, Fei Chen
arXiv·2026-10-22·Relevance 5 · Novelty 4 · Practical 3 · Evidence 3 · Timely 4
10 3.40

AGIBOT introduces Worken to measure robot productivity at AGIBOT Innovation Day 2026

机器人公司常拿造了多少台、卖了多少台说话,但这说明不了机器人到底干了多少活。智元在 2026 创新日上提出 Worken,名字取自 Work 和 Token,意思是有效的智能工作时长。它由三项相乘:真正在现场干活的机器人数量、自主工作的时长(不算开机待着的时间)、以及和人工标准相比的产出效率。智元还发布了新的机器人、模型和操作系统框架。这个指标目前只是一个提议,但它把衡量重点从出货量转到了实际产出上,对评估机器人部署是否划算更有参考意义。

技术博客·2026-10-29·Relevance 4 · Novelty 3 · Practical 3 · Evidence 2 · Timely 5

其他赛道今日

点击切换

开源雷达

GitHub / HuggingFace 热门 · 5 个项目
Alibaba-DAMO-Academy/RynnUnify-Agentic-Reasonerpipeline: image-text-to-text; tags: transformers, safetensors, qwen3_vl, image-text-to-text, rynnunify, embodied-ai, visual-reasoning, reinforcement-learningmodel · ★ 3 · 2026-10-22 · HuggingFaceAlibaba-DAMO-Academy/Rynn-VPRynn-VP: Long-Horizon Visual Planning Benchmark Rynn-VP evaluates visual plans for everyday manipulation in real indoor scenes. Given a natural-language task and an initial image, a system produces a candidate video or an ordered sequence of step images. Evaluation examines the a; tags: language:en, license:cc-by-nc-4.0, size_categories:n<1K, region:us, visual-planning, embodied-ai, video-generation, multimodaldataset · ★ 1 · 2026-10-25 · HuggingFaceAlibaba-DAMO-Academy/RynnUnify-GEU-BenchRynnUnify-GEU-Bench RynnUnify-GEU-Bench is the GEU (Generation Enhanced Understanding) benchmark used for the RynnUnify family. It contains 2000 multi-turn samples across 10 subsets and 3 task families, each paired with its source images and a stored rollout video. Each record wa; tags: task_categories:visual-question-answering, language:en, license:other, size_categories:1K<n<10K, region:us, embodied-ai, spatial-reasoning, video-understandingdataset · ★ 1 · 2026-10-29 · HuggingFaceTencentARC/WorldCrafter-Fastpipeline: image-to-video; tags: diffusers, safetensors, arxiv:2609.24984, worldcrafter, text-to-video, camera-control, image-to-video, diffusers:WorldCraftermodel · ★ 24 · 2026-09-21 · HuggingFaceinternlm/Atria-Dawntags: safetensors, glm_moe_dsa, arxiv:2609.15818, region:usmodel · ★ 14 · 2026-10-23 · HuggingFace