即刻App年轻人的同好社区
下载
机器人讨论组
来聊聊十八般武艺的机器人🤖
30207人已经加入
- π0.7：一个具备涌现能力的可引导模型
π0.7，它在泛化能力上实现了阶段性的跃升。π0.7是一个通用模型，能够以与经过微调的专家模型相同的性能执行广泛的灵巧任务，但更重要的是，它能够遵循新的语言指令，并执行在其训练数据中从未见过的任务。在我们的实验中，我们看到 π0.7 展现出了组合泛化 (compositional generalization) 的初步迹象，能够重新组合各种任务中的技能来解决新问题，比如使用新的厨房电器，甚至能让一个全新的机器人在完全没有相关数据的情况下折叠衣物。
虽然这种泛化能力一直被认为是机器人基础模型的关键优势，但迄今为止展示的实际模型并没有表现出我们从大型语言模型（LLM）中看到的那种广泛的组合泛化能力。LLM 可以以新的方式组合其训练数据中的概念：如果一个 LLM 知道如何将英语翻译成法语，并且知道如何生成 JSON 输出，它就可以直接提供 JSON 格式的翻译。视觉-语言-动作（VLA）模型可以理解多种语义概念，但尚未被证明能够以新的方式组合技能，比如使用新工具或新厨房电器。即使是对于在训练中见过的技能，通常也需要通过对模型进行该技能的微调才能获得最佳结果，这很像早期的语言模型需要针对特定问题领域进行微调一样。
一个真正的通用模型应该能够开箱即用地执行所有技能，并能够将它们重新组合以解决新任务。π0.7 展示了这种通用能力的初步迹象：它可以像我们之前展示的由强化学习（RL）微调的 π* 0.6 专家模型一样，以相同的速度和鲁棒性执行灵巧操作技能；它能够组合和重构它学到的技能来解决新任务；并且它能比我们以前的模型更有效地在不同的机器人平台、场景和任务之间进行泛化。无论从精细操作到长周期的家庭行为，所有这些都只需要这一个开箱即用的模型。
是什么让 π0.7 的泛化能力如此广泛？
在提示（prompt）中添加多样化的上下文。
利用包含多样化条件约束的更多数据。
组合任务泛化。
跨实体（跨形态）迁移。
基于速度和最优性的条件约束。
在灵巧任务上的开箱即用性能。
下一步是什么？
像 π0.7 这样强大且可控的模型，未来可能会通过让模型“思考”执行任务的可能方法，利用其遵循多样化提示的能力将这些想法转化为行动，然后再反思结果以修改任务计划，从而解决更复杂的未知任务。有效的提示遵循和泛化不仅让人们能够更好地指挥机器人，更让现代基础模型能够将其语义泛化能力成功转化为真实的物理泛化能力。
Blog: www.pi.website
Paper: www.pi.website
1 00 - 拿到了一束自变量机器人插的花，用时三分钟吧，没有想象中迅捷，但核心的点是视觉模型解决了对不规则物体的稳定操作，也无需遥控和编程，慢点，但它能搞定。
自变量发布了Wall-B大模型，能处理随机环境里的各种物件，具备部件级理解，譬如识别杯子的朝向、材质、形状、把手等等。另外还有力反馈系统，控制机械臂把握、拿捏的力度。
在理解和感知这个世界。
用了统一内存架构，这种架构在2026年成了高性能AI的关键技术，即CPU（中央处理器）、GPU（图形处理器）、NPU（神经网络处理器）共同享用同一块物理内存池，让整个系统的流转效率上升到新的高度，可以在本地运行参数更多、能力更强的模型。
自变量是一家爱攒现实世界数据的激进公司，它把实验室那种纯净环境完成的操作，看成甜水数据，更重视采集具身智能的牛奶数据，喜欢去真实家庭训练模型，带着产品经理、技术人员造访了上百家志愿者的家，看到过很整洁及很混乱的各种环境。
这些年，网上有一些帖子吐槽自变量机器人带着三个工作人员上门服务，“这得多浪费钱啊？”等等疑惑。这些就是对Wall-A到Wall-B的蝶变标注了。
对了，自变量CEO还宣布B轮拿到了小米战投。
5月25日正式入驻真实家庭。
我个人觉得，激动和吐槽都会发生。
“所有伟大的生命，都是从踉踉跄跄的第一步开始的。”
20 41
