Robot-Use Agents: Why General-Purpose Models May Win in Robotics

摘要

本訪談探討「機器人使用代理」概念，即通用模型能否控制不同機器人。訪談者介紹了 Waddle Labs 與 RoboCurve 的團隊，他們透過「程式碼為政策」、「在上下文學習」及「編譯技能」等技術，讓通用大模型具備執行物理任務的能力。內容涵蓋從早期 RT2 研究到現代工具使用與技能編譯的演進，並討論了如何將 AI 學習壓縮為高效政策，以實現未來通用機器人。

This interview explores the concept of 'robot-use agents,' where general-purpose models control robots. Co-founders of Waddle Labs and RoboCurve discuss techniques like code-as-policies, in-context learning, and skill distillation to enable LLMs to perform physical tasks. The discussion covers the演进…

重點

• 訪談介紹了 Waddle Labs 與 RoboCurve 團隊，他們透過通用模型控制機器人。
• 核心技術包括程式碼為政策、在上下文學習以及將技能編譯為高效政策。
• 未來通用機器人將能在未見任務與環境中執行自然語言指令。

章節

依話題轉折切分，標題由 AI 產生

1. 00:00Intro + The Rise Of Robot Use Agents
2. 04:07The Bitter Lesson for Robotics
3. 07:40From Coding Agents to Robot Policies
4. 10:41In-Context Learning vs Model Training
5. 14:22Building a Harness for Robot Control
6. 17:50Turning Robot Actions Into Reusable Skills
7. 20:55How AI Models Learn the Physical World
8. 26:05How Close Are We To General Purpose Robots?

提到的工具與公司

• RoboCurve
• RT2
• VLAs

適合誰看

對 AI 機器人、大模型應用及未來技術趨勢感興趣的讀者。

摘要依據

依據

自動字幕

為什麼排在這裡

人氣

0.97

新鮮

0.98

在主題頁與搜尋結果裡，名次由相關、人氣、新鮮三個分數決定；這一頁沒有搜尋的關鍵字，所以沒有相關分數。排序怎麼算

相關內容

• Coding Agents Are Secretly General AgentsPodcast ・ Agentic Conversations（原 MLOps.community） ・ 1 小時 12 分
• Ep 70: Karol Hausman and Danny Driess (Physical Intelligence) Unpack the Most Recent Breakthroughs & Path to Generalist RobotsPodcast ・ Unsupervised Learning ・ 1 小時 10 分（在新分頁開啟原站）
• E206｜临近机器人GPT-3时刻，具身智能开源模型的加速演进Podcast ・ 硅谷101 ・ 1 小時 11 分（在新分頁開啟原站）
• EP 44.【AI年终特辑3】具身智能深度对话：从学术到产业，机器人的ChatGPT时刻来了吗？Podcast ・ OnBoard! ・ 1 小時 51 分（在新分頁開啟原站）
• 98. 逐篇讲解机器人基座模型和VLA经典论文——“人就是最智能的VLA”Podcast ・ 张小珺Jùn｜商业访谈录 ・ 2 小時 30 分（在新分頁開啟原站）
• Kay Ke: Inside Physical Intelligence's Open-Source Robot Models and the Robotics Landscape影片 ・ Zhang Xiaojun Podcast ・ 3 小時 46 分（在新分頁開啟原站）