影片進階EN5,455 次觀看
Physical AI's Next Bottleneck Is Finding the Right Video — Rafael Levi, Bright Data
來源 AI Engineer
看影片(在新分頁開啟原站)連到 AI Engineer
摘要
Rafael Levi 指出機器人學習已進入資料收集階段,公開網路上的自然動作影片是解決資料匱乏的關鍵。透過 Bright Data 的技術,可從數十億小時的影片精準篩選出特定動作片段,大幅降低無效資料的浪費與訓練成本。
Rafael Levi discusses how public video data solves the robotics training shortage and introduces Bright Data's action-based video indexing solution.
摘要、重點與章節標題由語言模型整理,細節(誰說的、數字、先後)可能有誤;要引用請以原始內容為準。
重點
- 機器人訓練資料量遠少於語言與影像模型,自然動作影片是最佳來源。
- 人工拍攝的偏頗資料與模擬環境無法滿足真實物理世界的訓練需求。
- Bright Data 提供按動作索引與篩選影片的功能,精準提供訓練片段。
章節
依話題轉折切分,標題由 AI 產生
- 00:00Intro
- 00:50The AI isn't the hard part anymore. The data is
- 01:15A short history of robots learning from video
- 02:40Trillions of words vs. about a million robot videos
- 03:15Why staged recordings make biased data
- 04:35Why simulation and teleoperation don't scale
- 05:14The web as a training source
- 06:141 million hours of video, 62 hours of robot data
- 06:54Learning actions from frame-to-frame motion
- 07:58Throwing away 96% of the video
- 08:33Search first, collect second
- 10:03Demo: finding the exact action clips
- 11:38The API and use cases beyond robotics
- 12:48What comes back: timestamps, scores and frames
- 13:33Self-driving, dashcams and physics
- 15:52Wrap-up
提到的工具與公司
- Stable Video Diffusion
- Vimeo
- Wimo
適合誰看
從事機器人開發、自動駕駛系統或需要大量動作資料訓練 AI 模型的工程師與研究者。
摘要依據
- 講者
- Rafael Levi
- 依據
- 自動字幕
為什麼排在這裡
- 人氣
- 0.69
- 新鮮
- 0.96
在主題頁與搜尋結果裡,名次由相關、人氣、新鮮三個分數決定;這一頁沒有搜尋的關鍵字,所以沒有相關分數。排序怎麼算
相關內容
- 揭秘数采工厂:稀缺的机器人数据,到底难在哪儿?|机器人特辑影片 ・ 硅谷101 ・ 39 分鐘
- Xie Chen : Data Survey — History, Landscape, Pyramid Structure, and Recipes for AI and Robotics Data影片 ・ Zhang Xiaojun Podcast ・ 2 小時 37 分
- 他發明了「微工廠」:20 分鐘訓練機器人 AI、資料只要 1/10、成功率 97%影片 ・ 科技立委葛如鈞·寶博士 ・ 7 分鐘(在新分頁開啟原站)
- Why Video Agent models are next — Ethan He, xAI Grok ImaginePodcast ・ Latent Space ・ 1 小時 43 分
- Ep 70: Karol Hausman and Danny Driess (Physical Intelligence) Unpack the Most Recent Breakthroughs & Path to Generalist RobotsPodcast ・ Unsupervised Learning ・ 1 小時 10 分
- 机器人触觉的爆发前夜:五大技术路线、数据困局与模型之争|机器人系列影片 ・ 硅谷101 ・ 43 分鐘(在新分頁開啟原站)
摘要由 AI 根據原文產生,可能有誤;完整內容請看原站。看影片(在新分頁開啟原站)
