看影片（在新分頁開啟原站）連到 YouTube・AI Engineer
摘要
Derek Meegan 解釋為何 99% 準確率的瀏覽器代理在長流程中成功率僅約 36%，並提出以交易為單位衡量成功、允許重試與使用確定性工具。透過將下載、驗證與登入邏輯從模型中移除，並建立標準作業程式技能，可大幅提升生產環境的穩定性與可維護性。
Derek Meegan explains why high per-step accuracy fails in long browser agent workflows and how to build robust production systems using deterministic tools and transaction-based metrics.
摘要、重點與章節標題由語言模型整理，細節（誰說的、數字、先後）可能有誤；要引用請以原始內容為準。
重點
- 99% 單步成功率在 100 步流程中僅約 36% 成功，需以交易為單位衡量。
- 將下載、驗證與登入等確定性工作從模型中移除，減少失敗風險。
- 建立標準作業程式技能與 OCR 驗證，提升系統穩定與可維護性。
章節
依話題轉折切分，標題由 AI 產生
- 00:00Intro
- 00:12Demo vs production
- 00:47Agenda
- 01:27How agents interact with the web
- 02:32Text, screenshots or code
- 03:17Types of browser trajectories
- 04:32No partial credit
- 05:22The 99% → 36% problem
- 06:12Profit = revenue − cost
- 07:37Performance, cost, maintainability
- 08:12What success looks like
- 08:42Per-run vs per-transaction success
- 09:32Breaking down cost
- 10:11Maintenance over time
- 10:46Risks: the web fights back
- 12:06Architecture: automating an insurance portal
- 13:01A deterministic download tool
- 13:31Verifying with OCR
- 13:56Pulling out authentication
- 14:36Skills as standard operating procedures
- 15:26The final system
- 16:21Welcome to production
提到的工具與公司
- Browserbase
- CDP
- JavaScript
- Serverless
適合誰看
負責開發或部署瀏覽器自動化生產系統的軟體工程師。
摘要依據
- 講者
- Derek Meegan
- 依據
- 自動字幕
為什麼排在這裡
- 人氣
- 0.74
- 新鮮
- 0.97
在主題頁與搜尋結果裡，名次由相關、人氣、新鮮三個分數決定；這一頁沒有搜尋的關鍵字，所以沒有相關分數。排序怎麼算
相關內容
- AI 说“90% 有把握”，你敢让 Agent 自动执行吗？｜Jev：概率校准与 Agent 决策影片 ・ 唐国梁Tommy ・
- Beyond the Benchmark: How Parallel Web Systems Builds Reliable Web Agents影片 ・ CoreWeave ・
- The Agent Said It Was Done. The Database Disagreed.文章 ・ Hugging Face Blog ・
- Your Agent Aced the Task. Will It Do It Again?文章 ・ Hugging Face Blog ・
- You're using AI agents wrong影片 ・ Theo - t3․gg ・ 49 分鐘 ・
- Episode 71: Durable Agents - How to Build AI Systems That Survive a Crash with Samuel ColvinPodcast ・ Vanishing Gradients ・ 51 分鐘 ・
這個來源最近的內容
摘要由 AI 根據原文產生，可能有誤；完整內容請看原站。看影片（在新分頁開啟原站）