Jeff Dean & Noam Shazeer — 25 years at Google: from PageRank to AGI

摘要

Jeff Dean 與 Noam Shazeer 回顧 Google 25 年發展，從 PageRank 到 AGI 的演進。探討硬體與演算法如何相互促進，以及現代大語言模型架構的技術細節。

An interview with Google's Jeff Dean and Noam Shazeer discussing their 25-year journey from foundational systems to modern AI and AGI.

摘要、重點與章節標題由語言模型整理，細節（誰說的、數字、先後）可能有誤；要引用請以原始內容為準。

重點

• Google 25 年從搜尋到 AI 的技術演進歷程。
• 硬體限制如何驅動演算法與架構創新。
• 大型模型訓練中的同步與非同步挑戰。

章節

依話題轉折切分，標題由 AI 產生

1. 05:29Moore 定律演變與硬體設計考量
2. 14:532007 年機器翻譯論文與 DARPA 競賽
3. 26:44AI 如何重塑 Google 資訊檢索與 AGI
4. 1:02:39大模型訓練中的頻寬挑戰與同步機制
5. 1:06:30神經網路對雜訊的容忍度與除錯難題
6. 1:12:44人工智慧加速趨勢與軟體開發模式轉變
7. 1:23:32回顧早期搜尋成長與 Gemini 團隊樂趣
8. 1:27:11推測 2030 年大規模推理算力需求
9. 1:33:13探討混合專家模型與持續學習挑戰
10. 1:52:51比較人工神經元與生物大腦差異
11. 2:02:54反思技術發表時機與競爭對手影響
12. 2:05:43分析 Gemini 優勢與搜尋領域經驗
13. 2:09:35分享跨領域突破與職業長青秘訣

提到的工具與公司

• TensorFlow
• Mesh TensorFlow
• MapReduce
• BigTable
• Gemini

適合誰看

對 AI 演進、大模型架構或 Google 技術史感興趣的開發者與研究者。

摘要依據

講者

Dwarkesh Patel

依據

語音轉文字

為什麼排在這裡

人氣

0.50

新鮮

0.10

在主題頁與搜尋結果裡，名次由相關、人氣、新鮮三個分數決定；這一頁沒有搜尋的關鍵字，所以沒有相關分數。排序怎麼算

相關內容

• Decoding Google Gemini with Jeff DeanPodcast ・ Google DeepMind: The Podcast ・ 53 分鐘
• 谷歌AI的14年、Gemini翻身之战，与视觉理解模型：专访DeepMind前核心科学家Andrew Dai｜Neolabs特辑影片 ・ 硅谷101 ・ 1 小時 4 分（在新分頁開啟原站）
• The arrival of AGI | Shane Legg (co-founder of DeepMind)影片 ・ Google DeepMind ・ 53 分鐘
• Logan Kilpatrick on Who Ships AGI, DeepMind and the Problem With More SoftwarePodcast ・ The AI Native Dev ・ 38 分鐘
• Google Just Took A Massive Step Towards AGI影片 ・ TheAIGRID ・ 8 分鐘（在新分頁開啟原站）
• The history and future of AI at Google, with Sundar PichaiPodcast ・ Cheeky Pint ・ 1 小時 9 分