根據特斯拉爆料人士 Sawyer Merritt 爆料，特斯拉將於美國時間本週一上線備受期待的，由 1 萬片 H100 組成的超級計算機。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/e8a44b33-1e08-4f74-933e-ee89e438f6f8.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="212" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/e8a44b33-1e08-4f74-933e-ee89e438f6f8.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
這個 GPU 集羣將用來訓練包括特斯拉 FSD 自動駕駛系統在內的各種 AI 應用。
這個 GPU 集羣由一萬個英偉達 H100GPU 組成，能提供 340 FP64 PFLOPS 的峯值算力，為 AI 提供 39.58 INT8 ExaFLOPS 的峯值算力。
這個算力峯值超過了之前全世界排名第四的超算 Leonardo 所能提供的算力。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/b05aaa46-6809-4998-abe5-3d7a79c0dd4a.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="450" height="622" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/b05aaa46-6809-4998-abe5-3d7a79c0dd4a.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
憑藉這台超級計算機，特斯拉可以迅速訓練並更新它的全自動駕駛（FSD）技術。
這個 H100 集羣不僅讓特斯拉相比其他汽車製造商更具競爭力，而且將使特斯拉擁有誇張的算力儲備。
馬老闆上個月甚至發推稱：「坦白説……如果英偉達能提供足夠的 GPU，我們可能就不需要 Dojo。」
<h2>特斯拉的算力儲備有什麼用？</h2>
而且對於特斯拉來説，這個 H100 集羣不單代表了無與倫比的算力，還使得擁有海量數據的特斯拉能將這些數據變現的能力。
特斯拉工程技術總監 Tim Zaman 發推稱，特斯拉上線的 H100 集羣，將被用於訓練視頻數據。
特斯拉擁有的訓練數據集可能是全世界最大的，熱連接緩存（hot tier cache）大小超過了 200PB，這比大語言模型的數據規模要高几個數量級！
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/cacc6ec6-66df-4fed-a705-dddcad59c879.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="203" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/cacc6ec6-66df-4fed-a705-dddcad59c879.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
同時他還稱，特斯拉是真正「物理上」擁有這些 GPU 集羣和算力。很多其他的公司宣稱自己「擁有」多大算力時，其實他們只是能「租到」這些算力。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/47f4c035-f8f5-46ba-9a7a-4c159d9fcf4a.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="156" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/47f4c035-f8f5-46ba-9a7a-4c159d9fcf4a.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
而對於目前的特斯拉來説，上線 H100 集羣的意義就在於能夠極大地加快最新版 FSD V12 的上線速度。
馬斯克在兩個月之前稱，最新版的 FSD V12 版本更新將不再是「測試版」的自動駕駛技術，暗示了這次更新可能真的能帶來完全體的自動駕駛技術。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/2bb03517-ddb8-4f94-b9c2-6e5b8bd8c579.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="431" height="89" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/2bb03517-ddb8-4f94-b9c2-6e5b8bd8c579.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
而就在前幾天，馬斯克自己開着特斯拉來了一場全網關注的 FSD V12 的演示直播。
直播中，新版的 FSD V12 展示出了「絲滑的自動駕駛性能」和出色的駕乘體驗。
FSD V12 背後的技術原理，就是將海量的優秀司機駕駛的實時視頻，通過神經網絡訓練成一個全新的自動駕駛 AI 來駕駛汽車。
特斯拉上線這個 H100 集羣后，將會大大加快 FSD V12 的訓練速度，這也被上文中特斯拉工程總監的帖子所證實。
馬斯克在推特上稱，V12 可能將在不到半年的時間內更新上線！
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/f53eccc5-2b3d-4e27-9409-ee5ae02858d0.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="341" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/f53eccc5-2b3d-4e27-9409-ee5ae02858d0.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
而除了特斯拉 FSD V12 之外，特斯拉的人形機器人 Optimus 也將從特斯拉儲備的巨大算力中獲益。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/bc6a4b73-6f46-4656-b197-31251e09cb41.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="330" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/bc6a4b73-6f46-4656-b197-31251e09cb41.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
網友分析到，因為智能機器人的工作原理，本質上也是從視頻信號中去理解周圍的世界。這和自動駕駛的本質是一樣的，只是形態和控制方式有區別。
<h2>特斯拉超算 Dojo 怎麼樣了？</h2>
Tesla 上線 H100 GPU 集羣的同時，也在激活自己研發製造的超算 Dojo。下圖是特斯拉內部對 Dojo 計算能力的預測。
2024 年 10 月，Dojo 的計算能力也有望達到 100 exaflops。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/d57788bc-f455-4248-a7b8-0850d579f973.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="345" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/d57788bc-f455-4248-a7b8-0850d579f973.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
在 2021 年的 AI Day 上，特斯拉第一次公佈了自己超算——Dojo。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/7530e140-a11b-43c0-86b5-555f77348672.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="349" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/7530e140-a11b-43c0-86b5-555f77348672.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
快兩年時間過去了，在今年 7 月推特（現 X）科技爆料賬户 Whole Mars Catalog 爆料 Dojo 已經正式開始開始工作了。
這一消息也得到了馬斯克本人的點贊確認。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/ae9a346a-833d-4636-a448-38e989bb6531.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="1034" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/ae9a346a-833d-4636-a448-38e989bb6531.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
整個超算由這樣的計算模塊構成
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/c022bdc6-7166-481d-8e9a-f64ecd32c3b7.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="360" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/c022bdc6-7166-481d-8e9a-f64ecd32c3b7.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
每個模塊上有 25 個 Soc，模塊之間通過高速寬帶連接。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/2504b301-4d68-4999-bf85-dfbdb379f3a0.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="209" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/2504b301-4d68-4999-bf85-dfbdb379f3a0.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
然後將模塊用主機盒固定起來，所有的接口都集成在了系統托盤上。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/71ccf8c4-2292-4ff2-9cf3-304795024612.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="203" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/71ccf8c4-2292-4ff2-9cf3-304795024612.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
然後將兩個帶有主機組件的系統托盤安裝到一個 Dojo 機櫃中。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/f168ff0e-62a1-4955-b332-a7cd0775a014.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="640" height="360" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/f168ff0e-62a1-4955-b332-a7cd0775a014.png/query-aW1hZ2VWaWV3Mi8yL3cvNjQw"/>
頂部的圖例展示的是每個 Soc 的負載。
而現在，擁有 Dojo 和 1 萬塊 H100 集羣的 Tesla，正式加入了算力軍備競賽當中。
本文來源：新智元，原文標題：《3 億刀，特斯拉 1 萬個 H100 集羣上線！超算 Dojo7 月已經開工，全力加速 L4 自動駕駛》<div>風險提示及免責條款</div>
 <div>
 市場有風險，投資需謹慎。本文不構成個人投資建議，也未考慮到個別用户特殊的投資目標、財務狀況或需要。用户應考慮本文中的任何意見、觀點或結論是否符合其特定狀況。據此投資，責任自負。
 </div>

特斯拉

特斯拉 10000 塊 H100 GPU 集羣上線，加速 FSD V12 落地。擁有自家超算的和 H100 集羣的特斯拉，正式入局算力軍備競賽！