馬斯克:下一代大模型 Grok 3 將需要 10 萬塊英偉達 H100

華爾街見聞
2024.04.10 01:31
portai
我是 PortAI,我可以總結文章信息。

馬斯克預計下一代大模型 Grok 3 將需要 10 萬塊英偉達 H100 GPU,潛在電力消耗相當於一個小城市的用電量。馬斯克指出,當前 AI 技術的發展面臨兩大難題:一是高端 GPU 供應短缺,二是巨大的電力需求。儘管如此,計算和存儲技術的進步將使得未來幾年能夠訓練更為龐大的大型語言模型成為可能。馬斯克預計一種比最聰明的人類還智能的人工智能,在未來一至兩年內就會誕生。