近日，英偉達首席執行官黃仁勳接受了科技自媒體 Tiff In Tech 的採訪。他分享了英偉達在物理 AI 領域的最新突破。
黃仁勳表示，通用人形機器人的技術 “難以實現”，但隨着 Transformer 模型、大型語言模型以及基礎模型方面的突破，必要的技術 “近在眼前”，英偉達能夠在這個領域做出真正的貢獻。
物理 AI 指能理解和交互物理世界的 AI 系統，這一技術將徹底改變機器人的訓練方式。英偉達推出的 Cosmos 和 Omniverse 平台能夠在虛擬環境中模擬真實世界，大大縮短了機器學習的時間。
黃仁勳表示，英偉達的技術可以將機器人的訓練時間從多年縮短至幾小時，極大提高了效率和可行性。
黃仁勳還特別強調了英偉達 “三台計算機” 自動駕駛解決方案的安全性。這種涉及三個獨立計算機協同工作的系統，可以提供更高的可靠性和冗餘性，從而增強自動駕駛汽車的安全性能。
黃仁勳表示，在接下來的十年裏，人工智能的應用科學將變得尤為重要。與上一代主要關注如何應用計算機來解決芯片設計和軟件工程問題不同，新一代面臨的挑戰是如何將 AI 技術應用到各個行業和領域中，以解決實際問題並創造價值。
以下為對話亮點總結：
<blockquote>
<ul>
<li>通用人形機器人技術將最為實用，因為我們的世界是圍繞人類自身需求而建造的。這項技術極其難以實現。然而，隨着 Transformer 模型、大型語言模型以及基礎模型方面的突破，我們相信，我們已經具備了在這一領域做出實質性貢獻的技術基礎。</li>
<li>教導通用機器人的方式類似於教導一個人。利用 Isaac Sim，我們可以進行幾次人類示範，然後使用 AI、Cosmos 和 Omniverse 生成大量不同場景。</li>
<li>Omniverse 創建的這個虛擬世界，實際上是現實世界的數字孿生（digital twin），這正是它的設計初衷。</li>
<li>Omniverse 就是一個虛擬遊樂場。對機器人來説，它感覺就像真實世界一樣，因為這個虛擬環境遵循物理定律，一切看起來都很真實。機器人無法分辨虛擬世界和現實世界的差別，這正是關鍵所在。</li>
<li>我們為自動駕駛汽車行業提供服務的方式是通過三個計算機系統：一個用於訓練 AI，一個用於模擬 AI，稱為全景宇宙，還有一個用於將 AI 裝入汽車中。</li>
<li>我們這一代人主要關注如何應用計算機來解決芯片設計和軟件工程問題，而新一代則需要思考如何應用 AI 來解決所有這些基本問題。比如，如何將 AI 應用於林業？如何將 AI 應用於海洋學？諸如此類，每個行業，每個科學領域都將受到影響。</li>
</ul>
</blockquote>
以下為訪談全文：
<h2>構建通用機器人：世界模型與人工智能的融合</h2>
Tiff In Tech：
嗨，Jensen。感謝您今天抽出時間與我聊天。你在 CES 上發佈了一些突破性的公告，特別是有一個領域我非常好奇，那就是機器人技術。當談到機器人技術時，使用 Cosmos 或世界基礎模型等工具，什麼最讓你興奮？
黃仁勳：
我們正處於機器人技術的一個不可思議的時代。構建通用人形機器人所需的關鍵技術即將到來。其中一項關鍵技術是理解世界的人工智能模型，就像我們擁有理解語言的人工智能模型一樣。現在有了 ChatGPT 和 Llama 等，我們需要一個世界模型，一個理解世界的語言模型。世界需要機器人。其中一個原因是我們沒有足夠的勞動力。你知道，人口正在老齡化，人們對工作類型的偏好也在改變，出生率在下降，而世界需要更多的勞動力。因此，擁有機器人系統的時機確實相對迫切。
通用人形機器人技術將最為實用，因為我們的世界是圍繞人類自身需求而建造的。這項技術極其難以實現。然而，隨着 Transformer 模型、大型語言模型以及基礎模型方面的突破，我們相信，我們已經具備了在這一領域做出實質性貢獻的技術基礎。
我們需要將幾個方面結合起來：首先，機器人必須理解我們。例如，ChatGPT 的突破確實使這成為可能。但缺少的是，我們現在需要一個理解物理世界的人工智能。它必須理解物理世界的動力學，包括重力、慣性、摩擦，還必須理解空間關係和幾何關係，以及一些常識性的東西，比如對象恆存性（指物體即使暫時看不見也仍然存在的認知）等。
因此，我們着手創建本質上是世界模型的 ChatGPT 或 Llama。它被稱為世界基礎模型（用於理解和模擬物理世界的 AI 模型）。就像語言基礎模型（用於理解和生成人類語言的 AI 模型）一樣，這是一個理解世界的基礎模型。如果我們能創造這樣的東西，那就是 Cosmos，我們將它公開供所有人使用，希望這將真正點燃並加速機器人技術的發展。
<h2>Isaac Sim：虛擬現實賦能機器人高效訓練</h2>
Tiff In Tech：
在教授機器人技術方面，這些技術非常有前景。我瞭解到最近有關 Isaac Sim 的一些新公告，特別是在虛擬現實訓練方面。您如何看待這項技術的未來發展和潛力？
黃仁勳：
訓練 AI 的第一步是要給它們基礎知識，也就是常識知識。第二步是要培養必要技能。教導通用機器人的方式類似於教導一個人。我們通過示範來教學。我們使用人類示範，向機器人展示如何拿起玻璃杯。每次玻璃杯的位置、高度和形狀可能略有不同，但本質上仍是拿起一杯水的動作。利用 Isaac Sim，我們可以進行幾次人類示範，然後使用 AI、Cosmos 和 Omniverse 生成大量不同場景。我們生成各種不同大小、位置和擺放方式的版本，並將這些訓練數據，包括模仿數據提供給機器人學習。這樣，機器人就能學習到大量泛化版本的動作。
Tiff In Tech：
看起來可能有無限多的版本。這正是這項技術解決的問題，通過為機器人提供這些多樣化的訓練版本。
黃仁勳：
沒錯。我們不是隻給機器人一個例子，而是提供數百萬個不同的例子。
<h2>Omniverse：打造機器人訓練的無限可能</h2>
Tiff In Tech：
您還提到了 Omniverse，這讓我非常感興趣，尤其是在製造業等行業的虛擬現實訓練方面。您如何看待這些行業使用 Omniverse 進行訓練的未來發展？
黃仁勳：
機器人行業發展緩慢，主要是因為訓練機器人非常困難。你需要為機器人創造大量的體驗場景。而且在現實世界中訓練機器人也存在安全隱患。因此，我們創造了一個虛擬世界，本質上是一個機器人的遊樂場。
這個 Omniverse 就是一個虛擬遊樂場。對機器人來説，它感覺就像真實世界一樣，因為這個虛擬環境遵循物理定律，一切看起來都很真實。機器人無法分辨虛擬世界和現實世界的差別，這正是關鍵所在。我們在 Omniverse 這個虛擬世界中訓練機器人，為其創造大量學習場景。當機器人學會如何在 Omniverse 中完成任務後，我們將這個機器人大腦轉移到真實的機器人中。如果虛擬到現實的差距（SIM-to-real gap，即仿真環境與真實環境之間的差異）足夠小，機器人就無法察覺差別。這就是令人驚歎的地方。Omniverse 創建的這個虛擬世界，實際上是現實世界的數字孿生（digital twin），這正是它的設計初衷。
Tiff In Tech：
這太神奇了。如果用傳統方法訓練，肯定會消耗大量資源和時間。
黃仁勳：
是的，確實如此。否則，如果要在現實世界中訓練機器人學習行走，它將按照人類的時間進度線性學習。但在全景宇宙 (omniverse，一種虛擬仿真環境) 中，我們可以創建多個不同的多元宇宙 (multiverse，即多重平行世界)，讓機器人並行學習，可能同時以 10 萬種不同的方式學習。這樣，我們就可以將原本需要 10 年才能訓練機器人完成的任務，縮短到幾個小時內完成。
想象一下，如果我們有多元宇宙，我們會變得多麼聰明。就像 Tiffany 的不同版本可以在這裏學習數學，在那裏學習科學，在另一處學習英語，還有地理等等，同時學習所有這些內容。這基本上就是全景宇宙所能實現的。
<h2>英偉達駕駛 AI：多層次安全保障自動駕駛未來</h2>
Tiff In Tech：
這個技術真是令人嚮往。昨天你們還宣佈了另一個領域的進展，就是關於英偉達駕駛 AI，真正增強和提高了自動駕駛汽車的安全性。我知道你們還宣佈了與豐田的合作，這也非常令人興奮。
黃仁勳：
是的，那是一個重大新聞，真的很重要。豐田是世界上最大的汽車公司。
Tiff In Tech：
沒錯，這確實令人非常興奮。你認為英偉達駕駛 AI 的發展前景如何？
黃仁勳：
我們在自動駕駛領域已經深耕多年，現在已經發展成為一個約 50 億美元規模的業務。我們為自動駕駛汽車行業提供服務的方式是通過三個計算機系統：一個用於訓練 AI，一個用於模擬 AI，稱為全景宇宙，還有一個用於將 AI 裝入汽車中。
對於車載 AI 來説，安全就是一切。要解決安全問題，首先算法必須安全。它必須能夠智能地避開危險，知道如何安全駕駛等。
但這些都是算法層面的問題，在更底層，操作系統必須設計得安全。車載計算機必須設計得安全，意味着它不能失效，即使失效也要安全失效。這涉及到一系列非常複雜的技術，包括算法多樣性 (diversity of algorithms，即使用多種算法以提高系統的魯棒性) 和計算冗餘 (redundancy of computing，即設置多重備份計算系統以防止單點故障)。所有這些複雜技術使得安全成為可能。
Tiff In Tech：
這個觀點很有意思。因為從消費者的角度來看，人們通常認為安全更多是關於檢測物體之類的。但正如你所説，它涉及很多層面，一直延伸到算法層面，這才是關鍵所在。
黃仁勳：
沒錯。你擁有的多樣性和冗餘越多，系統就越安全。
Tiff In Tech：
你帶領英偉達在遊戲和人工智能領域取得了諸多突破。在未來十年，你認為哪項新興技術將對我們產生最大影響？
黃仁勳：
毫無疑問，人工智能是我們這個時代最重要的技術。如果你退一步思考，問自己，如果我們能夠擴展智能並將其應用於渠道能力、醫療保健互動、藥物研發、應對氣候變化或開發機器人等，會發生什麼？我們正在研究這些技術，以便應對人口老齡化、人口減少，並通過提高每個行業的生產力來防止和緩解各地的通貨膨脹。人工智能將影響如此多的領域，這就是為什麼我們公司全力投入其中。
現在，人工智能影響着我們所有的其他業務，包括電子產品在內。儘管 GeForce 是推動人工智能發展的重要力量，但 AI 現在反過來又讓 GeForce 在計算機圖形學方面變得更加出色。我們將人工智能和計算機圖形學結合起來所能實現的效果令人難以置信。我們正將人工智能與物理科學相結合，徹底革新了科學計算的方式。我們還將其應用於芯片設計和軟件開發，以設計出更好的芯片和開發更優質的軟件。因此，人工智能影響着我們所做的一切，它也將影響每個行業的方方面面。毫無疑問，這是當今最重要的技術。
<h2>未來技術 AI 趨勢與職業發展</h2>
Tiff In Tech：
這讓我想到一個問題。我的頻道上有很多粉絲和關注者，他們要麼是學習計算機科學的，要麼是在科技領域工作。一個常見的問題是，科技領域有這麼多方向可以選擇。從商業和技術角度看，人工智能似乎確實是一個值得他們繼續深耕的領域。
黃仁勳：
是的，為人工智能的基礎科學做貢獻當然很棒。然而，在接下來的十年裏，人工智能的應用科學將變得尤為重要。
我每天都把 ChatGPT 作為工作夥伴。我一直開着 ChatGPT，向它提問並與之合作解決問題。你必須學會如何與 AI 互動。正如你所知，提示工程確實是一門藝術，其中既有藝術性也有科學性。因此，你需要學會如何與人互動，同樣也要學會如何與 AI 互動。我們需要思考如何將 AI 應用於內容創作、工程、軟件開發、市場營銷、金融或法律等各個領域。
如何將 AI 應用於這些領域是一個值得大量研究和開發的方向。我們這一代人主要關注如何應用計算機來解決芯片設計和軟件工程問題，而新一代則需要思考如何應用 AI 來解決所有這些基本問題。比如，如何將 AI 應用於林業？如何將 AI 應用於海洋學？諸如此類，每個行業，每個科學領域都將受到影響。
Tiff In Tech：
非常感謝你今天抽出時間與我交流。這次對話讓我對未來和即將到來的技術變革感到非常興奮。

優必選

在最新的訪談中，黃仁勳表示，通用人形機器人的技術 “難以實現”，但隨着大型語言模型以及基礎模型方面的突破，必要的技術 “近在眼前”。未來，AI 的應用科學將變得尤為重要。新一代面臨的挑戰是如何利用 AI 技術解決實際問題並創造價值。

- 英偉達 CEO 黃仁勳分享了物理 AI 的最新突破。  
- 該技術能顯著縮短機器人訓練時間，提高效率。  
- 他強調人工智能將在未來十年內影響多個行業。  

華爾街見聞

威士頓

誠邁科技

泉陽泉

商湯-W

英偉達期權收益策略 ETF - YieldMax

2 倍做多英偉達 ETF - GraniteShares

均普智能

天承科技

華立科技

豐田(ADR)

永安林業

坤恆順維

麒麟信安

綠茵生態

科大訊飛

索辰科技

中科創達

耐克

嶽陽林紙

天奇股份

潤和軟件

和遠氣體

Fair Isaac

芯動聯科

OpenAI

半導體 ETF - VanEck Vectors

凌志軟件

同星科技

飛龍股份

半導體 3 倍做多 - Direxion

自動駕駛電動車與技術 ETF - iShares

中巨芯-U

中船特氣

英偉達

華如科技

星網宇達

豐田汽車

自動駕駛和電動汽車 ETF - GlobalX

三孚股份

東土科技

豐田汽車公司

黃仁勳：這是第一次，通用人形機器人的關鍵技術 “近在眼前” 了