NVIDIA 發佈了一系列技術，旨在加速物理人工智能系統的發展，擴大其在類人機器人、自動駕駛車輛、半導體製造及工業自動化方面的推進。此次在 GTC 台北會議上宣佈的最新產品包括 Cosmos 3，這是一個開放的物理人工智能基礎模型，以及一款基於其 Isaac GR00T 平台的新型參考類人機器人。除此之外，還有開源的機器人和工業人工智能代理工具，以及與 TSMC 合作的新的人工智能驅動的半導體製造計劃。
這些公告共同突顯了 NVIDIA 構建完整物理人工智能生態系統的戰略，涵蓋從合成數據生成和模擬到現實世界部署的各個方面。
NVIDIA 創始人及首席執行官黃仁勳表示：「物理人工智能的重大突破即將到來，這得益於多模態推理語言、視覺和世界模型的突破。」他補充道：「Cosmos 3 系列開放的前沿全模型使開發者在構建能夠感知、推理、計劃和在物理世界中行動的機器人、自動駕駛車輛和視覺人工智能方面獲得了跨世代的能力飛躍。」
Cosmos 3 推動物理智能的發展
此次公告的核心是 Cosmos 3，NVIDIA 將其描述為世界上首個完全開放的全模型，能夠在單一系統中理解和生成文本、圖像、影片、環境聲音和動作。該模型基於混合變壓器架構，結合了推理和內容生成。NVIDIA 表示 Cosmos 3 可以作為視覺-語言模型、模擬物理環境的世界模型，或作為機器人行動模型的基礎。該公司聲稱，該模型在世界生成、機器人行動策略和視覺理解的多個開放模型基準中名列前茅。
Cosmos 3 有多個版本可供選擇，包括針對高精度機器人和自動駕駛車輛應用的 Cosmos 3 Super 及用於更快推斷的 Cosmos 3 Nano。NVIDIA 的新物理人工智能技能自動化了培訓、測試和部署工作流。
NVIDIA 推出開源工具以簡化開發流程
NVIDIA 還推出了一系列開源的物理人工智能技能和工具，允許人工智能代理在機器人、視覺人工智能、自動駕駛、醫療保健和工業數位雙胞胎等領域執行任務。這些工具將複雜的開發工作流轉換為可重複的、代理可執行的過程，能夠自動化數據生成、模擬、培訓和部署。
對於機器人研究者，NVIDIA 推出了 Isaac GR00T 參考類人機器人，這是一個開放的參考設計，結合了 Unitree H2 Plus 類人機器人、Sharpa 精巧手部、Jetson Thor 內置計算和 Isaac GR00T 軟件堆疊。該平台旨在簡化類人機器人的開發，通過將硬件、模擬、培訓和部署集成到一個系統中，進行簡化。包括 Ai2、蘇黎世聯邦理工學院、史丹福機器人中心及加州大學聖地亞哥分校在內的研究機構計劃使用該平台。
NVIDIA 與 TSMC 深入合作以優化半導體製造
NVIDIA 也透過與 TSMC 的合作，將人工智能更深入地引入半導體製造。這家晶片製造商正在使用 NVIDIA CUDA-X 函式庫和人工智能模型進行計算光刻、晶體管模擬、過程控制、晶圓檢查和晶圓廠排程。根據 NVIDIA 的説法，TSMC 在計算效率上取得了進步，同時使用 NVIDIA Metropolis 和 TAO Toolkit 來提升納米級缺陷的檢測能力。
黃仁勳表示：「NVIDIA 和 TSMC 共同合作近三十年，以推動計算技術的極限。TSMC 將 NVIDIA 的人工智能和加速計算引入晶圓廠，應對一些世界上最複雜的設計和製造挑戰，通過模擬、優化和人工智能。」NVIDIA 也在探索物理人工智能在自動駕駛車輛中的應用，推出了 Alpamayo 2 Super，這是一個擁有 320 億參數的推理模型，旨在幫助機器計程車理解、計劃和應對複雜的道路情況。
項目 規格 Cosmos 3 版本 Cosmos 3 Super, Cosmos 3 Nano 參考類人機器人設計 Unitree H2 Plus, Sharpa 手部, Jetson Thor 推理模型 Alpamayo 2 Super (320 億參數)
📬 免費訂閱 TechRitual 科技精選
按「免費訂閱」即同意收到 TechRitual 嘅科技資訊及優惠。可隨時取消訂閱。
