NVIDIA 利用 Apple Vision Pro 捕捉遙控示範並控制人形機器人

Apple 可能對 NVIDIA 的需求不大,但這並不意味著 NVIDIA 對 Apple 沒有需求。具體來說,NVIDIA 利用 Apple Vision Pro 頭戴顯示器來開發其人形機器人。以下是相關內容:

該視頻是 NVIDIA 針對機器人技術工作的一部分推廣活動。

在新聞稿中,Apple Vision Pro 被提及兩次,作為控制 NVIDIA 機器人的工具,特別是在 MimicGen NIM 微服務方面:

訓練人形機器人的基礎模型需要大量的數據。捕捉人類示範數據的一種方法是使用遙控操作,但這個過程變得越來越昂貴且耗時。

在 SIGGRAPH 電腦圖形會議上展示的 NVIDIA AI 及 Omniverse 支援的遙控操作參考工作流程,允許研究人員和 AI 開發者從少量的遠程捕捉人類示範中生成大量合成的運動和感知數據。

首先,開發者使用 Apple Vision Pro 捕捉少量的遙控示範。然後,他們在 NVIDIA Isaac Sim 中模擬這些錄音,並利用 MimicGen NIM 微服務從錄音中生成合成數據集。

開發者使用真實和合成數據訓練 Project GR00T 人形基礎模型,使開發者能夠節省時間並降低成本。接著,他們在 Isaac Lab 中使用 Robocasa NIM 微服務生成經驗,以重新訓練機器人模型。在整個工作流程中,NVIDIA OSMO 無縫地將計算任務分配給不同的資源,為開發者節省了數周的管理工作。

欲了解更多詳情,請參閱完整新聞稿。

 

日本電話卡推介 / 台灣電話卡推介
更多儲值卡評測請即睇:SIM Card 大全
https://www.techritual.com/category/sim-card-review/

Henderson
Henderson
Henderson 主要擔任「炒稿記者」的職責,以翻譯最新科技,手機 電動車等消息為每天的工作。