英偉達近日正式推出了Cosmos平臺,這一創(chuàng)新舉措旨在為自動駕駛汽車和機器人等物理AI系統(tǒng)的開發(fā)提供強有力的支持。該平臺融合了生成式世界基礎(chǔ)模型(WFMs)、先進分詞器、安全保護機制以及高效的視頻處理流程。
據(jù)英偉達介紹,開發(fā)物理AI模型歷來成本高昂,且需依賴大量真實世界的數(shù)據(jù)和反復(fù)測試。Cosmos平臺中的世界基礎(chǔ)模型(WFM)為開發(fā)者開辟了一條新路徑,通過生成大量基于物理特性的逼真合成數(shù)據(jù),簡化模型訓(xùn)練和評估過程。開發(fā)者還可以對Cosmos WFM進行微調(diào),以構(gòu)建符合自身需求的定制模型。
目前,Cosmos平臺的模型已經(jīng)開放許可,開發(fā)者可以在NVIDIA API目錄中預(yù)覽首批模型,同時也可從NVIDIA NGC?目錄或Hugging Face平臺下載模型系列和微調(diào)框架。這一舉措無疑將極大地促進AI模型的開發(fā)效率和靈活性。
英偉達還宣布,多家企業(yè)已成為Cosmos平臺的首批用戶,包括1X、Agile Robots、Agility、Figure AI、Foretellix、Fourier、Galbot、Hillbot、IntBot、Neura Robotics、Skild AI、Virtual Incision、Waabi、XPENG以及拼車巨頭Uber等。這些企業(yè)的加入,將進一步推動Cosmos平臺在實際應(yīng)用中的驗證與優(yōu)化。
Cosmos平臺的應(yīng)用場景廣泛,其中包括視頻搜索和理解、生成合成數(shù)據(jù)、模型開發(fā)和評估以及預(yù)測和多宇宙模擬等。例如,在視頻搜索和理解方面,Cosmos平臺可以輕松幫助用戶查找特定訓(xùn)練場景,如雪地路況或倉庫擁堵情況。在生成合成數(shù)據(jù)方面,基于物理學(xué)的逼真視頻數(shù)據(jù)生成,將為模型訓(xùn)練提供更加豐富和真實的素材。Cosmos平臺還支持模型的開發(fā)和評估,以及通過多宇宙模擬預(yù)測所有可能的未來結(jié)果,從而幫助AI模型選擇最佳路徑。
隨著Cosmos平臺的推出,英偉達再次展示了其在AI領(lǐng)域的領(lǐng)導(dǎo)地位和技術(shù)創(chuàng)新實力。這一平臺不僅為開發(fā)者提供了便捷高效的工具,也為自動駕駛汽車和機器人等物理AI系統(tǒng)的未來發(fā)展奠定了堅實基礎(chǔ)。