展會信息港展會大全

英偉達進軍人形機器人產(chǎn)業(yè) 發(fā)布多模態(tài)人工智能Project GR00T
來源:互聯(lián)網(wǎng)   發(fā)布日期:2024-03-22 09:36:15   瀏覽:7418次  

導讀:騰訊科技訊 3月19日消息,據(jù)國外媒體報道,英偉達周一在圣何塞會議中心舉辦的GTC大會上推出了多模態(tài)人工智能Project GR00T,能夠通過先進的基礎(chǔ)模型為未來的人形機器人提供動力。 在周一舉行的活動中, 英偉達演示了采用Project GR00T的人形機器人,能夠把文...

科技新聞訊 3月19日消息,據(jù)國外媒體報道,英偉達周一在圣何塞會議中心舉辦的GTC大會上推出了多模態(tài)人工智能Project GR00T,能夠通過先進的基礎(chǔ)模型為未來的人形機器人提供動力。

在周一舉行的活動中, 英偉達演示了采用Project GR00T的人形機器人,能夠把文本、語音、視頻甚至現(xiàn)場演示作為輸入,讓機器人完成特定的操作任務。Project GR00T在英偉達的Isaac機器人平臺工具的幫助下開發(fā),其中包括一個用于強化學習的新Isaac實驗室。

英偉達首席執(zhí)行官黃仁勛在聲明中表示:“為通用人形機器人構(gòu)建基礎(chǔ)模型是當今人工智能領(lǐng)域最令人興奮的問題之一。它把技術(shù)匯聚到一起,讓世界各國的領(lǐng)先機器人專家朝著通用人形機器人技術(shù)邁出巨大步伐。”

為了幫助企業(yè)成功運營GR00T,英偉達還發(fā)布了專門用于人形機器人的芯片Jetson Thor。此外,該公司還分享了一些引人注目的進展,如用于構(gòu)建人工智能驅(qū)動的工業(yè)操縱臂以及能夠在非結(jié)構(gòu)化環(huán)境中導航的機器人。

對英偉達Project GR00T有什么期待?

雖然名字看起來像漫威漫畫旗下的超級英雄格魯特(Groot),但它的全稱實際上是“Generalist Robot 00 Technology”。據(jù)英偉達稱,GR00T旨在理解自然語言文本、語音、視頻和現(xiàn)場演示,以模仿人類運動--協(xié)調(diào)性、靈活性和其他技能--并產(chǎn)生通用動作來導航、適應現(xiàn)實世界并與之互動。這不僅將增強人形機器人的能力,而且使開發(fā)和部署它們變得非常容易。本質(zhì)上,以文本和演示作為輸入,擁有訪問權(quán)限的任何人都可以對機器人進行編程。

在英偉達首席執(zhí)行官黃仁勛的GTC主題演講中,他展示了多個由GR00T驅(qū)動的人形機器人來完成各種任務,它們包括來自Agility Robotics、Apptronik、Fourier Intelligence和Unitree Robotics的機器人。英偉達嵌入式和邊緣計算副總裁迪普塔拉(Deepu Talla)向參會記者簡要介紹了GR00T,指出該項目利用了生成式人工智能和Transformer中最新技術(shù),但沒有分享其全部功能。

值得注意的是,作為生成式人工智能領(lǐng)域最知名的公司之一,OpenAI也在致力于人形機器人的開發(fā),并支持了該領(lǐng)域的兩家初創(chuàng)公司:1X Technologies和Figure。Figure最近發(fā)布了該公司首款OpenAI大模型加持的人形機器人,并發(fā)布了一段視頻,吸引了全球科技界的目光。在視頻中,機器人Figure 01可以聽懂人類的命令和提問,動作流暢且有邏輯地遞給人類蘋果、將垃圾收拾進筐子里、將杯子和盤子歸置放在瀝水架上。英偉達周一證實,F(xiàn)igure和OpenAI都在與該公司在人形機器人項目上進行合作。

塔拉周一在接受外媒采訪時表示,該公司不能分享有關(guān)內(nèi)部架構(gòu)的更多細節(jié),但未來將在功能方面分享更多信息。他還指出,目前只有選定的人形機器人開發(fā)者可以提前訪問該模型,但他們計劃很快把GR00T擴展到更多人形機器人當中。

為了確保人形機器人可以運行GR00T等復雜的多模態(tài)模型,Nvidia還推出了用于人形機器人的Jetson Thor計算平臺。基于英偉達的Thor SoC,該計算平臺包括一個高性能CPU集群和基于英偉達Blackwell架構(gòu)的下一代GPU,擁有Transformer引擎,達到800 Teraflop(每秒1萬億次浮點運算)。塔拉表示,該系統(tǒng)的GPU性能比上一版本Jetson Orin高8倍。

GR00T的核心是全新的Isaac機器人工具

為了實現(xiàn)GR00T項目,英偉達開發(fā)了自己的Isaac機器人平臺。該平臺為開發(fā)人員提供了一個強大的端到端平臺,用于開發(fā)、模擬和部署人工智能機器人。

英偉達表示,具體而言,它利用其基于Isaac Sim的全新Isaac實驗室,通過在GPU加速的虛擬環(huán)境中進行并行模擬來測試和訓練該模型,并利用OSMO計算協(xié)調(diào)服務來同時管理英偉達DGX和英偉達OVX的訓練和模擬工作負載。

除這些功能外,Isaac機器人平臺還獲得了兩個用例定向產(chǎn)品--Isaac Manipulator和Isaac Perceptor。根據(jù)塔拉的解釋,Isaac Manipulator提供了GPU加速的庫和專用的基礎(chǔ)模型,幫助機械臂制造商通過最先進的運動和靈巧性來改進產(chǎn)品。它包括旨在檢測物體、估計它們的6D姿勢、跟蹤它們甚至做出密集預測。

另一方面,Isaac Perceptor承擔了通過多攝像頭、360度視覺功能引導機器人在非結(jié)構(gòu)化環(huán)境完成任務--通過基于人工智能的3D感知和環(huán)繞視覺加速算法提供。英偉達通過其Nova Orin DevKit提供該技術(shù),并同ArcBest、比亞迪和KION Group等多個合作伙伴合作,幫助他們在制造等過程中推進自主移動機器人功能。

ArcBest首席創(chuàng)新官兼ArcBest Technologies總裁邁克爾紐斯特(Michael Newcity)在聲明中表示:“在我們的Vaux Smart Autonomy AMR叉車和前移式叉車中使用Isaac Perceptor平臺,可以在跨倉庫、配送中心和制造設施的物料搬運過程中實現(xiàn)更好的感知、語義感知導航和3D映射,實現(xiàn)障礙檢測。”

英偉達全新的Isaac平臺功能預計將在今年第二季度推出,而Project GR00T仍處于早期訪問階段。英偉達正在接受申請,使更多的人形開發(fā)者獲得該技術(shù),但該公司目前尚未公布該技術(shù)公開發(fā)布的時間表。(編譯/無忌)

贊助本站

人工智能實驗室
AiLab云推薦
推薦內(nèi)容
展開

熱門欄目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能實驗室 版權(quán)所有    關(guān)于我們 | 聯(lián)系我們 | 廣告服務 | 公司動態(tài) | 免責聲明 | 隱私條款 | 工作機會 | 展會港