展會(huì)信息港展會(huì)大全

端到端純視覺!OpenAI押注的人形機(jī)器人獻(xiàn)藝拜年了
來源:互聯(lián)網(wǎng)   發(fā)布日期:2024-02-13 10:06:00   瀏覽:23953次  

導(dǎo)讀:衡宇 白交 發(fā)自 凹非寺 量子位 | 公眾號(hào) QbitAI 大過年的, OpenAI投資的人形機(jī)器人 ,通過最新視頻拜年了(doge) 有倆人上來就表演了一個(gè)從貨架取包裹,轉(zhuǎn)身放進(jìn)筐里: 鏡頭繼續(xù)推進(jìn),旁邊靠墻的兩個(gè)機(jī)器人,在不停地將俄羅斯方塊積木舉起-丟下-再舉起。...

衡宇 白交 發(fā)自 凹非寺

量子位 | 公眾號(hào) QbitAI

大過年的,OpenAI投資的人形機(jī)器人,通過最新視頻拜年了(doge)

有倆人上來就表演了一個(gè)從貨架取包裹,轉(zhuǎn)身放進(jìn)筐里:

鏡頭繼續(xù)推進(jìn),旁邊靠墻的兩個(gè)機(jī)器人,在不停地將俄羅斯方塊積木舉起-丟下-再舉起。

另一邊,充好電的機(jī)器人,溫柔地拔掉插銷,微微半蹲,把插頭放到指定位置。

旁邊還來了個(gè)趕來充電的家伙:

一個(gè)小房間內(nèi),面帶笑容的機(jī)器人緩緩前進(jìn),然后流暢地?fù)炱鸬厣系墓,放回了玩具筐?/p>

最后,鏡頭跟隨一個(gè)導(dǎo)游機(jī)器人,在場(chǎng)地里巡邏了一圈,剛才介紹到的機(jī)器人們還在各司其職,干自己的事情。

官方表示,這個(gè)視頻一、鏡、到、底

機(jī)器人們發(fā)出的每一個(gè)動(dòng)作行為,都基于視覺神經(jīng)網(wǎng)絡(luò)端到端控制。

并且視頻原本速度播放,無加速、無剪輯、無遠(yuǎn)程操控。

有網(wǎng)友對(duì)這樣擬人仿真效果挺滿意:

不會(huì)吧不會(huì)吧,你不會(huì)還在等有人拉開機(jī)器人背后的拉鏈,然后摘下頭盔,走下平衡車吧!

想知道這是怎么做到的?

官方“啪”地摔出了一份資料,把原理透露了一波。

來吧,展示

為了讓自家人形機(jī)器人被充分開發(fā)利用,背后公司1X Technologies(簡(jiǎn)稱1X),從去年起開始追求最通用的方法,即使用視覺神經(jīng)網(wǎng)絡(luò),讓機(jī)器人端到端地學(xué)習(xí)運(yùn)動(dòng)行為

官方釋出視頻中,每一個(gè)機(jī)器人的行為,都由10Hz頻率的視覺神經(jīng)網(wǎng)絡(luò)控制。

它主要控制機(jī)器人們的前進(jìn)、手臂、軀干和頭部。

該視頻不包含遠(yuǎn)程操作,沒有計(jì)算機(jī)圖形,沒有剪輯,沒有視頻加速,沒有腳本軌跡回放。

這一切都是通過神經(jīng)網(wǎng)絡(luò)控制的,都是自主的。

據(jù)介紹,有30臺(tái)機(jī)器人出演了這次展示視頻(目前,全公司共有50臺(tái)該型號(hào)機(jī)器人)

為了訓(xùn)練生成視頻中展示行為的機(jī)器學(xué)習(xí)模型,1X團(tuán)隊(duì)在這30臺(tái)機(jī)器人中組裝了一個(gè)高質(zhì)量、多樣化的演示數(shù)據(jù)集。

這些數(shù)據(jù)被用來訓(xùn)練出一個(gè)基礎(chǔ)模型,這個(gè)模型可以理解廣泛的身體行為,比如清潔整理房屋、拾撿物品、和人類or其他機(jī)器人社交。

然后,團(tuán)隊(duì)對(duì)基礎(chǔ)模型進(jìn)行微調(diào),讓它成為更具體的功能系列,比如用于一般門操作的模型、用于倉庫任務(wù)的模型。

再然后,再微調(diào)已經(jīng)微調(diào)過的模型,讓它生成的行為和特定任務(wù)(如打開特定的某道門)保持一致。

這樣的訓(xùn)練方式,讓團(tuán)隊(duì)能夠在臺(tái)式機(jī)的GPU上進(jìn)行幾分鐘的數(shù)據(jù)收集和培訓(xùn),從而讓模型掌握新技能。

更重要的是,這樣的方式,讓機(jī)器人不受AI工程師數(shù)量的限制,就能學(xué)會(huì)短期移動(dòng)操作技能。

本次展示出場(chǎng)的機(jī)器人是1X公司的初代產(chǎn)品,名叫EVE(夏娃),專為工作環(huán)境設(shè)計(jì),主要用于工業(yè)、物流、零售和安全領(lǐng)域。

EVE從頭到腿是人形,然后用雙輪替代人類的雙腳。

它高1.86米,重86公斤,最高時(shí)速14.4公里,承載能力15公斤,續(xù)航6小時(shí)。

雖然沒有直接喊話過,但由于設(shè)計(jì)和業(yè)務(wù)高度重合,EVE被業(yè)內(nèi)默認(rèn)為對(duì)標(biāo)馬斯克的特斯拉機(jī)器人Optimus。

去年5月,F(xiàn)irstpost消息顯示,EVE在一場(chǎng)人形機(jī)器人比賽中,擊敗了Optimus。

1X首席執(zhí)行官兼創(chuàng)始人Bernt Bornich表示,目前,EVE已經(jīng)上崗打工,在歐美部分地區(qū)投入商業(yè)化應(yīng)用,至少兩個(gè)工業(yè)場(chǎng)所都部署了EVE來負(fù)責(zé)保安工作。

今年年初,1X還在挪威首都奧斯陸的一個(gè)火車站出現(xiàn),給往來旅客倒咖啡。

網(wǎng)友們倒是挺認(rèn)可EVE的靈活程度:

但也有人提出了一些尚待解決和思考的問題:

一是穩(wěn)定性,二是通用性,三是需要龐大的數(shù)據(jù)來訓(xùn)練。

背后公司是誰?

EVE背后的是一家挪威公司1X,成立于2014年,前身為Halodi Robotics。

該公司專注于創(chuàng)造能夠進(jìn)行類似人類運(yùn)動(dòng)和行為的人型機(jī)器人,并在實(shí)際場(chǎng)景中部署。

特別提一下,1X的現(xiàn)任產(chǎn)品負(fù)責(zé)人是Eric Jang

Eric Jang畢業(yè)于布朗大學(xué)計(jì)算機(jī)科學(xué)專業(yè),畢業(yè)后在Google X工作了6年,擔(dān)任機(jī)器人高級(jí)研究科學(xué)家。

2022年4月,Eric加入了1X,領(lǐng)導(dǎo)AI部門。

2022年起,1X就和OpenAI在機(jī)器人AI模型方面有所合作;目前,EVE的部分功能就由ChatGPT提供支持。

到了去年3月,1X正式有了OpenAI“撐腰”獲得由OpenAI創(chuàng)業(yè)基金領(lǐng)投的2350萬美元融資,投后估值約為1-2億美金

這也是OpenAI投資的第一家硬件公司。

OpenAI的COO Brad Lightcap曾公開坦白:“投資1X瞄準(zhǔn)的時(shí)機(jī)是其機(jī)器人硬件已經(jīng)成熟,能夠在AI的加持下,開拓更廣泛的勞動(dòng)力市常”

不過Eric Jang也發(fā)話了,1X沒有和OpenAI獨(dú)家綁定

我們還在測(cè)試別家的大模型,然后自己也在做一些動(dòng)作和任務(wù)的小模型。

去年公布2輪融資的1X,很快又在上個(gè)月,官宣完成了1億美元的B輪融資。

這筆錢不僅用來擴(kuò)大具身智能的數(shù)據(jù)收集戰(zhàn)略,另一個(gè)去處是加強(qiáng)NEO機(jī)器人的市場(chǎng)推廣。

沒錯(cuò)!除了EVE,1X還在加班加點(diǎn)研制第二代機(jī)器人NEO(取用了《黑客帝國》主角的名字)。

和EVE的輪式人形不同,NEO是純?nèi)诵螜C(jī)器人,雙腳上有55個(gè)自由度,可以自由行走。

有腿之后,NEO可以說是完全按人類的外形和運(yùn)動(dòng)方式設(shè)計(jì):

有頭、身體、手臂和腿,會(huì)走路、抓東西,并通過面部表情溝通。

同時(shí)它采用了高扭矩關(guān)節(jié),與傳統(tǒng)的高性能齒輪動(dòng)力相比,在控制、兼容、力量輸出、韌性、維護(hù)等方面全面得到增強(qiáng)。

目前,NEO還處于研發(fā)階段,但官網(wǎng)宣稱該型號(hào)已經(jīng)可以自然準(zhǔn)確地穿門、爬樓梯。

1X官方說法是,計(jì)劃在今年正式發(fā)布NEO,并進(jìn)行量產(chǎn)。

不知道有了雙腳的1X人形機(jī)器人,還能不能對(duì)馬斯克的Optimus遙遙領(lǐng)先?

等待看戲.jpg

贊助本站

人工智能實(shí)驗(yàn)室
相關(guān)內(nèi)容
AiLab云推薦
推薦內(nèi)容
展開

熱門欄目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能實(shí)驗(yàn)室 版權(quán)所有    關(guān)于我們 | 聯(lián)系我們 | 廣告服務(wù) | 公司動(dòng)態(tài) | 免責(zé)聲明 | 隱私條款 | 工作機(jī)會(huì) | 展會(huì)港