展會信息港展會大全

真 AR 眼鏡來了!十年保密項目燒錢數(shù)十億,Meta 最強(qiáng) AI 加持,黃仁勛首測
來源:互聯(lián)網(wǎng)   發(fā)布日期:2024-09-26 11:15:24   瀏覽:373次  

導(dǎo)讀:劃重點 01Meta發(fā)布首款A(yù)R智能眼鏡Orion,外觀接近普通太陽眼鏡,集成了AR功能,重量僅98克。 02Orion眼鏡通過手勢追蹤腕帶和遙控器大小的計算模塊實現(xiàn)無線連接,支持眼動追蹤、手勢操控和AI語音操作。 03除此之外,Orion眼鏡具有2小時的續(xù)航能力,視場角高達(dá)...

劃重點

01Meta發(fā)布首款A(yù)R智能眼鏡Orion,外觀接近普通太陽眼鏡,集成了AR功能,重量僅98克。

02Orion眼鏡通過手勢追蹤腕帶和遙控器大小的計算模塊實現(xiàn)無線連接,支持眼動追蹤、手勢操控和AI語音操作。

03除此之外,Orion眼鏡具有2小時的續(xù)航能力,視場角高達(dá)70度,可能是行業(yè)內(nèi)擁有最寬視野的AR眼鏡。

04Meta AI與AR眼鏡結(jié)合,實現(xiàn)實時語音翻譯、個性穿搭建議等功能,以及幫助用戶記憶車位號碼等實用場景。

05目前,Orion眼鏡僅面向部分開發(fā)者和體驗人員提供,扎克伯格對其未來成為手機(jī)之后的下一個主流智能終端充滿信心。

以上內(nèi)容由騰訊混元大模型生成,僅供參考

未來的眼鏡會長成什么樣子?不知道有多少人設(shè)想過。和現(xiàn)在的體積差不多,導(dǎo)航時變成移動的 HUD,視頻通話時對方的動態(tài)形象懸浮在空中,鏡片能顯示所有你需要的內(nèi)容......反正就和貝吉塔、鋼鐵俠戴的那種差不多。今天凌晨,Meta 發(fā)布的首款 AR 智能眼鏡 Orion,讓我們離這個理想中的產(chǎn)品更近了一點。雖說過去的幾年陸續(xù)有 AR 眼鏡發(fā)布,但共性也很明顯:要么功能單一只是個移動投影儀,要么體積笨重價格昂貴,完全不適合大眾市常和先前的產(chǎn)品相比,Meta Orion 不厚重的外觀和集成的 AR 功能,讓大家再次看到了 AR 眼鏡落地的希望。而且 Meta Connect 2024 作為發(fā)布會十周年的重要節(jié)點,扎克伯格還帶來了其他新玩意兒:Meta Orion 智能眼鏡驚艷登場,AR 體驗領(lǐng)先行業(yè);Meta Quest 3S 頭顯 MR 眼鏡發(fā)布,Quest 3 的「青春版」沒新意但更便宜;Meta AI 繼續(xù)升級,助力頭顯硬件有更好的使用體驗;Meta Ray-Ban 的 AI 新功能:實時翻譯、個性穿搭建議,還能幫你記車位Meta 首個開源大模型 Llama 3.2 亮相,擁有多模態(tài)能力。

AI +硬件是今年所有消費電子品繞不過去的話題,那 Meta 究竟是如何將自家的大模型與新品硬件相結(jié)合?萬眾矚目的 Meta Orion 智能眼鏡究竟長什么樣子?我們一起來看看。Meta 首款 AR 眼鏡驚艷亮相,花十年「all in」的明日產(chǎn)品在扎克伯格的構(gòu)思中,眼鏡應(yīng)該是最佳的「未來派」設(shè)備。在此之前,已經(jīng)走入大眾市場并且取得了不錯戰(zhàn)績的聯(lián)名眼鏡 Ray-Ban Meta,成功驗證了市場對智能眼鏡的接受程度。

但這個產(chǎn)品,只能說完成了 Meta 目標(biāo)的一半:Ray-Ban Meta 主要提供音頻、攝影和部分 AI 功能,簡單來說還是一個戴在眼睛上的傳統(tǒng)設(shè)備。而被扎克伯格稱為「無可挑剔」的完全體,也就是 Meta 首款 AR 智能眼鏡 Orion,秘密研發(fā)了十年,投入了幾十個億美元,今天終于從保密箱中被取出,露出了廬山真面目。

對這款眼鏡的第一印象,自然是這個極其接近普通太陽眼鏡的外觀設(shè)計,馬上和市面上現(xiàn)有的「大老粗」競品拉開了不小差距。因為眼鏡也必須要好看。當(dāng)然,這也是因為 Meta 并沒有選擇將所有的組件集成到一個眼鏡的形態(tài)上。Meta Orion 一共由三個部分組成:眼鏡本體,一個手勢追蹤腕帶,以及一個遙控器大小的「計算模塊」,三者無線連接。

這種「分體式」的方案,加上機(jī)身采用了更輕的鎂材料,Orion 眼鏡本體實現(xiàn)了驚人的 98 克重量。作為對比,Snap 上周發(fā)布的全新 AR 眼鏡 Spectacles 重達(dá) 226 克。

上:Meta Orion,下:Snap Spectacle更讓人印象深刻的是,擁有輕薄機(jī)身的 Orion 能夠?qū)崿F(xiàn) 2 小時左右的續(xù)航,更粗更重的 Spectacles 只有短短的 45 分鐘。眼鏡最核心的 AR 投射能力,Orion 在不少方面做到了「遙遙領(lǐng)先」。Orion 的鏡片并非是玻璃顯示屏,而是碳化硅透鏡,鏡框上微型的投影儀會將光發(fā)射在波導(dǎo)中,而波導(dǎo)投射在透鏡上,從而顯示出具有不同縱深和大小的 AR 虛擬內(nèi)容(扎克伯格稱其為「全景圖」)。據(jù) The Verge 的測試,Meta Orion 的視場角高達(dá) 70 度,可能是行業(yè)內(nèi)擁有最寬視野的 AR 眼鏡。根據(jù)現(xiàn)有的演示視頻,用戶可以戴著眼鏡打開多個 Meta Horizon App 窗戶進(jìn)行多任務(wù),或者用 Meta AI 對現(xiàn)實世界的事物進(jìn)行識別、標(biāo)注。

即使用戶的視角從這些窗戶上面移開,這些虛擬的投射會一直「存在」,靜候用戶的目光再次回歸。至于投射的畫質(zhì)和清晰度,用來看圖文不是問題,但你暫時不會想用這個眼鏡看電影。

Meta 擅長的社交能力也和 AR 眼鏡碰撞出了新的花樣,通話中的好友會以一個全息投影的形象出現(xiàn)在你的面前,不過目前還比較粗糙。

Orion 也有一個朝內(nèi)的攝像頭用于掃描佩戴者的臉部,生成一個實時的建模,用于和手機(jī)用戶的視頻通話畫面。交互方面,Meta Orion 支持眼動追蹤、手勢操控和 AI 語音操作,佩戴配套的腕帶能夠?qū)崿F(xiàn)更精細(xì)的手勢操作。

這個腕帶可以識別一些手勢:拇指捏住食指可以選擇內(nèi)容;捏中指和拇指可調(diào)用或隱藏應(yīng)用程序啟動器;用拇指抵住合攏的手掌做出拋硬幣的手勢,即可向上或向下滾動,總體來說非常自然。

值得一提的是,腕帶還提供了觸覺反饋,讓你知道手勢有沒有被成功識別,解決了目前 MR 交互的一個痛點。這個腕帶的原理是通過肌電圖,來讀取與手勢相關(guān)的神經(jīng)信號,The Verge 甚至評價它「有點像在讀心」。

圖源:The Verge有了這個腕帶,用戶可以把目光當(dāng)作 Orion 界面的指針,捏合當(dāng)作點擊,整體體驗非常自然,更重要的是,如果要在公眾場合用 AR 眼鏡,不用再尷尬地對著空氣「發(fā)號施令」或者「指手畫腳」,雙手插兜也能完成交互。在 Ray-Ban 眼鏡上已經(jīng)初露鋒芒的 Meta AI,和 AR 也結(jié)合出了新玩法,現(xiàn)在能夠進(jìn)一步和現(xiàn)實世界進(jìn)行交互。在實機(jī)體驗中,The Verge 用 Orion 快速識別、標(biāo)注了桌上放著的食材,并讓 Meta AI 根據(jù)這些材料生成了一個奶昔的食譜。

雖然扎克伯格表示,Meta Orion 是一款面向消費者打造的產(chǎn)品,但目前的 Orion 設(shè)備還是原型機(jī),只面向部分開發(fā)者和體驗人員提供,其中包括老朋友黃仁勛。

Meta Quest 3S,平價版 Vision Pro 的樣子?扎克伯格登場不到十秒,就公布了 Quest 3S 的價格,這在一眾電子產(chǎn)品的發(fā)布會中實屬罕見,不過還是得感嘆一句,開門見山、只講重點的感覺,真的很棒。

總的來說,Meta Quest 3S 其實是 Quest 3 的「青春版」,128GB 起售價為 299.99 美元(約合人民幣 2108 元),256GB 起售價是 399.99 美元(約合人民幣 2810 元)。從配置來看,Quest 3S 搭載了 Snapdragon XR2 Gen 2 處理器,也就是 Quest 3 的同款,而且也同樣支持手部追蹤。

看完發(fā)布會,我感覺比起 Quest 3S 這個命名,其實叫它 Quest 2 改良版會更合適。先前有消息稱,作為更加「性價比」的選擇,Quest 3S 還是使用了與 Quest 2 相同的透鏡,機(jī)身整體會比 Quest 3 更厚重一些。雖然在硬件配置方面 Quest 3S 不及 Quest 3,但在軟件生態(tài)的體驗上,卻和老大哥基本持平,Quest 3S 同樣可以在 HorizonOS 中獲得豐富的娛樂以及辦公功能。去年 Quest 3 發(fā)布后,評價一直褒貶不一,其中最被人詬病的是啟用視頻透視后,延遲過高和畸變嚴(yán)重,扎克伯格稱,經(jīng)過了一年的優(yōu)化改進(jìn),現(xiàn)在的體驗有了很大的升級,特別是在 VR 功能、手部追蹤和軟件適配這三個方面。用戶現(xiàn)在可以在兩款產(chǎn)品上,把 2D 網(wǎng)頁直接轉(zhuǎn)變?yōu)槌两睫k公,就像 Vision Pro 那樣,把在設(shè)備中打開的界面放在空間的任何位置。

另外,在 Quest 3S 上的劇院模式,可以把單獨的界面擴(kuò)展成一個巨幕影院,屏幕范圍能擴(kuò)充到整個空間里。沉浸式觀影在頭顯設(shè)備上已經(jīng)不是什么新鮮玩意兒了,能適配多少片源和平臺,才是拉開各家產(chǎn)品體驗的核心。Quest 3S 支持目前各大歐美主流的媒體平臺,Netflix、YouTube 和 Amazon Prime 等都能使用劇院模式觀影。電影和游戲是 VR 頭顯的娛樂必備,在此基礎(chǔ)上的附加功能,往往也能體現(xiàn)出產(chǎn)品本身的性能,這次發(fā)布會還公布了 Quest 3S 的新功能Hyperscale。

用戶通過手機(jī)掃描房間的輪廓細(xì)節(jié),以及家具擺放的位置,接著就能在 Quest 3S 重新構(gòu)建出一個接近 1:1 的復(fù)原場景。

從發(fā)布會的演示來看,場景還原度真的不錯,毛邊和扭曲不是太多,以后線上沉浸式看房,或者足不出戶地游玩博物館或者名勝古跡,又多了一個可以實現(xiàn)的平臺。不過除此之外,場景復(fù)原的實用性究竟還有哪些?要如何結(jié)合每個地區(qū)不同的情況將技術(shù)落地,是 Meta 和 Quest 今后需要回答的難題。Meta 的全稱是 metaverse,即元宇宙。Facebook 當(dāng)年改名 Meta 表明了扎克伯格對新技術(shù)探索的決心,而 Meta 也成了最先一批向元宇宙進(jìn)軍的科技巨頭。所以「元宇宙」也就成了每次 Meta 新品發(fā)布必提及的部分,盡管他們已經(jīng)在這個領(lǐng)域碰了很多壁。

扎克伯格在發(fā)布會上介紹,Meta Quest 3S 推出了沉浸式社交的增強(qiáng)功能,Quest 的用戶現(xiàn)在可以在設(shè)備中創(chuàng)建虛擬形象,和彼此一起通關(guān)游戲,或者組隊進(jìn)行健身,又或者去聽一場線上的演唱會。

隨著 Quest 3S 的發(fā)布,Quest 2/Pro 也宣布徹底停產(chǎn),另外 Quest 3 的價格也從 649 美元降至 499 美元,新產(chǎn)品將在 10 月 15 日后發(fā)貨。

Llama 3.2 發(fā)布,多模態(tài)能力讓眼鏡擁有眼睛比起幾乎沒變化、甚至還減配的 Meta Quest 3S,Meta AI 的新功能就被襯托得更有新意。

扎克伯格在發(fā)布會上宣布,Meta AI 正式上線語音功能,用戶可以通過 Messenger、Facebook、WhatsApp 和 Instagram 向 Meta AI 提出問題或以其他方式聊天,并獲得模擬語音回復(fù)。

不僅如此,AI 語音的音色還能自主選擇,你可以使用包括朱迪丹奇、約翰塞納、奧卡菲娜、克里斯汀貝爾等名人在內(nèi)的 AI 聲音。

扎克伯格還在現(xiàn)場演示了語音功能,總體來說對話響應(yīng)速度還挺快,回答的內(nèi)容也比較準(zhǔn)確,語音語調(diào)聽起來又向真人問答更近了一步,而且還能隨時打斷對話插入新的話題或問題。雖說中間出現(xiàn)了幾次失誤,不過作為正在探索和發(fā)展中的技術(shù)這也正常,扎克伯格本人多次也毫不避諱,就像他本人說的一樣:這是 demo 經(jīng)常會出現(xiàn)的情況。另外,通過 AI Studio 功能,用戶還能根據(jù)自身的需求、愛好等,自主創(chuàng)建相應(yīng)的 AI 角色,它可以幫助我們生成表情包、提供旅行建議,當(dāng)然也能進(jìn)行日常的對話。

不過從效果來看,接下來的 AI 翻譯功能則更加實用。目前,搭載了 Meta AI 的終端,都能支持實時語音翻譯功能,發(fā)布會上的兩位發(fā)言人,通過佩戴 Meta Ray-Ban 完成了一次即時的跨語種(英語-西班牙語)對話。Meta Ray-Ban 可以通過麥克風(fēng)采集對方的語音,并迅速翻譯成機(jī)主的母語,雖說每種語言的翻譯響應(yīng)速度都不算慢,但句子稍微長一點,中間等待的時間還是略顯尷尬,而且 Meta AI 有時候還會搶話。另一個線上視頻的語音翻譯效果會更上一層樓,比起上面的實時翻譯,我愿稱之為「高階版翻譯功能」。Meta AI 可以把線上視頻的語音翻譯成另一個語種的語音,更厲害的是,它能把原視頻說話人的語氣、音色,甚至于不同國家讀英語時的口音都完美還原。

Meta AI 在發(fā)布會上一系列的更新功能,其實都有一個共同的驅(qū)動核心:Llama 3.2。

今年七月份,Meta 才剛剛公布了 Llama 3.1 模型,簡單來說,超大杯 Llama 3.1 405B 是 Meta 迄今為止最強(qiáng)大的模型,也是全球目前最強(qiáng)大的開源大模型,更是全球最強(qiáng)的大模型。沒想到短短兩個月 Llama 3.2 就來了。Llama 3.2 是 Meta 的首個開源 AI 模型,包括兩個視覺模型(11B 和 90B)和兩個輕量級的純文本模型(1B 和 3B),這意味著它具備了多模態(tài)的能力,也就是可以同時處理文本和圖像,其中輕量級的純文本模型可以直接在本地理解用戶輸入的內(nèi)容。

依靠 Llama 3.2 全新的能力,許多搭載大模型的設(shè)備也有了更加廣泛的實用場景。除了上文提到的 AI 翻譯功能, 有了視覺能力的 Meta Ray-Ban 現(xiàn)在能更深入地協(xié)助人們的工作生活,日常起居。你可以直接咨詢 Meta Ray-Ban 可以用牛油果做點啥好喝的飲料,你甚至都不需要在句子里提到牛油果,直接用「這個」等代詞就行,因為它看得見。

不知道有多少人有過忘記車停在商場哪里的情況,如果你也是忘記車位編號的常客,那現(xiàn)在 Meta Ray-Ban 就能幫你記下車位號碼,以便你忘記時隨時調(diào)取相應(yīng)的信息。

也正是因為這顆攝像頭的存在,Be My Eyes 和 Meta 的這次聯(lián)姻才成為了可能。Be My Eyes 是一家通過實時視頻和人工智能,將盲人或視力低下的人,與視力正常的志愿者和公司聯(lián)系起來的公益平臺,通過線上實時的視頻通話,志愿者/組織可以幫助智障人士解決眼前的困難。

技術(shù)的發(fā)展不僅在為絕大多數(shù)人的生活增值,也極大程度上彌補(bǔ)了特殊群體中,缺失的那一部分,從而讓所有人的生活都能更加方便,技術(shù)的意義也就在這里展開。下一代計算設(shè)備的曙光已至雖然早已對 Meta Orion 眼鏡有所預(yù)期,但當(dāng)扎克伯格拿出真機(jī)的時候,還是給我們帶來了科技新品久違的「驚艷感」。這種驚艷感不僅是因為 Meta 勾勒的未來藍(lán)圖足夠吸引,更是因為這個產(chǎn)品的實際效果非常接近愿景,The Verge 在體驗過后的評價非常精辟:它不是虛幻的海市蜃樓,也不是實際的產(chǎn)品。它介于兩者之間。這也是 Orion 和許多 Meta 曾經(jīng)探索過的奇思妙想不同之處:它不是一個難以走出實驗室的概念,而是 Meta 選擇「all in」的明日產(chǎn)品,是 AI 和 MR 的完美結(jié)合。

它是最佳的 AI 設(shè)備:可以看用戶所看,聽用戶所聽,能結(jié)合用戶的現(xiàn)實場景,因此能給出更有效的回答。它也是終極的交互和聯(lián)系方式:不需要局限于小屏幕,也不必借助厚重的頭顯,虛擬和現(xiàn)實世界彼此緊密交融,隨時可交互,處處是交互。手機(jī)這種計算設(shè)備形態(tài)已經(jīng)走到了生命周期的末尾,這已經(jīng)是行業(yè)的共識;而下一代的計算設(shè)備,蘋果、Meta,甚至 OpenAI 都正在探索。盡管還是原型機(jī), Meta 給出的答卷 Orion 目前看來確實不賴,至于是否成為手機(jī)之后的下一個主流智能終端,還有很多未知數(shù),但扎克伯格對此倒是信心十足。眼鏡和全息影像將會成為一種無處不在的產(chǎn)品。如果我們能讓世界上已經(jīng)擁有眼鏡的人,都升級到擁有 AI 和 MR 的眼鏡,那么這將成為世界歷史上最成功的產(chǎn)品之一,而且我認(rèn)為它會走得更遠(yuǎn)。

贊助本站

人工智能實驗室
相關(guān)內(nèi)容
AiLab云推薦
推薦內(nèi)容
展開

熱門欄目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能實驗室 版權(quán)所有    關(guān)于我們 | 聯(lián)系我們 | 廣告服務(wù) | 公司動態(tài) | 免責(zé)聲明 | 隱私條款 | 工作機(jī)會 | 展會港