IT之家 6 月 2 日消息，英偉達公司于本周宣布推出一款名為 Neuralangelo 的 AI 模型，該模型能夠?qū)⒁曨l片段轉(zhuǎn)化為細節(jié)層次豐富、具備貼圖的 3D 模型。
▲圖源 英偉達
IT之家查詢得知，此前也已經(jīng)有數(shù)個基于視頻內(nèi)容生成 3D 模型的 AI，但這些 AI 往往在面對低對比度視頻時便無法著手。而英偉達的 Neuralangelo 模型采用了即時神經(jīng)繪圖（instant neural graphics primitives），并利用了自家的 Instant NeRF 技術(shù)，因此即使是對于低對比度的視頻，也可以從中捕捉到微妙的細節(jié)，并轉(zhuǎn)換為更具備商業(yè)價值的 3D 模型。
▲圖源 英偉達
英偉達強調(diào)，Neuralangelo 的獨到之處主要表現(xiàn)在其“準確性”與“普適性”：
“準確性”即該模型可以準確呈現(xiàn)復雜材料的質(zhì)地，例如屋頂瓦片、玻璃窗格和光滑的大理石；
“普適性”即創(chuàng)作者們能夠簡單使用智能手機拍攝的影片素材，即可創(chuàng)作出逼真的物件，并將其整合到他們的項目中。
▲圖源 英偉達
Neuralangelo 模型利用從不同角度拍攝的物品的視頻作為輸入素材，來生成創(chuàng)作者們所需要的模型。一旦 Neuralangelo 確定了視頻中相機的運動規(guī)律，它就會生成模型的 3D 輪廓，并開始在上面雕刻出細節(jié)。
▲圖源 英偉達
預計英偉達將在 6 月 18 日至 22 日舉行的電腦視覺與樣式辨識（Computer Vision and Pattern Recognition，CVPR）大會上發(fā)布 Neuralangelo 模型。在內(nèi)部演示中，英偉達展示了 Neuralangelo 模型重建的米開朗基羅著名雕刻作品《大衛(wèi)》、英偉達位于灣區(qū)的辦公室、及平板拖車等日常見到的物品的 3D 還原模型。
▲圖源 英偉達
除了 Neuralangelo，英偉達還將在大會上展示一款名為 DiffCollage 的模型。DiffCollage 是一種能夠通過文字提示詞生成視頻的 AI 模型，可以生成 360 度全景圖像與循環(huán)動態(tài)圖像，并再將這些圖像擴展為具體的視頻。
英偉達研究部高級主任、論文作者 Ming-Yu Liu 對這項研究的意義給出了暢想：
Neuralangelo 提供的 3D 重建能力將給創(chuàng)作者帶來巨大好處，幫助他們在數(shù)字世界中重建真實世界。這個工具最終將使開發(fā)人員能夠?qū)⒕毜奈矬w 不論是小型雕像，還是大型建筑 導入視頻游戲或工業(yè)數(shù)字孿生的虛擬環(huán)境中。
IT之家的小伙伴們可以在這里找到論文的具體內(nèi)容。
