1. 程式人生 > 資訊 >3D 光場重建率先被中國團隊推向零售商用:谷歌同款,所見即所得

3D 光場重建率先被中國團隊推向零售商用:谷歌同款,所見即所得

最近,大家都在討論元宇宙。那是否有想過,在元宇宙裡應該會如何購物?是像這樣,在手機端就能看到跟線下店一模一樣的完整實物?

還是足不出戶就可以美美的線下店?

又或者是,看上哪款就試哪款?

旁友們,是不是以為這就是搞個 3D 模擬,或者電影特效那種後期製作?

NoNoNo,其實都不是。

這個用到的是光場技術,模擬人眼,所見即所得。

這技術可來頭不小。

前段時間谷歌 I/O 大會亮相的裸眼 3D 通話,就是基於這個原理 ——

將空間里人眼看到的光線進行採集重建,重現真實的三維世界。

如果把它用到我們日常的穿衣住行上,簡直“高質量”了有木有!

事實上,已經有公司做到了。

而且還是一家中國公司 —— 奧本未來,哈佛團隊班底,那幾張畫面正是他們與幾大品牌商的合作。

那麼具體是如何實現這種逼真感呢?

什麼是光場技術?

提到光場,就要說到我們的視覺感知。

人類能看到所在的世界,就是通過人眼,來接收現實場景中的光資訊,從而進行感知。

如果我們能把空間中的光都記錄下來,那我們就可以從任意角度、任意路徑,去觀察,去體驗這個空間,就像到現場一樣。

元宇宙電影《Ready Player One》裡,主角進入前人的記憶資訊,各種漫遊,甚至檢視細節來破案,要真的實現這樣的場景,就需要用到光場技術!

光場技術,記錄了七個維度的資訊。

他們分別是,物體表面發光點的位置(x, y, z),物體表面的一個發光點,用來表示它發光方向的水平角度和垂直角度(θ, Φ),發出光線的波長表示為(λ)以及時間 t。

別小看這七個維度,它就已經能對場景 100% 光線描述。

人看到什麼,它就捕獲到了什麼,所以能根據觀看需求任意調整視點、焦距和景深。

實際上光場技術之外,也有其他的方式來記錄空間資訊。

比如三維建模。相信玩 3D 遊戲的旁友很熟悉了。要實現逼真的 3D 模型,且不說逼真的實時光照需要巨大的算力,單就光照、材質、幾何等要有極高的保真度,就已經極具挑戰性了。

或者使用一些攝影測量或者三維掃描的裝置,但更多細節無法捕捉到,離電影裡逼真的渲染效果相去甚遠。

所以光場採集無疑是短時間內最快實現商業化的解決方案。

奧本未來就是研發的這項技術,有這幾方面的的優點。

首先,採集裝置比較成熟。只要一部手機就可以做光場的採集。

以往學界做光場採集,動輒就是幾百個相機的陣列。

要麼是由幾百個小攝像頭集打造的光場相機。

但奧本未來的技術團隊表示,

採集過程可以使用任意相機,蘋果手機後攝也可以。

但為了保證照片質量,一般使用單反相機。

此外,技術人員還透露,通常一件典型的商品只需要採集一兩分鐘的視訊或者一百多張照片。

其次,除了採集之外,渲染也能做到普通手機 App 甚至是手機 web 上。

以往光場資料十分龐大,想要在螢幕上完整渲染出來,需要高效能主機才能做到。但如今通過壓縮演算法,普通網頁也能實現逼真效果。

比如,京東 App 上試穿三維運動鞋,就用了奧本未來的光場技術。

還有在 unity 做的三維遊戲也用到了光場模型,動起來的那種。

正是基於以上這些技術突破,奧本未來讓真實空間和物體的整套流程變得更加高效。

目前,奧本未來自研了一款光場捕捉器,最小化人為干預,只需連線普通相機,即可快速自動化完成對常見物體的光場採集。

在面對海量 SKU 的電商行業,從採集、重建、部署到上線平臺整套下來只需要一天就可以完成。

技術人員透露,當中成本只包括兩部分:拍攝照片的人力和雲端重建計算的算力,相當於傳統三維建模的十分之一。

不過,他們坦言,當前仍然具有諸多挑戰,比如,大規模場景重現。

據悉,奧本未來由哈佛大學海歸團隊於 2016 年創立,創始人兼 CEO 雷宇博士是一名連續創業者,博士畢業於哈佛大學應用物理及材料科學系。

CTO 沈方陽博士畢業於北航,是虛擬現實領域博士,曾在微軟亞洲研究院、哈佛視覺化計算組(Visual Computing Group)從事計算機圖形學和視覺方向研究

此外,技術團隊還來自於哈佛大學圖形學實驗室、北航虛擬現實國家重點實驗室、微軟亞洲研究院、清華、北大、北郵等各高校機構人員組成。目前也在積極廣納英才,比如圖形學程式設計師瞭解一下?

隨著使用者對電商購物的體驗要求越來越高,3D 互動導購內容和場景開始大量增長,

相比與以往圖片、視訊等有限視角,3D 素材、3D 實時互動以及 AR 試穿試戴素材相關的需求只會越來越高。

直至現在,電商隨處可見 3D 內容場景,比如商詳頁、頻道頁、店鋪頁、直播間、搜尋頁、會場頁等等。

對於品牌電商來說,一整套低成本、門檻低、輕量級的三維內容方案成為他們的首選。

比如,行動式採集技術和低門檻的三維編輯工具可以幫助品牌與內容製作者節省製作的成本;

整個編輯儲存釋出都在雲端,有助於多方協同;整個方案可以支援多平臺釋出的屬性。

這麼說起來,奧本未來所做的更像是一套底層基礎設施,推動整個購物體驗數字化、沉浸化、智慧化。

如今元宇宙概念的爆發,似乎也印證了奧本未來之前的選擇。

至於實現真正的元宇宙,需要更多公司來共同打造技術底座。