↑TOP

對影完整視覺感受,Google 以 46 組相機完整記錄 3D 影像

【此文章來自:Mashdigi】
 

藉此推動更多元的虛擬視覺應用

雖然去年宣布終止以多組攝影機拍攝 360 度環景影像的 JUMP 計畫,但顯然 Google 並未放棄拍攝立體影像的技術發展。在 SIGGRAPH 2020 所釋出技術白皮書內,Google 提出以多疊重現的沉浸光場影片格式 (Immersive Light Field Video with a Layered Mesh Representation),透過 46 組相機設備捕捉光場影像資訊,並且透過機器學習等軟體技術重建可對應 6 自由度 (6DoF) 觀看的立體影像。

對影完整視覺感受,Google 以 46 組相機完整記錄 3D 影像



由於採用光場影像記錄,因此將能保留真實影像視覺感受內容,例如在不同視角下的遠近感,以及行進間的視差感受,另外在光影折射表現也能完整還原。

整部拍攝裝置除了以 46 組相機設備構成,並且以每組相機間隔 18 公分形式構成直徑 92 公分的 20 面半球體,記錄視角則可達 220 度以上。而在拍攝過程中,將會進行影像壓縮及後續渲染處理,其中以 DeepView 類神經網路學習方式讓影像拼接變得更自然、正確。

對影完整視覺感受,Google 以 46 組相機完整記錄 3D 影像


最後生成的多球狀影像 (MSI,Multi-sphere image),將會以 100 張以上的高解析度 RGBA (RGB+Alpha) 影像組成單一畫格內容,並且透過 Layered Mesh (LM) 格式壓縮,使最終生成影像能對應串流播放使用需求,藉此能串流至手機上播放觀看。

同時,因為壓縮後的檔案佔比相當小,因此可藉由串流形式傳送到手機、網頁,或是頭戴裝置上觀看,藉此推動更廣泛的虛擬視覺應用。
 


 
歡迎來到 ePrice 比價王!
hpstony(hpstony) 一般網友
發文: 15,468 經驗: 32,178
發表於 2020-07-14 13:36
從 iPhone 發送
46 組相機設備拍攝完成後,檔案一定會很大的。
天天好運氣
★肥肥仔★(zil52406) 一般網友
發文: 6,841 經驗: 16,369
發表於 2020-07-14 14:24
整個畫面看起來都很自然,這3D建構的很棒。
生在美食當道亂世之中,減肥~Mission Impossible
vinni(vincihsu) 一般網友
發文: 4,209 經驗: 10,954
發表於 2020-07-14 14:32
這技術何時才能用在看電影,這樣看一場電影,每個人看的角度都不一樣
蠻有趣的
汪漢均(opk0864) 一般網友
發文: 34,358 經驗: 66,872
發表於 2020-07-14 15:06
從 iPhone 發送
這不知道還有多少應用,要用到這麼多相機設備
我只是個邊緣人
energie1221(energie1221) 一般網友
發文: 14,877 經驗: 33,674
發表於 2020-07-14 17:28
還蠻特別的裝置 可以拍攝到各方各面的影像 還蠻有趣的喔
憲仔QQ(pkas78) 一般網友
發文: 16,686 經驗: 37,770
發表於 2020-07-14 17:50
只能想到 需要很多相機設備才能達成~
holle1900(holle1900) 一般網友
發文: 854 經驗: 1,932
發表於 2020-07-15 02:44
真是有趣的技術,期待未來有更多的應用
cchichi523tw(cchichi523tw) 一般網友
發文: 8,765 經驗: 20,850
發表於 2020-07-15 08:01
這個技術很有趣,以後應該會有更多的發明,長知識
hiiamking(hiiamking) 一般網友
發文: 14,856 經驗: 33,910
發表於 2020-07-15 12:33
這個會應用在甚麼地方啊?真令人好奇

ePrice留言

訪客
 通知發文者有新的回覆訊息