隨著市場對AR體三維視頻的需求開始逐漸增長，谷歌研究人員正在探索如何優化相關的實現過程。作為研究努力的一個成果，團隊開發了包含330可編程LED燈泡和約100個攝像頭的球形設施：“The Relightables”。名為《The relightables: volumetric performance capture of humans with realistic relighting》的論文已經發布在ACM期刊 。

據介紹，Relightables系統實現了三項創新。首先，包含的攝像頭是用作深度傳感器，能夠捕獲對象的12.4MP深度圖；然后，團隊創建了幾何和機器學習重建管道，后者能夠從捕獲的數據中合成視頻。最后，系統能夠捕獲與深度圖時間同步的反射比圖，從而允許操作員在AR或VR場景中操縱對象的照明，不再是原始工作室的照明條件。這種信息是通過交替閃爍兩種不同的顏色漸變圖案所獲得，而系統會在視頻重建期間將其用于推斷對象的反射特性。

〔映維網〕谷歌體三維捕捉

自動播放

01:26

團隊在論文中寫道：“盡管行業已經在體三維捕獲系統方面取得了重大進展，但其主要是集中在具有高分辨率紋理的3D幾何重建，而在恢復重新照明所需的光度特性方面則少有涉獵。相比之下，大量的研究工作探索了基于圖像的可重照明獲取問題，亦即在一組基本照明條件下拍攝對象，然后重新組合圖像，以仿佛是出現在目標照明環境中時的樣式來顯示對象。但這種方法一直都不適合在高分辨率的體三維捕獲系統中使用。我們的方法整合了這種能力，可允許系列在任意環境下真實地重照明人類，并且包含自由視點體三維捕獲的優勢，以及在動態表現的幾何精確度實現了提升。”

體三維視頻領域在過去兩年間一直在穩步增長。除了微軟的Mixed Reality Capture Studios外，英特爾、索尼同樣構建了自己的捕獲工作室，而Verizon則通過收購Jaunt涉足體三維捕獲技術。體三維視頻在增強現實體驗中的用例十分廣泛。與此同時，Magic Leap收購Mimesys及其實時全息視頻通訊技術表明，體三維捕獲有望在未來改變人們的通訊方式。

另外，谷歌創意實驗室和Opera Queensland的合作揭示了另一個用例：虛擬劇院。在SIGGRAPH大會亮相的原型體驗包含通過Relightables系統捕獲的三位演員表演。在谷歌的大力支持下，基于Relightables體三維捕獲系統的3D內容將能為沉浸式體驗帶來更多的真實感，令我們愈加難以區分虛擬與現實。

總結

以上是生活随笔為你收集整理的谷歌体三维捕捉新突破：实现后期任意照明修改的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。