科學家們推出了一種新的虛擬現實(VR)沉浸式體驗，該體驗基于一種新穎的系統，該系統使用光場捕捉并渲染來自現實世界的高質量逼真圖像。

谷歌公司推出了基于新系統的全新虛擬現實(VR)沉浸式體驗，該系統使用光場捕捉并呈現來自現實世界的高質量逼真圖像。由Google領先的研究人員組成的團隊，歡迎來到Light Fields，這是科技巨頭闖入新興的光場VR體驗舞臺，這是VR視頻技術的一個令人興奮的角落，因為它承諾提供極高質量的圖像和體驗在虛擬世界中。

谷歌今年早些時候發布了歡迎使用Light Fields作為Steam VR上的免費應用程序，用于HTC Vive，Oculus Rift和Windows混合現實耳機。創作者將在今年會議的新空間Immersive Pavilion的SIGGRAPH 2018展示VR體驗。該館專門用于虛擬，增強和混合現實，并將包含：Vrcade，VR，AR和MR游戲或體驗的空間;VR Theatre，一個講故事的盛會，是計算機動畫節的一部分;和著名的村莊，用于展示大型項目。SIGGRAPH 2018年8月12日至16日在不列顛哥倫比亞省溫哥華舉行，是一年一度的聚會，展示了世界領先的專業人士，學者和創意人才，他們處于計算機圖形學和互動技術的最前沿。

歡迎來到光場的目的地包括美國國家航空航天局的航天飛機發現號，向觀眾提供飛行甲板內的宇航員視圖，該視圖從未向公眾開放;Gamble House的原始柚木和桃花心木內飾，加利福尼亞州帕薩迪納的建筑瑰寶;以及位于加利福尼亞州格拉納達山的輝煌的圣斯蒂芬教堂，這里有超過14,000件閃閃發光的彩色玻璃墻。

“我喜歡VR中的光場可以將你傳送到現實世界中的異國情調，真正讓你相信自己就在那里，”Google的軟件工程師Ryan Overbeck說。“對我來說，這很神奇。”

為了將這種體驗變為現實，Overbeck與一個團隊合作，其中包括Google的高級工程師Paul Debevec，他負責管理該項目并領導工程師薛明宇，Jay Busch和Graham Fyffe的硬件部分。有了Overbeck，Daniel Erickson和Daniel Evangelakos專注于軟件終端。研究人員設計了一個全面的系統，用于從現實世界中捕獲的鏡頭中捕獲和渲染高質量的球形光場靜止圖像。他們開發了兩款易于使用的光場攝像機裝置，基于GoPro Hero4action運動相機，可有效捕捉球體表面的數千張圖像。然后，這些圖像通過基于云的光場處理管道。

除此之外，Overbeck解釋道，“處理管道使用計算機視覺將圖像放置在3D中并生成深度圖，我們使用vp9視頻編解碼器[視頻格式化]的修改版本將光場數據壓縮到可管理的尺寸。”他指出，為了渲染光場數據集，團隊使用了一種渲染算法，可以實時混合數千個光場圖像。

該團隊依靠Google在計算機視覺，圖形，視頻壓縮和機器學習方面的優秀工程師庫來克服光場技術帶來的獨特挑戰。他們還與WebM團隊(制作vp9視頻編解碼器)密切合作，開發出融入其系統的高質量光場壓縮格式，并充分利用Jump VR團隊的專業知識，幫助制作圖像并生成深度地圖。(Jump是Google的專業VR系統，用于大規模實現3D-360視頻制作。)

事實上，通過Welcome to Light Fields，Google團隊展示了光場VR技術的潛力和前景，展示了該技術能夠以無與倫比的真實感提供真正身臨其境的體驗。盡管光場技術已經在計算機圖形學中研究和探索了30多年，但實際提供高質量光場經驗的實際系統尚未成為可能。

團隊創建VR光場體驗背后的一部分動力是激發新生的領域。

“歡迎來到Light Fields，證明現在有可能制造一個引人注目的光場VR瀏覽器，它運行在消費級硬件上，我們希望這些知識能夠鼓勵其他人參與構建光場技術和媒體，”Overbeck說道。 。“我們理解，為了最終制作基于光場的引人注目的消費產品，我們需要一個蓬勃發展的光場生態系統。我們需要開放式光場編解碼器，我們需要藝術家創造美麗的光場圖像，我們需要人們使用VR以便搞光場。“