未來的3D AR直播，在瀏覽器就能觀看？

前不久，青亭網報道了一場基於WebAR和容積攝影技術的AR採訪直播，這種基於網頁端的AR技術意味著大部分移動裝置使用者都可以觀看，而且不需要下載app。據悉，這場AR直播的技術分別由8i和8th Wall提供，號稱延遲可控制在幾毫秒內。

WebAR被看作是一種通用的、輕量化AR顯示方案，它的特點是不受平臺和硬體效能限制，在手機、移動裝置的網頁中即可執行。而WebAR容積影片串流方案，則是在WebAR技術基礎上，加入實時渲染功能，也就是說你不需要使用AR眼鏡或下載app，即可線上觀看AR形式的直播活動。

在WebAR體驗中觀看AR容積影片已經比較常見，一些歌手會將錄製的3D表演以這種形式展示，以推廣自己的專輯。而由於技術限制，在WebAR中直播3D影片的案例幾乎沒有，因此8i和8th Wall展示的方案受到業內關注。

據瞭解，該方案可實時串流AR容積影片，比基於Avatar的線上協作方案更逼真。與2D影片直播相比，AR容積影片直播的優勢在於，觀眾可以從多個角度檢視人物的3D模型，就像是將真人搬到你的房間裡那樣。觀眾只需要掃描二維碼即可觀看，8i認為這是釋出3D直播的最佳形式。

在本次合作中，8i提供容積影片串流和創作技術，而8th Wall則提供WebAR技術。8i該公司CEO Hayes Mackaman表示：本次WebAR採訪的直播過程中，從資料採集、壓縮到串流，整個過程只需要不到100毫秒，可以快速處理高品質容積影片。8i希望透過容積攝影和3D串流技術，保持表演、交流等場景的真實性。

細節方面，上述方案的使用流程如下：1）在容積攝影工作室完成3D影片動捕；2）生成動態3D模型；3）壓縮3D影片，以適合串流；4）在支援AR的網頁上執行實時的3D影片，並透過SLAM系統來最佳化和定位。

當談及為什麼在直播中採用寫實的容積影片，Mackaman表示你：8i的目標是讓人類形象在數字空間中具有存在感，你不僅可以用avatar來代表自己，也可以用寫實的3D容積模型，代表更真實的自己。應用場景方面，它適合任何需要逼真視覺效果的場景，比如：培訓模擬、演講、表演、社交、遠端診療、運動、娛樂等等。

市面上已經有一些基於容積捕捉的直播案例，不過通常需要在特定的app或VR平臺觀看。相比之下，WebAR形式大幅降低觀眾門檻，可以讓更多人同時觀看。8th Wall創始人兼CEO Erik Murphy-Chutorian表示：8th Wall的WebAR直播平臺門檻足夠親民，可同時容納數十萬人，直播長度不受限制，而且它相容8th Wall相容全球35億智慧手機。此外，它不需要5G網路也能執行，理想的頻寬是10 mbps。

據瞭解，8th Wall專注於研發低門檻AR開發工具和平臺，支援的技術包括目標識別、面部濾鏡、場景特效等等。截至目前，8th Wall已經幫助客戶開發1000多個AR廣告。Murphy-Chutorian表示：8th Wall從2019年開始，就在探索容積影片。

硬體方面，WebAR直播是採用的容積捕捉方案包含30個4K攝像頭，這些攝像頭實時捕捉主持人和嘉賓的3D動態，並快速以AR的形式進行串流，整個過程不需要專業動捕裝置。此外，8i研發的容積影片方案，最多可處理60個4K攝像頭的資料，透過機器學習來生成3D模型。為了展示容積影片對3D動態的捕捉效果，Mackaman在直播過程中還展示了一段舞步。

除了3D直播外，8i和8th Wall研發的方案還支援XR對話功能，也就是說觀眾可以與3D容積人物實時對話。不過，目前該功能僅支援1-5人同時交流，未來可能會擴大規模。與主播互動是直播的一個重要部分，因此XR對話功能的重要性在於，未來可以讓AR直播變成互動性的活動，而不只是觀眾單方面的觀看體驗。

實際上，8i和8th Wall展示的方案已經是可量產、可規模部署的產品。Mackaman指出，容積影片直播方案不是研發中的產品，而是商業化的方案，甚至在日本已經有客戶在使用，將容積影片用來開發C端移動AR內容和企業級VR應用。

當然，使用者還需要考慮容積攝影本身的成本，因為需要線上下的容積工作室拍攝，沒有家用方案，所以主要應用於商業場景。據悉，整個容積攝影方案的售價大約在35萬到100萬美元之間。此外，直播服務還需要按月收費。

你還可以租賃8i的線下工作室，這些工作室位於東京、首爾、曼谷、布里斯賓、芝加哥、洛杉磯等等，未來還將進軍奧蘭多。

總之，透過展示WebAR容積影片直播方案，8i和8th Wall展示了未來實時WebAR的應用潛力，除了採訪外，也可以用來舉辦演唱會、上網課、直播帶貨，觀眾只需要用手機掃碼即可觀看，十分方便。參考：

VRScout