文 /VR 陀螺 Pancake2018 年,抖音短視電腦抖音短視一支別開生面的頻電頻最 VR 游戲視頻風靡全球,從此成就了一款現象級產品,腦版它就是官網《Beat Saber》。直到現在《Beat Saber》仍然霸榜全球,制作單 Quest 平臺收入就
.jpg)
文 /VR 陀螺 Pancake
2018 年,好軟一支別開生面的抖音短視電腦抖音短視 VR 游戲視頻風靡全球,從此成就了一款現象級產品,頻電頻最它就是腦版《Beat Saber》。直到現在《Beat Saber》仍然霸榜全球,官網單 Quest 平臺收入就超過了一億美元。制作
圖源:網絡視頻中,好軟玩家手持 " 光劍 ",抖音短視電腦抖音短視揮刀砍向迎面飛來的頻電頻最方塊,與游戲場景渾然一體融合其中。腦版
VR 游戲的魅力在于切身體驗到的沉浸感和全新的交互,然而,相比于線下的親身體驗,線上視頻卻仍然是大部分用戶接觸到 VR 的核心途徑,此時,傳統現實人物和 VR 內游戲畫面相互分裂的拼接視頻形式顯然無法傳達 VR 的沉浸魅力,這也是《Beat Saber》現實人物和 VR 游戲畫面相互融合的混合現實拍攝 MRC 能一鳴驚人的原因所在。
從 2018 年 MRC 錄制工具開始迭代,伴隨著 VR 硬件廠商 Meta 的加入,以及 LIV 等專業性工具的入局,MRC 視頻的制作門檻也在逐步減低,不再是專業性后期選手的專屬。
而到了 2022 年,我們看到國內 VR 廠商 PICO 也正式加入到這條賽道,推出了無需綠幕、基于手機的 MRC 視頻解決方案,再次拉低了行業 MRC 視頻的制作門檻。
全球巨頭探索 MRC 視頻拍攝
依靠綠幕或藍幕的虛擬現實混合拍攝在影視制作行業幾乎是標配,特別是在需要進行虛實融合特效制作、動畫電影拍攝時,制作團隊幾乎都會采用綠幕 + 動作捕捉的方式,如今也有一部分采用 LED 屏幕代替綠幕背景,來實現虛擬拍攝的方案。
影視制作當中的虛擬拍攝,是為了實現更好的虛實融合特效,以及降低傳統制作成本,更具定制化的故事情節;而目前 VR 領域中興起的 MRC 視頻拍攝則是基于熱門的游戲場景,更好地表現 VR 游戲的沉浸魅力,吸引玩家。為了實現更低門檻、低成本的 MRC 拍攝方案,全球諸多頭部企業都進行了積極的探索。
(一)Meta:綠幕 + 實時串流,較高成本的 MRC 視頻制作
Meta 是 VR 行業龍頭企業,它也是最早探索基于 VR 頭顯的 MRC 視頻制作的廠商。早在 2019 年的開發者大會 Oculus Connect 6 上,Meta 就展示了其混合現實捕捉工具(Mixed Reality Capture Tool,簡稱 MRC)。
官方的 MRC 展示視頻中,效果十分震撼,不僅虛實畫面實時同步,而且人物在虛擬場景摳像十分清晰,接觸邊緣也無噪點和模糊處。
圖源:網絡如此精美的 MRC 視頻,當然也需要制作者付出更高的代價。據 Meta 官方介紹,Meta 的 MRC 視頻制作,需要使用 MRC 工具,還要使用分發軟件(OBS)進行拍攝。
與之進行配合的硬件還包括:具備獨顯功能的游戲級個人電腦,接入個人電腦的外置攝像頭,一臺 Meta 的 VR 頭顯以及綠幕背景。
雖然 Meta 的 MRC 存在一定學習成本、時間成本和配置要求,但相對于傳統 " 純后期摳圖 " 的視頻制作形式,Meta 在工作流程上進行了大幅度精簡,開創了早期基于 VR 頭顯的第一方 MRC 視頻制作的先河。
(二)LIV:PC+ 手機雙端,玩法多樣的第三方 MRC
相對于 Meta 提供的基于 PC 的 MR 視頻制作解決方案,第三方平臺 LIV 的解決方案則更加具備靈活性,它支持 PC 和手機雙端,并且在深度機器學習的加持下,無論用戶是否有綠幕,皆可進行 MRC 的視頻拍攝。
另外,LIV 在 PC 端不僅僅支持 MRC 視頻拍攝,還支持 MRC 視頻直播、自定義 Avatar 類型的 MR 視頻等。
LIV 官網不過基于 PC VR 內容的 LIV 也提出了更高的 PC 配置要求——至少英偉達 GTX 1060 或 6GB 同檔位的獨立顯卡,8GB DDR3、英特爾 i5 處理器、固態硬盤。
LIV 還支持手機端的配置,它需要在手機端上安裝 LIV ,以及在 Quest 頭顯上安裝 LIV Connect 應用。安裝完所有內容后,Quest 上的 LIV Connect 應用會提醒用戶通過快速校準進行調整。
完成后,LIV 應用可以顯示特定 Quest 游戲的混合現實視圖,其中會顯示玩家被疊加在虛擬世界的第三人稱視角視圖上。不過,根據網上測試的基于 LIV 的 MRC 視頻來看,其摳像效果表現較為一般,主要是在人體邊緣部分可能會出現模糊,邊緣溢色的問題。也許這就是從 2020 年 LIV 首次推出手機版本至今,它依舊在官網處于 " 實驗室功能 " 的位置的原因之一。當然,相信伴隨著深度學習算法的提升,軟件內容的進一步配合,MRC 效果未來也會逐步改進。
PICO:無綠幕 + 智能手機
更低門檻的 MRC 制作方案
2022 年, PICO 也正式推出了其官方的 MRC,在提升效果的同時進一步降低了使用門檻。
官方教程顯示,只需讓 VR 一體機與智能手機處于同一局域網下,再通過手機端的 "PICO VR 助手 "APP 點擊 " 混合現實錄制 ",按照官方提示,經過簡單的頭顯與手機校準,即可實現 MR 視頻的錄制。
圖源:VR 陀螺PICO 的 MRC 沒有 Meta Quest 那樣復雜的 PC 環境配置,只需一部智能手機即可,與 LIV 的手機端錄制功能一樣,PICO 的 MRC 不需要綠幕(同時也有綠幕模式,使用綠幕模式拍攝效果更好),并且不需要在手機端安裝額外的工具,也不受英語以及網絡的限制,對于國內用戶來說,使用門檻更低,拍攝效果更好。
事實上,PICO 的 MRC 從推出至今,在小半年的時間里也歷經了兩次的迭代和優化,作為第一批體驗到 MRC 的用戶,陀螺君也看到了 PICO 在 MRC 上進步,包括支持更多的手機型號和更多 VR 內容適配。
在第一代的版本中,PICO MRC 僅支持在 iPhone X 及更新版本的蘋果手機中使用,而現在它同時也擴展到了安卓機型當中。不過,由于實時摳圖對性能要求較高,手機性能會在一定程度上影響摳圖效果。目前 PICO 的 MRC 已支持在八款主流熱門游戲中使用,包括《多合一運動 VR》、《瘋狂功夫》、《超燃一刻》、《方寸幻境》、《VFC 格斗家》、《Histream》、《動感音旅》、《水果忍者》,更多作品在陸續適配中。
鮮花低頭,深水急救!減去花枝末端一小段,然后將鮮花放到盛滿冷水的容器中,僅留花頭露出水面,一兩個小時后花朵就會蘇醒過來喲!
圖源:PICO從實際畫面效果來看,PICO 用手機結合 AI 算法摳圖所實現的效果,邊緣清晰可見,并且幾乎看不出溢色,堪比專業級摳圖效果。
PICO MRC 背后原理揭秘:
AI 摳圖 + 無線投屏
之所以 PICO 的 MRC 能夠實現如此好用的拍攝效果,據 VR 陀螺了解,其主要依賴于多項技術創新以及背后字節的技術中臺提供的強大的摳圖技術以及無線投屏能力的幫助。
一方面,PICO 利用了深度學習摳圖模型,將人物從物理環境中摳出并且疊加到虛擬游戲空間中。混合現實錄制摳圖模型不僅可以摳人,也可以摳 VR 頭顯和手柄,是對 VR 場景下做的特別優化。
AI 深度學習的摳圖模型,讓 PICO VR 實現了不用綠幕也能拍出虛實融合的 MR 視頻效果,而且其 " 虛實疊加 " 的顯示效果極具層次感,非一般的后期剪輯可比。當然,PICO 也支持 " 綠幕模式 " 拍攝,在增加背景綠幕等顯著顏色背景之后,通過實時自動合成渲染的方式,可以大幅提升摳圖和視頻整體效果。另一方面,在手機端實時顯示的 " 虛實疊加 " 混合現實視頻,背后則是其強大的 " 無線投屏 " 技術,它需要將 VR 頭顯內實時顯示的 " 虛擬畫面 " 通過 WIFI/ 蜂窩網絡同步輸出到手機端,這對于帶寬網絡環境和 PICO VR 頭顯內的實時錄屏傳輸技術都提出了苛刻的要求。
圖源:VR 陀螺摳圖 + 投屏,成就了 PICO 的混合現實錄制功能,看似簡單明了的技術融合背后,卻是一個業內不可忽視的創新之舉,它帶來了更低門檻的 MR 視頻制作。
目前官方也正在將該 MRC 制作方法申請作為發明專利。天眼查顯示,今年 10 月份北京字跳網絡技術有限公司專利 " 視頻錄制方法、裝置、設備及介質 " 正式公開,申請公開號為 CN115150555A,根據其摘要說明正是指代目前應用于 PICO VR 上的混合現實視頻制作,可以優化 VR 頭戴設備的實時性能消耗,避免畫面顯示卡頓和幀率下降的風險,使得用戶的體驗沉浸感更強,拍攝出來的畫面也更流暢。
雖然 PICO VR 目前的混合現實錄制在算法摳圖上仍有需要完善的細節,但是相比于傳統的 MR 視頻,在制作流程、制作時間、技術要求上都降低了不少。PICO 混合現實錄制工具的最大的亮點莫過于拋棄了以 PC 端為陣地核心的玩法,以無線網絡為介質,將智能手機的便攜性和普及性價值最大化呈現。
低門檻 MRC 視頻制作
激活 VR 商業生態循環
MRC 視頻是一種極具科幻氣息的內容展現形式,在 5G 大流量時代,短視頻時代,可以給到內容創作者、VR 開發商和 VR 硬件廠商連環正向效應。
國產化 " 混合現實錄制 " 工具的出現,可以讓更多視頻博主加入到 MRC 視頻拍攝的隊伍中來,豐富 UGC 視頻內容創作,憑借差異化的內容,也能贏得更多流量關注。
并且,透過 MRC 視頻,VR 內容開發商們也能讓更多 C 端用戶接觸到自家內容的創新性和趣味性,讓 MRC 視頻成為 VR 內容的最佳傳播介質,從而提高產品銷量和品牌影響力。據悉,VR 內容開發商只需在軟件內集成對應 SDK,即可讓自家 VR 軟件支持 PICO MRC。
而作為 MRC 的提供者和 VR 內容的承載平臺,PICO VR 也可以借助 MRC 視頻的傳播,吸引更多玩家和三方內容創作者,助推其 VR 硬件市場的增長。并且筆者大膽推測該功能在未來也可以更好地聯動抖音集團旗下其他移動端產品,如視頻剪輯軟件 " 剪映 ",短視頻平臺抖音等,形成從硬件終端、軟件工具、內容宣發的完整閉環生態,發揮抖音的大流量平臺機制,達到提高 PICO 市場品牌知名度和助推 VR 一體機市場提升的效果。
如果衣領和袖口較臟,可將衣物先放進溶有洗衣粉的溫水中浸泡15-20分鐘,再進行正常洗滌,就能洗干凈。
結語
MRC 的可拓展性很強,未來或許并不局限于 " 混合現實視頻 " 制作,在 MRC 視頻的基礎上,還能進一步利用純視覺全身動捕等技術,將真人自定義為 Avatar,從而創作個性化 MRC 視頻;此外,通過在線流媒體技術,實現 MR 直播,在 VR 中與用戶互動,創新傳統直播形式也是未來的發展趨勢之一。
MRC 虛實融合視頻創作工具的推出,將大幅改變 VR 內容傳播效率與效果,為全球 VR 終端普及帶來重要價值。期待未來的 MRC 功能不斷拓展,VR 內容生態更加豐富,中國 VR 產業邁向更高的階梯。
第一時間了解 XR 資訊
關注 VR 陀螺官網(vrtuoluo.cn)
VR 陀螺的聯系方式:
商務合作 | 投稿 :
西瓜(微信號 18659030320)
六六(微信號 13138755620)
尋求免費曝光:
六六(微信號 13138755620)
炒菜要加熱水:炒蔬菜時,不要加冷水,冷水會使菜變老、變硬、不好吃,而加開水炒出來的菜又脆又嫩。
免責聲明:本站所有信息均搜集自互聯網,并不代表本站觀點,本站不對其真實合法性負責。如有信息侵犯了您的權益,請告知,本站將立刻處理。聯系QQ:1640731186

國家京劇院舉辦首屆優秀廉政劇目展演 以西皮二黃傳浩然正氣

上半年全球耳戴市場同比增長11.8% 耳夾式產品受歡迎

雅思組合等多人退賽!王祉怡升至頭號種子

《寶可夢傳說ZA》超級摔角鷹人特性介紹 超級摔角鷹人是什么屬性

“弘揚抗戰精神,傳承紅色基因”主題宣講活動走進縣中醫醫院

《植物大戰僵尸雜交版》控制臺功能一覽 控制臺怎么開啟

金輝控股成功發行38億CMBS 最低利率4.75%

NORTHLAND諾詩蘭迎來50周年 發布50個徒步目的地徒步打卡線路

東御公司舉辦2024年梅河路政大隊業務綜合技能競賽

吳宗憲兒子女友身份背景起底 水兒拍過華航廣告20歲身高170

吳宗憲兒子女友身份背景起底 水兒拍過華航廣告20歲身高170

NORTHLAND諾詩蘭迎來50周年 發布50個徒步目的地徒步打卡線路

滁州海關優質服務助力農產品出海_

“黑科技”來了,一塊玻璃一年可發電260度,玻璃技術

云南路建十五集團領導同云南紅河州蒙自市交通運輸局副局長會談
Copyright © 2017-now 國際動態傳媒 版權所有