我們以一款國內自主研發的媒體服務器——hecoos虛擬制作服務器為例,其完成一場xR項目需要的基本配置有:一套hecoos虛擬制作系統、一套攝像機追蹤系統、一套實時渲染引擎、LED屏/投影碗幕。
實現xR技術的流程可分為5個環節:
1、攝像機追蹤系統將真實攝像機的實時運動位置、姿態及鏡頭參數(x、y、z、pan、tilt、roll、FOV......)傳輸到hecoos虛擬制作服務器。
2、hecoos虛擬制作服務器對攝像機信息進行實時解析與處理,驅動實時渲染引擎渲染該視點所需的虛擬畫面。
3、hecoos虛擬制作服務器接收虛擬畫面并通過透視投射將渲染的虛擬畫面輸出至背景LED屏/投影碗幕,由攝像機完成最終采集。
4、將LED屏/投影碗幕外拓展空間中的虛擬內容疊加在鏡頭前,采用自動校色功能對所有虛擬畫面分別進行顏色校正,達到背景畫面顏色統一。
5、鏡頭合成后,即為觀眾在鏡頭前看到的最終影像——無論鏡頭如何移動,演員始終身處在符合正確透視關系的一整片廣袤森林前。