來源:新浪VR
蘋果眼鏡未來可能支持用戶自定義背景圖。
蘋果一直在研究如何讓蘋果眼鏡頭顯進行色度摳像,或者用蘋果AR圖像替換純色背景。2020年2月蘋果提交一項名為“用于混合現(xiàn)實的低延遲色度鍵控嵌入頭戴式顯示器”的專利申請,該專利于本周才被披露。如今大家都知道可以用其他背景圖,如海灘或Logo來替代辦公室或者家庭背景,大家也都知道這些背景的效果不太理想,尤其是在發(fā)言人移動的時候。
然而這種背景替換需要大量的處理能力,在2020年7月的更新之前,Skype iOS版本甚至不能像Mac或PC版本那樣設(shè)置模糊背景。模糊背景是一個十分復(fù)雜的過程,他需要確定主講人頭部的輪廓和背景范圍。而Chroma key簡化了這一過程,它將人物被放置在一個單一的純色背景前,這和電影中使用綠屏或藍屏的原理是一樣的。在主講人和背景之間的界限非常分明時,Zoom和Skype這類軟件均可以很容易的替換背景,不過這些都是2D系統(tǒng)。而蘋果眼鏡的目標是通過3D方式實現(xiàn)背景替換,使在佩戴者四處走動時,背景也可以被替換掉。
此次蘋果的專利申請同時涉及為蘋果AR制作3D立體版背景替換,以及讓背景替換的作速度足夠快。這不僅與頭顯的處理能力有關(guān),也與將數(shù)據(jù)返回用戶視野的速度有關(guān)。蘋果表示,需要可穿戴式沉浸式頭顯(HMD),利用嵌入式立體RGB攝像頭捕捉環(huán)境,并進行實時的顏色鍵控。還會有一個顯示系統(tǒng)來顯示增強了虛擬內(nèi)容的真實世界圖像。該系統(tǒng)以高幀率(通常為75幀/秒或更多)運行,通過捕捉圖像并將其格式化以在頭顯中顯示,它實現(xiàn)了小于一幀的延遲。
根據(jù)蘋果表示,頭顯將搭載相機傳感器,在混合現(xiàn)實環(huán)境中執(zhí)行Chroma key,并在延遲最小的情況下完成。低延遲是通過在頭顯本身嵌入處理來實現(xiàn)的,具體來說,就是將攝像頭圖像格式化,檢測所選顏色范圍,并與虛擬內(nèi)容進行合成。該專利申請并沒有解釋替換圖像來自哪里。在Zoom或Skype會議中,演講者可自行選擇背景圖。
新浪VR編譯