現(xiàn)在不少VR頭顯都會利用前置攝像頭納入AR透視功能。但傳統(tǒng)的透視視圖質(zhì)量有限，這是因為眼睛、顯示器和攝像頭在空間中的位置不一致。糟糕的透視視圖會導致距離知覺受損、定向障礙和手眼協(xié)調(diào)性差。

所以，蘋果希望利用所謂的“場景攝像頭重定向”技術(shù)來幫助解決這個問題。

蘋果指出，在各種實施例中，通過變換由場景攝像頭捕獲的圖像來補償眼睛、顯示器和攝像頭的位置差異，以使其看起來像是在與用戶眼睛相同的位置捕獲，這可以緩解所述問題。一種形式的補償是基于平面世界的假設(shè)：真實世界是一個單一深度的圖像。在各種實現(xiàn)中，所述深度以各種方式確定。

在一個實現(xiàn)中，MR視圖呈現(xiàn)模塊包括數(shù)據(jù)獲取單元、MR視圖呈現(xiàn)單元、單應(yīng)單元和數(shù)據(jù)發(fā)送單元。

在一個實現(xiàn)中，數(shù)據(jù)發(fā)送單元配置為至少向控制組件發(fā)送數(shù)據(jù)（如渲染數(shù)據(jù)和位置數(shù)據(jù)等）。

在一個實現(xiàn)中，數(shù)據(jù)獲取單元配置為從至少控制器組件獲取數(shù)據(jù)（如渲染數(shù)據(jù)、交互數(shù)據(jù)、傳感器數(shù)據(jù)、位置數(shù)據(jù)等。

在一個實現(xiàn)中，MR視圖呈現(xiàn)單元配置為經(jīng)由一個或多個顯示器呈現(xiàn)MR內(nèi)容。

在一個實現(xiàn)中，單應(yīng)單元配置成基于場景的深度，以及場景攝像頭的視點和用戶的視點之間的差異來變換場景的圖像。

簡單來說，所述方法包括使用場景攝像頭捕捉場景的圖像；使用一個或多個處理器確定場景的深度；使用一個或多個處理器，基于場景攝像頭視點和用戶視點之間的深度和差異來變換場景的圖像；然后顯示器顯示變換后的圖像。

如上圖所示，5A是不佩戴頭顯時用戶應(yīng)看到的畫面；5B是由場景攝像頭捕獲并呈現(xiàn)的畫面，場景攝像頭的視點和用戶視點不同；5C則是應(yīng)用變換后的圖像。

在將5A與5B進行比較時，可以注意到，由于場景攝像頭的視點存在水平偏移，圖像中的對象看起來更近。另外，由于場景攝像頭的視點存在垂直偏移，圖像中的對象看起來較低。

在將5C的變換圖像與5A進行比較時，可以注意到5C的對象出現(xiàn)在與5A對象相同的高度和距離處。

相關(guān)專利： Scene camera retargeting

名為Scene camera retargeting的蘋果專利申請最初在2020年9月提交，并在日前由美國專利商標局公布。
責任編輯人：CC