近日，美國專利商標局正式授予蘋果公司一項專利，該專利涉及允許iPhone成為混合現實頭顯的輸入裝置。更具體地說，允許使用者看到他們的iPhone顯示屏，並在計算機生成的現實（CGR）環境中與之互動（如遊戲環境）。然後，iPhone可以作為一個3D控制器、3D指標、使用者介面輸入裝置等使用。

在他們的專利背景中，蘋果公司指出，為了使使用者與電子內容進行互動，可能希望使使用者能夠透過單獨的現實世界的裝置，如iPhone（或iPad）的觸控式螢幕提供輸入。然而，現有系統無法充分追蹤智慧手機或平板電腦相對於CGR環境中內容的位置。這就是蘋果公司這項專利要解決的問題。

蘋果公司的專利涵蓋了裝置、系統和方法，為使用多個電子裝置與電子內容進行互動提供了改進的使用者介面。一些實施方案涉及一個第一裝置，如頭戴式裝置（HMD），它有一個影象感測器（如攝像頭）和一個或多個顯示器，以及一個第二裝置（如iPhone），它有一個顯示器。

在第二裝置（iPhone）的顯示屏上顯示一個標記，第一裝置會根據該標記確定第二裝置與第一裝置的相對位置和方向。

在一些實施方案中，標記物是包含紋理/資訊的影象，該資訊可使影象被檢測到並使確定影象相對於攝像頭的姿態成為可能。

在一些實施方案中，可根據第二裝置的相對位置和方向產生控制訊號。例如，第一裝置使用第二裝置的位置和方向，使第二裝置（iPhone）被用作3D控制器、3D指標、使用者介面輸入裝置等。

圖源：patentlyapple

蘋果公司的專利圖2說明了使用者在佩戴混合現實頭顯時能夠在計算機生成的現實（CGR）環境中使用iPhone作為輸入裝置。

蘋果公司的專利圖3A說明了圖2中提到的由物理第二裝置#130（iPhone）顯示的標記#310。在一些實施方案中，使用者無法檢視其iPhone的物理顯示屏，因為使用者沉浸在虛擬場景#205中。因此，在一些實施方案中，iPhone可在其物理顯示屏上顯示一個標記（#310），以方便頭戴式顯示器（HMD）對iPhone的追蹤。

在一些實施方案中，該標記可作為HMD的參考點，以準確跟蹤iPhone的位置和旋轉。

在一些實施方案中，標記物（#310）是包含紋理/資訊的影象，該資訊可使影象被檢測到並使確定影象相對於攝像頭的姿態成為可能。

在一些實施方案中，標記物可以是一個圖案，也可以是一個單一指示符。例如，該標記可以是網格、交叉劃線、象限識別符號、螢幕邊界等。

欲瞭解更多細節，可查閱蘋果公司這項專利號為11，036，284的授權專利。