據信蘋果公司正在研發某種虛擬現實或增強現實硬體，還被認為正在研發Apple Glass AR智慧眼鏡

。雖然產品還沒有推出，但蘋果已經在該領域進行了廣泛的研發。

蘋果的增強現實計劃可能涉及建立使用者手指的3D模型，用於與虛擬觸控式螢幕互動，而使用紅外光學標記可能會使AR系統更容易調整iPhone或iPad螢幕上看到的內容。在週二美國專利和商標局授予蘋果的一對專利中，蘋果試圖在兩個方面改進AR。

AR可以提供的好處之一是在使用者視野範圍內的任何地方向使用者展示一個虛擬顯示屏。這種虛擬顯示屏可以很容易地疊加到牆上或物理物品上，甚至可以讓其懸掛在半空中。對於期望能夠同時使用智慧手機和平板電腦的使用者來說，使用AR頭顯可能會帶來問題，因為無法保證在頭顯內真的可以看到顯示屏。

還有一種可能是AR頭顯利用移動裝置的存在作為使用者的互動方式，有可能用不同的圖形，或者更容易看到的版本取代裝置顯示屏上的內容。甚至可以在完全關閉裝置螢幕的情況下，在AR頭盔內完全看到顯示屏，同時保持觸控功能和其他功能的完整性。

在這項名為 “帶有光學標記的電子裝置 ”的專利中，蘋果認為可以透過讓AR系統更容易檢測到智慧手機就在附近，從而提高智慧手機和AR耳機之間的互操作性。在該專利中涉及到新增頭顯可以使用的視覺標記。

人眼看不見的標記可以告訴AR系統它是什麼樣的裝置，以及它的方向。這個想法是，在裝置外部附著有標記，可以被AR頭顯上的攝像頭和其他感測器讀取。透過看到這些標記，這可以讓AR系統計算出它是什麼樣的裝置，它的方向，顯示屏在哪裡，以及其他因素。

這些標記可以提供定位資料，以及其他資訊，如獨特的識別符號，透過二維條碼提供。這個唯一識別符號甚至可以是使用帶有 “光譜反射碼 ”的標記。雖然這些標記可以讓使用者看到，但蘋果提出這些標記實際上可以讓使用者完全看不到。可能由聚合物層中的光致發光顆粒形成，或者使用透明球體的逆反射層，這些標記物只能透過紅外光來實現可見。

一個AR系統可能打算讓應用在牆上的虛擬顯示屏作為觸控式螢幕操作，但由於牆上沒有感測器來檢測觸控，它不能檢測觸控。使用手套或其他輸入機制來檢測牆上虛擬顯示屏的觸控可能是可行的，但在沒有手套的情況下進行檢測是一個比較棘手的問題。蘋果第二項名為 “生成用於視覺觸控檢測的指尖3D模型 ”的專利試圖解決這個問題。

正如名稱所詳述的那樣，該專利圍繞著一個建立使用者指尖、手指或手的3D模型的系統。一旦生成模型，該模型就可以透過系統分析成像感測器資料進行檢測，以檢測虛擬顯示屏的有目的觸控。該模型可以透過監測使用者的手在接觸實際的觸控敏感表面，它使用多個攝像頭或成像感測器，可以從多個角度捕捉手指或手在觸控物體時的情況。