通過使用注視來確定要分析的攝像頭元素的優(yōu)先級(jí)，分析用戶正在看的內(nèi)容可能有助于Apple Glass或AR頭戴式耳機(jī)改善其在處理視頻方面的性能。

增強(qiáng)現(xiàn)實(shí)系統(tǒng)依賴于收集有關(guān)環(huán)境的數(shù)據(jù)，以便更好地向用戶提供混合現(xiàn)實(shí)圖像。對(duì)于大多數(shù)人來說，這主要?dú)w結(jié)為從用戶的眼睛附近獲取實(shí)時(shí)的攝像頭饋送，對(duì)其進(jìn)行數(shù)字化處理，然后以更改后的狀態(tài)向用戶展示，盡管這也可以涵蓋深度映射等其他數(shù)據(jù)類型。

由于許多VR和AR系統(tǒng)使用與主機(jī)捆綁在一起的頭戴式耳機(jī)，因此需要輸入有關(guān)環(huán)境的數(shù)據(jù)可能會(huì)導(dǎo)致問題，因?yàn)橐淮沃荒芡ㄟ^這么多的數(shù)據(jù)來傳送數(shù)據(jù)。多年來對(duì)相機(jī)的改進(jìn)，包括更高的分辨率和幀速率，意味著有更多的數(shù)據(jù)需要分析和處理，并且可能束縛不了。

還有更多的處理資源需要考慮，因?yàn)閿?shù)據(jù)越多，創(chuàng)建AR圖像所需的處理就越多。

在周二美國(guó)專利商標(biāo)局授予的一項(xiàng)名為“基于凝視方向的視頻數(shù)據(jù)自適應(yīng)預(yù)過濾”的專利中，Apple試圖通過縮小需要處理的視頻數(shù)據(jù)的范圍來解決入侵問題。處理發(fā)生。

簡(jiǎn)而言之，該專利建議該頭戴式受話器可以拍攝環(huán)境圖像，并對(duì)場(chǎng)景應(yīng)用一些過濾器，每個(gè)過濾器覆蓋視頻幀的不同區(qū)域。這些過濾器根據(jù)用戶的目光以及典型的AR和VR數(shù)據(jù)點(diǎn)(如頭部位置和動(dòng)作)來確定要發(fā)送給主機(jī)進(jìn)行處理的數(shù)據(jù)的位置。

過濾后的數(shù)據(jù)層通過系繩或無線方式發(fā)送到主機(jī)，然后進(jìn)行處理并反饋到耳機(jī)進(jìn)行顯示。然后循環(huán)重復(fù)。

其背后的邏輯是，處理用戶實(shí)際看到的內(nèi)容并不一定需要照相機(jī)采集的所有數(shù)據(jù)。當(dāng)用戶可能面對(duì)一個(gè)方向時(shí)，他們的眼睛可能會(huì)指向一側(cè)，從而使內(nèi)容在其視圖的另一側(cè)的呈現(xiàn)實(shí)際上毫無意義。