在今年的 WWDC23 上官宣 Apple Vision Pro 期間，蘋果推出了一項(xiàng)名為 Eyesight 的特定功能。蘋果指出：“Apple Vision Pro 可幫助你與周圍的人保持聯(lián)系。EyeSight 會(huì)展現(xiàn)你的眼睛，并讓附近的人知道你何時(shí)使用應(yīng)用程序或完全沉浸在體驗(yàn)中。當(dāng)有人走近時(shí)，Apple Vision Pro 同時(shí)讓你看到這個(gè)人，并向?qū)Ψ秸故灸愕难劬Α！?/p>
從技術(shù)上講，蘋果公司的 Mike Rockwell 這樣描述 Eyesight：“我們還認(rèn)真考慮了其他人在佩戴 Vision Pro 時(shí)如何與你互動(dòng)。Eyesight 利用獨(dú)特的弧形 OLED 面板和光柵透鏡，將你眼睛的正確視角投射到每個(gè)注視你的人身上。結(jié)果是 3D 顯示屏，使設(shè)備看起來(lái)透明。”
近日，歐洲專利局公布了微軟一項(xiàng)新專利，標(biāo)題為“控制計(jì)算機(jī)生成的面部體驗(yàn)”。
微軟指出，他們的發(fā)明涉及顯示計(jì)算機(jī)生成的面部表情。其中一個(gè)示例提供了一種顯示計(jì)算機(jī)生成的面部表情的方法。該方法包括接收表情數(shù)據(jù)，以及至少基于表情數(shù)據(jù)為用戶的眼睛區(qū)域生成一個(gè)或多個(gè)面部表情。該方法還包括在頭戴式設(shè)備的外向顯示器上顯示眼睛區(qū)域的一個(gè)或多個(gè)面部表情。
微軟專利圖 11A 和 11B 說(shuō)明了一個(gè)示例場(chǎng)景，其中激活頭戴式設(shè)備上的外部顯示屏，并在顯示屏上打開計(jì)算機(jī)生成的面部表情，特別是在眼睛區(qū)域。
微軟專利圖 12 顯示了一個(gè)示例頭戴式設(shè)備的框圖，該設(shè)備被配置為顯示計(jì)算機(jī)生成的面部表情；圖 13 示出了顯示計(jì)算機(jī)生成的面部表情的示例方法的流程圖。
該專利中公開的示例涉及利用包含一個(gè)或多個(gè)面部追蹤傳感器的面部追蹤系統(tǒng)，來(lái)控制計(jì)算機(jī)生成的面部表情的顯示。
此外，從每個(gè)面部追蹤傳感器接收隨時(shí)間變化的數(shù)值，并且基于接收到的數(shù)據(jù)確定每個(gè)面部追蹤傳感器的數(shù)值范圍，該數(shù)值范圍包括在一段時(shí)間內(nèi)（例如在滾動(dòng)時(shí)間窗口內(nèi)）接收到的最小值和最大值。對(duì)值范圍和接收傳感器值進(jìn)行處理，以將接收的傳感器值轉(zhuǎn)換為混合形狀映射，其中混合形狀映射對(duì)應(yīng)于值范圍內(nèi)傳感器值的位置。
然后，至少基于混合形狀映射確定表達(dá)式數(shù)據(jù)，并將其提供給一個(gè)或多個(gè)設(shè)備進(jìn)行呈現(xiàn)。以這種方式，一組面部追蹤傳感器可以共同用于感知用戶表情的整體近似值，從而控制以化身形式呈現(xiàn)的表情。化身可以呈現(xiàn)給傳感器設(shè)備用戶以外的其他人。這可能有助于 AR 和/或 VR 環(huán)境中的人際交流。
此外，在 2022 年 8 月，Meta 的一項(xiàng)專利申請(qǐng)也顯示該公司正在開發(fā)一種在頭顯設(shè)備中查看用戶眼睛的方法，如下圖專利所示。
來(lái)源：新浪VR