在今年的 WWDC23 上官宣 Apple Vision Pro 期間,蘋果推出了一項(xiàng)名為 Eyesight 的特定功能。蘋果指出:“Apple Vision Pro 可幫助你與周圍的人保持聯(lián)系。EyeSight 會(huì)展現(xiàn)你的眼睛,并讓附近的人知道你何時(shí)使用應(yīng)用程序或完全沉浸在體驗(yàn)中。當(dāng)有人走近時(shí),Apple Vision Pro 同時(shí)讓你看到這個(gè)人,并向?qū)Ψ秸故灸愕难劬Α!?/p>

  從技術(shù)上講,蘋果公司的 Mike Rockwell 這樣描述 Eyesight:“我們還認(rèn)真考慮了其他人在佩戴 Vision Pro 時(shí)如何與你互動(dòng)。Eyesight 利用獨(dú)特的弧形 OLED 面板和光柵透鏡,將你眼睛的正確視角投射到每個(gè)注視你的人身上。結(jié)果是 3D 顯示屏,使設(shè)備看起來(lái)透明。”

  近日,歐洲專利局公布了微軟一項(xiàng)新專利,標(biāo)題為“控制計(jì)算機(jī)生成的面部體驗(yàn)”。

  微軟指出,他們的發(fā)明涉及顯示計(jì)算機(jī)生成的面部表情。其中一個(gè)示例提供了一種顯示計(jì)算機(jī)生成的面部表情的方法。該方法包括接收表情數(shù)據(jù),以及至少基于表情數(shù)據(jù)為用戶的眼睛區(qū)域生成一個(gè)或多個(gè)面部表情。該方法還包括在頭戴式設(shè)備的外向顯示器上顯示眼睛區(qū)域的一個(gè)或多個(gè)面部表情。

  微軟專利圖 11A 和 11B 說(shuō)明了一個(gè)示例場(chǎng)景,其中激活頭戴式設(shè)備上的外部顯示屏,并在顯示屏上打開計(jì)算機(jī)生成的面部表情,特別是在眼睛區(qū)域。

  微軟專利圖 12 顯示了一個(gè)示例頭戴式設(shè)備的框圖,該設(shè)備被配置為顯示計(jì)算機(jī)生成的面部表情;圖 13 示出了顯示計(jì)算機(jī)生成的面部表情的示例方法的流程圖。

  該專利中公開的示例涉及利用包含一個(gè)或多個(gè)面部追蹤傳感器的面部追蹤系統(tǒng),來(lái)控制計(jì)算機(jī)生成的面部表情的顯示。

  此外,從每個(gè)面部追蹤傳感器接收隨時(shí)間變化的數(shù)值,并且基于接收到的數(shù)據(jù)確定每個(gè)面部追蹤傳感器的數(shù)值范圍,該數(shù)值范圍包括在一段時(shí)間內(nèi)(例如在滾動(dòng)時(shí)間窗口內(nèi))接收到的最小值和最大值。對(duì)值范圍和接收傳感器值進(jìn)行處理,以將接收的傳感器值轉(zhuǎn)換為混合形狀映射,其中混合形狀映射對(duì)應(yīng)于值范圍內(nèi)傳感器值的位置。

  然后,至少基于混合形狀映射確定表達(dá)式數(shù)據(jù),并將其提供給一個(gè)或多個(gè)設(shè)備進(jìn)行呈現(xiàn)。以這種方式,一組面部追蹤傳感器可以共同用于感知用戶表情的整體近似值,從而控制以化身形式呈現(xiàn)的表情。化身可以呈現(xiàn)給傳感器設(shè)備用戶以外的其他人。這可能有助于 AR 和/或 VR 環(huán)境中的人際交流。

  此外,在 2022 年 8 月,Meta 的一項(xiàng)專利申請(qǐng)也顯示該公司正在開發(fā)一種在頭顯設(shè)備中查看用戶眼睛的方法,如下圖專利所示。

來(lái)源:新浪VR