Table of Contents

頭顯設備錄屏：記錄沉浸式 AR/MR 體驗

在使用增強現實（AR）或混合現實（MR）頭顯設備進行開發、測試或用戶支援時，錄屏是復現和分析問題的重要手段。然而，與移動設備不同，頭顯錄屏涉及到透視（Passthrough）、注視點渲染（Foveated Rendering）等特殊技術，錄屏畫面通常並非完全等同於用戶雙眼直接所見的完整立體視圖。因此，在解讀錄屏內容時，需特別注意其實際人眼體驗之間的差異。

為什麼頭顯錄屏存在視覺差異？

用戶必須特別注意：頭顯設備的錄屏畫面並不完全等於您在鏡片後看到的實際畫面。如果在錄屏中發現了異常，請務必結合實際感受進行描述，以免誤導開發人員。

以下是主要差異點：

  1. 解析度與清晰度差異
  • 錄屏：通常是單眼（如左眼）1080p 或更低解析度的視訊流。
  • 人眼：根據應用的不同，現代頭顯的單眼解析度可達 2K 甚至更高。
  • 影響：您在錄屏中看到的文字、畫面模糊，在頭顯內可能不存在；反之，您在頭顯內看到的微小邊緣鋸齒，錄屏可能完全看不出來。
  1. 視場角（FOV）差異
  • 錄屏：錄製的畫面通常是方形的。尤其在寬視場角設備中，邊緣內容常被裁切。
  • 人眼：人眼看到的畫面是雙眼顯示的，視野更大。
  • 影響：如果您的問題發生在視野邊緣，錄屏可能無法準確體現。
  1. 注視點渲染（Foveated Rendering）影響
  • 錄屏：全螢幕視野中所有內容都會包含在內，包括低解析度邊緣區域。
  • 人眼：人眼注視中心是高解析度的，而非注視中心邊緣是低解析度的。
  • 影響：您實際感覺畫面很清晰，但回看錄屏時發現部分區域是模糊的。這通常是正常現象，並非Bug。因此，在錄屏時務必專注於要展示的部分，這將確保該區域是清晰的。
  1. 幀率與刷新率影響
  • 錄屏：錄製影片的幀率通常以 30FPS 或 60FPS 的幀率進行。
  • 人眼：實際體驗的螢幕刷新率可能達到 90Hz 或者 120Hz。
  • 影響：非常輕微的幀率下降在錄屏中可能無法察覺，但人眼會感受明顯的「卡頓」或「眩暈感」。如果錄屏看起來流暢但實際體驗則不然，這通常是效能問題，在錄屏後務必說明。

OST 頭顯的特殊說明

特別注意：如果您使用的是 OST（Optical See-Through, 光學透視）頭顯，例如 Rokid、Xreal 等 AR 眼鏡，使用錄屏功能並不能錄製到人眼看到的實景內容。

什麼是 OST 設備？

OST 設備透過半透明的光學鏡片直接將光線投射到您的眼中，虛擬內容則透過微型投影或波導疊加在視野中，讓您同時看到真實世界和疊加的虛擬影像。它拍攝外部世界的攝影機僅用於空間定位，並不用於顯示。由於這一機制，設備本身無法「錄製」人眼所見的真實場景。

OST 設備錄屏的局限性

  • 無法錄製實景：OST 設備的錄屏功能只錄製虛擬內容層（GUI、3D 模型、UI 指標等）。
  • 背景是黑的：您在電腦或手機上回放這段影片時，看到的將是純黑色背景上的虛擬物體，完全丟失了真實環境的上下文。
  • 遮擋關係丟失：如果虛擬物體應該被真實物體（如您的手、桌子）遮擋，在錄屏中它們會懸浮在黑屏上，看起來像是錯誤的層級關係。

虛擬內容疊加的視覺誤差問題

即使在理想環境下，OST 頭顯所呈現的虛擬內容與真實世界之間的對齊也不可避免地存在一定程度的視覺誤差。這類誤差並非總是由軟體 bug 或追蹤失效引起，而往往源於設備物理特性與人類視覺系統的根本差異，部分誤差在當前技術條件下無法完全消除。

在提交回饋時，注意區分以下情況：

  • 光學對齊誤差：
    • 現象：當您移動頭部時，虛擬物體似乎在「漂浮」或與真實物體的位置有微小偏差。
    • 原因：使用者透過光學鏡片直視現實世界，而虛擬內容的渲染座標系通常基於頭部追蹤與環境理解系統（如 SLAM）建構。由於光學顯示光路與用於空間定位的攝影機/IMU 之間存在物理偏移，且難以做到亞像素級聯合標定，虛實對齊在邊緣視野或近距離場景中尤為敏感。
  • 人眼標定局限：
    • 現象：虛擬物體看起來有重影（鬼影）、邊緣模糊，或者感覺影像沒有正確投射在空間中。
    • 原因：OST 設備極度依賴精確的瞳距 (IPD) 和眼球位置標定。如果設備沒有針對您的眼睛進行精確校準，或者您佩戴頭盔的位置發生了偏移，光學引擎投射的光線就無法準確進入您的瞳孔。然而，即便設備存在校準，但校準過程基於有限取樣點，難以精確匹配每位使用者的眼球幾何結構、角膜曲率及視覺感知習慣。微小的標定偏差會導致虛擬物體在深度或橫向位置上出現系統性偏移。
  • 個體視覺差異：
    • 現象：不同使用者對虛擬內容位置的主觀判斷可能不同。
    • 原因：不同使用者的視力(如近視、散光)、動態聚焦能力等都會影響觀察虛擬內容疊加效果的主觀判斷，OST 設備可能缺乏即時眼動追蹤與個性化光學校正能力，因此無法針對每個使用者動態補償這些差異。
  • 環境因素干擾：
    • 現象：在明亮環境下虛擬內容變淡、看不清甚至不可見；在暗環境下虛擬內容過曝、甚至產生鬼影。
    • 原因：OST 設備將微型投影或波導的虛擬光線與真實世界的環境光線直接疊加。如果真實環境過亮，會蓋過微弱的虛擬光；反之亦然。這種光學偽影是 OST 設備的固有光學特性。
附註

此類誤差屬於 OST AR 眼鏡技術的固有特性，而非功能故障。在問題排查時，請區分「可修復的軟體/追蹤問題」與「受硬體與生理限制的體驗邊界」。若使用者回饋涉及輕微錯位、邊緣畸變或深度感知不一致，建議先確認是否處於設備標稱的使用條件（如工作距離、光照範圍、校準狀態）內。

如何處理 OST 設備的回饋？

如果您在使用 OST 設備時遇到視覺問題，在排除以上設備局限帶來的因素之後，您可以進行錄屏進行回饋。但單純提交錄屏內容通常是不夠的：

  1. 配合照片：請使用手機拍攝一張您透過鏡片看到的實際畫面照片（稱為「眼視角照片」）。這能展示虛擬物體與真實環境的相對位置。
  2. 描述環境：詳細描述您所處的環境（光照條件、背景顏色、是否存在動態如行人等），因為 OST 的顯示效果極度依賴環境光。

常見頭顯設備的錄屏方法

附註

錄屏過程中設備可能降低渲染幀率或解析度，影響對流暢度和追蹤穩定性的判斷。建議在復現問題後盡快錄製，避免長時間執行影響結果。

Apple Vision Pro

  1. 抬頭看螢幕頂部，直到看到控制中心點。專注於這一點並單擊。
  2. 注視並點選 控制中心 > 「錄製我的視野」按鈕 開始錄製。
  3. 若要停止錄製，開啟控制中心，然後再次輕點「錄製我的視野」。
  4. 您的視野錄製會存在「照片」App 中。

PICO 4 Ultra Enterprise

  1. 開啟控制中心 > 設定 > 通用 > 投屏、錄屏與截屏，在「錄屏和截屏」中選擇錄屏模式為「空間」。
  2. 短按手柄的 Home 鍵，在螢幕彈出的選單中選中「錄屏」按鈕，扣動扳機鍵開始錄屏。
  3. 此時系統會有開始倒計時提示，立即退回至待錄製應用的介面，在倒計時結束後自動開始錄製。
  4. 再次短按手柄的 Home 鍵，重複選擇「錄屏」按鈕即可停止錄製。
  5. 您的錄製檔案預設保存在設備的「內部儲存/DCIM/ScreenRecord」目錄。

Rokid AR Studio

  1. 進入桌面，找到底部狀態列，點選使用者頭像旁邊的「快捷設定」區域。
  2. 在彈出的視窗中點選「錄製」按鈕，立即退回至待錄製應用的介面。系統自動開始錄製。
  3. 點選 Station Pro 上 X 按鈕退回桌面。再次點選「快捷設定」區域的「錄製」按鈕即可停止錄製。
  4. 您的錄製檔案預設保存在設備的「內部共享儲存空間/ScreenRecorder」目錄。

XREAL Air2 Ultra

  1. 在 Beam Pro 螢幕上下滑呼出眼鏡的控制中心，點選上方的「錄屏」按鈕。
  2. 此時系統會有倒計時提示，立即退回至待錄製應用的介面。
  3. 點選螢幕上方懸浮的紅色「停止」按鈕即可停止錄製。
  4. 您的錄製檔案預設保存在設備的「內部共享儲存空間/Movies/Record」目錄。

最佳實踐建議

使用頭顯錄屏回饋問題時，關注以下幾點：

  • 提交時明確標註設備型號、錄屏方式及環境因素。
  • 若問題涉及深度、遮擋或追蹤抖動，補充文字描述人眼實際觀察到的現象，因為錄屏可能無法準確呈現。
  • 對於關鍵場景，可配合外部攝影機拍攝使用者佩戴頭顯時的實景操作，以提供更全面的上下文。

頭顯錄屏雖便捷，但始終是對體驗的近似還原。最可靠的診斷仍需結合日誌、感測器資料與使用者主觀回饋。有關日誌採集方法，請參閱: