空間音效概觀
在真實生活中,空間音效非常重要。 當有人呼叫您的名稱時,您知道要以何種方式查看。 如果您在側道上放下一個錢幣,可以告訴它如何擲回。 原因為何? 因為您可以聽到「空間上」--換句話說,您可以在環境中分辨音效發生的位置。
在混合實境應用程式中,您可能必須查閱、向下、從側邊或後方尋找發生的情況。 有時候,您可能不清楚您應該查看的位置。 空間音效會更深入地將全像投影連接到混合實境世界,並提供環境和物件狀態的相關資訊。 您可以從想要注意的方向提供提示;這可協助使用者維持對真實世界環境的認知,並可引導他們進行後續步驟。 這會增加使用者對手勢和語音互動的信賴度。
在混合實境中使用音效需要與觸控和鍵盤和滑鼠應用程式不同的方法。 關鍵音效設計決策包括哪些音效可空間化,以及哪些互動可進行 Sonify。 如需詳細指引,請參閱 空間音效最佳做法 一文。
空間化
空間化是空間音效的方向元件。 針對 7.1 家用音調設定,空間化就像在喇叭之間移動流覽一樣簡單。 但對於混合實境中的耳機,請務必使用 以 HRTF 為基礎的技術 來提供精確度和緩和性。 Windows 提供 HRTF 型空間化,而這項支援是在HoloLens 2上加速硬體。
如需在應用程式中有效使用空間化的建議,請參閱 空間音效最佳做法。
裝置支援
功能 | HoloLens (第一代) | HoloLens 2 | 沉浸式頭戴裝置 |
空間化 | ✔️ | ✔️ | ✔️ |
空間化硬體加速 | ❌ | ✔️ | ❌ |
案例研究
HoloTour 幾乎會引導使用者前往世界各地的網站和歷史網站。 請參閱 HoloTour 案例研究的音效設計 。 特殊的麥克風和轉譯設定是用來擷取主旨空間。
RoboRaid 是 HoloLens 的高能源發射器。 RoboRaid 案例研究的音效設計說明為了確保空間音效用來發揮最大效果的設計選擇。
空間化工具個人化
混合實境頭戴式裝置的低延遲前端追蹤,包括 HoloLens,支援高品質的 HRTF 型空間化。
HRTF 會操作不同頻率頻譜的耳機之間的層級和階段差異。 它們是以人類頭部、手部和耳機形狀的實體模型和測量為基礎, (釘選) 。 我們的大腦會回應這些差異,以提供音效的認知方向。
每個個人都有唯一的耳機形狀、頭部大小和耳機位置。 因此,最佳 HRDF 符合您的規範。 為了提高空間化精確度,HoloLens 會使用頭戴式裝置顯示器 (IPD) 之間的距離來調整前端大小的 HRDF。
Spatializer 平臺支援
Windows 透過 ISpatialAudioClient API提供空間化,包括 HRDF。 此 API 會將HoloLens 2 HRTF 硬體加速公開給應用程式。
空間化工具中介軟體支援
Windows 的 HRDF 支援適用于下列協力廠商音訊引擎。
聲場
空間音效與方向有關。 其他維度包括遮蔽、障礙、殘響、入口網站和來源模型化。 這些維度統稱為 聲場。 沒有聲場,空間化音效缺少感知的距離。
聲場處理範圍從簡單到複雜。 您可以使用任何音訊引擎支援的殘響,將空間化音效推送至接聽程式的環境。 聲場系統,例如 聲場專案 ,可提供更豐富且更吸引人的聲場處理。 聲場專案可以在音效上建立牆、門和其他場景幾何效果的模型。 對於在開發階段已知相關場景幾何的情況而言,這是有效的選項。