共用方式為


空間聲音概覽

在現實生活中,空間聲音至關重要。 當有人叫你的名字時,你知道該看哪個方向。 如果你把一枚硬幣扔在人行道上,你就能知道它滾到了哪個方向。 為什麼? 因為您可以「空間」聽到——換句話說,您可以分辨出聲音在環境中的哪個位置發生。

在混合實境應用程式中,您可能必須向上、向下、左右或後方查看,才能尋找正在發生的事情。 有時,您可能不清楚您應該去哪裡看。 空間音效會將全像投影更深入地連線到混合實境世界,並提供環境和物件狀態的相關資訊。 您可以從您想要引起注意的方向提供提示;這有助於用戶保持對現實世界環境的認識,並可以指導他們採取下一步行動。 這增加了用戶對手勢和語音交互的信心。

在混合實境中使用音效需要與觸控和鍵盤和滑鼠應用程式不同的方法。 關鍵的聲音設計決策包括將哪些聲音空間化以及哪些互動進行聲音化。 如需詳細指引,請參閱我們的 空間音效最佳做法 一文。

空間化

空間化是空間聲音的方向成分。 對於 7.1 家庭劇院設置,空間化就像在揚聲器之間平移一樣簡單。 但對於混合實境中的耳機來說,必須使用基於 HRTF 的技術 來確保準確性和舒適度。 Windows 提供以 HRTF 為基礎的空間化,而且此支援在 HoloLens 2 上以硬體加速。

如需在應用程式中有效使用空間化的建議,請參閱 空間音效最佳做法

設備支持

功能 HoloLens (第一代) HoloLens 2 沉浸式耳機
空間化 ✔️ ✔️ ✔️
空間化硬體加速 ✔️

個案研究

HoloTour 虛擬地將用戶帶到世界各地的旅遊和歷史遺跡。 請參閱 HoloTour 案例研究的音效設計 。 使用特殊的麥克風和渲染設置來捕捉主題空間。

RoboRaid 是 HoloLens 的高能量射擊遊戲。 RoboRaid 的聲音設計案例研究描述了為確保空間聲音發揮最大戲劇效果而做出的設計選擇。

空間化器個人化

混合實境頭戴式裝置 (包括 HoloLens) 的低延遲頭部追蹤,支援高品質的 HRTF 型空間化。

HRTF 操縱整個頻譜中耳朵之間的電平和相位差。 它們基於物理模型和對人頭部、軀幹和耳廓形狀 (耳廓) 的測量。 我們的大腦對這些差異做出反應,以提供聲音的感知方向。

每個人都有獨特的耳朵形狀、頭部大小和耳朵位置。 因此,最好的 HRTF 符合您的要求。 為了提高空間化精確度,HoloLens 會使用頭戴式裝置顯示器的瞳孔間距離 (IPD) 來調整頭部大小的 HRTF。

Spatializer 平台支援

Windows 透過 ISpatialAudioClient API 提供空間化,包括 HRTF。 此 API 會將 HoloLens 2 HRTF 硬體加速公開給應用程式。

Spatializer 中介軟體支援

以下第三方音訊引擎支援 Windows 的 HRTF。

聲學

空間聲音不僅僅是方向。 其他維度包括遮擋、障礙、混響、傳送門和源建模。 這些維度統稱為 聲學。 如果沒有聲學,空間化的聲音就缺乏感知距離。

聲學處理範圍從簡單到複雜。 您可以使用任何音訊引擎支援的殘響,將空間化聲音推送到聽眾的環境中。 Project Acoustics 等聲學系統提供更豐富、更引人注目的聲學處理。 Project Acoustics 可以對牆壁、門和其他場景幾何圖形對音效的效果進行建模。 對於在開發時已知相關場景幾何圖形的情況,這是一個有效的選項。

後續步驟