Meta повышает реалистичность пространственной аудиосистемы в Quest, модернизируя модель HRTF.
Пространственное аудио работает с использованием передаточной функции, связанной с головой (HRTF), математической функции, которая рассчитывает фильтр, применяемый к звуку для каждого уха, чтобы звук воспринимался как исходящий из точной точки в 3D-пространстве относительно вашей головы. Это совершенно не похоже на базовое панорамирование звука, используемое в большинстве не-VR игр.
В 2015 году компания Oculus выпустила SDK Audio, в котором использовался HRTF, и за прошедшие годы он получил ряд усовершенствований, включая HRTF ближнего поля, объемные источники, динамическое моделирование помещения и даже распространение звука на основе геометрии.
В начале этого года компания Meta прекратила использование Oculus Audio SDK и заменила его на Meta XR Audio SDK. Правда, он основан на той же базовой технологии и, по сути, стал всего лишь ребрендингом, но в настоящий момент он претерпел серьезное обновление.
HRTF различаются у разных людей в зависимости от формы ушей и расстояния между ними. Apple позволяет пользователям генерировать индивидуальную HRTF с помощью сканирования лица iPhone TrueDepth, что используется в новых AirPods и Vision Pro.
У Meta нет возможности измерять лицо и уши, поэтому она использует HRTF, рассчитанную на среднее значение для всех людей. Текущая HRTF основана на общедоступных данных, но компания Meta утверждает, что она «вкладывает значительные средства в аудиоисследования», и за последние несколько лет ее сотрудники собрали большую и более точную базу данных HRTF для более чем 150 человек.
Meta называет новую модель, основанную на этом новом наборе данных, Universal HRTF. Компания утверждает, что она обеспечивает улучшенную локализацию и точность передачи частоты.
По словам Meta, улучшенная точность локализации означает, что звук будет воспроизводиться более точно, как будто он исходит от реального источника звука, «особенно при оценке высоты», а улучшенная точность частоты означает, что звук будет восприниматься более естественно, с «меньшим окрашиванием и фильтрацией».
По данным Meta, в пользовательском тестировании Universal HRTF приняли участие более 100 человек, при этом средняя «субъективная оценка предпочтений пользователя» увеличилась с 37 до 52 баллов, а точность определения уровня высоты повысилась на 81%.
Universal HRTF будет добавлен в версию 55 Meta XR Audio SDK для Unity, выход которой запланирован уже в ближайшее время. Чтобы воспользоваться преимуществами Universal HRTF, разработчикам достаточно обновить SDK и переделать свое приложение, никаких других изменений не требуется.
