Как в 3D получить игровой звук для объекта приходящий от других объектов?

Question

[Роман Кофф]

Вопрос теоретический без привязки к конкретной платформе или движку.
Годятся любые примеры. Надо понять в какую сторону копать и что изучать...

Есть игровое 3D-окуржение. В окружении присутствуют различные объекты издающие звуки.
Каким образом получить звук приходящий на определенный объект от других объектов игрового окружения?
Важно учитывать задержки звука связанные с расстоянием между объектами и необходимо иметь возможность получить запись (поток) звука, чтобы его потом можно было проанализировать.

Как можно решить подобную задачу?

Comments

[Дмитрий Кузнецов]

Если вопрос не связан к платформе или движку - то не надо указывать их!

[Роман Кофф]

Я указал то, с чем имею опыт работы. Но если будет что-то другое тоже годится.

[Дмитрий Кузнецов]

Роман Кофф, теги указываются только в том случае, если конкретно вопрос связан с ними, а не в чём у вас есть опыт. Это не HH вам =)

[Роман Кофф]

Дмитрий Кузнецов, понятно. А я думал по тегам ответят эксперты в этих технологиях...

[mayton2019]

Если речь про эхо, то раньше это делалось звуковой карточкой. Технология называлась EAX.

Или автор другое хотел?

Answer 1

[GavriKos]

Что значит "получить"? Прям узнать список звуков с параметрами?

Так то задержки и прочее и так учитываются - расставляете источники, ставите "камеру", запускаете билд - и у вас воспроизводятся те звуки, которые "слышыт" камера. Надо - записываете этот звук средствами уже ОС и анализируете сколько угодно

Comments

[Роман Кофф]

Не. Надо иметь возможность получить звук приходящий на несколько объектов. То есть интересует именно программный интерфейс.

Если бы можно было «сказать»: получи звук для такого-то объекта на сцене и запиши в файл (отдай в поток)...

Насчет списка звуков с параметрами — уже ближе. Возможно так можно будет сформировать звуковую картину на объекте (исходный звук, интенсивность, расстояние).

Answer 2

[Дмитрий]

Не сильно понятен вопрос: задача техническими средствами запросить звук из точки? Так это даёт движок, который используется, как уже ответили, так же как и для камеры, делай для произвольной точки в пространстве.

Если в физическом смысле, то опять же как и для камеры рендеришь звук, так же рендерить для точки.
Если прям честно делать, то это симуляция распространения волны какая-нить, но это академическая и сложная задача.
Если как всегда аппроксимировать, то пропускай просто через цепочку эффектов и всё.
- Семплировать задержку. Можно линейно или Лагранжем каким-нить.
- Если источники движутся, придётся семплировать допплер ещё в нагрузку.
- Оклюжен, чтобы посчитать распространение через преграды примитивным кастингом лучей.
- Отражения, реверб.

В конце суммировать звуки, которые могут вообще дойти до приёмника и писать в отдельный канал микшера или кольцевой буфер простой.

Вопрос не ясен, короче. Но вариантов не много.

Comments

[Роман Кофф]

Интерес, как раз, академический. Это задача моделирования реальной физической системы, но в упрощенном варианте, чтобы оценить в принципе жизнеспособность идеи. Модель в реальной физике сделать технически сложно (нужны дорогостоящие аппаратные ресурсы), ищу способ, как это можно попроще симулировать, возможно средствами игровых физических движков.

Сама по себе задача простая: надо по триангуляции определить координаты источника звука имея данные с нескольких датчиков размещенных в заданных точках координат.