Каким образом можно спарсить время проигрования отдельных инструментов в аудио файле?

Question

[FlatUser]

Задача капец какая сложная и у меня нет понимания того в какую сторону двигаться.

Что мне нужно:
- извлекать точные тайминги например барабана или игры гитары с композиции.
Как это сделать да хрен знает, разбить трек на кусочки и создать нейросеть которая будет определять барабаны ли играют на пятой секунде, хз.

Прошу помощи в наставлении на путь истинный, любые библиотеки на любом языке, все что может помочь мне решить эту задачу, сама концепция того как можно это сделать, все будет мне ОЧЕНЬ ПОЛЕЗНЫМ!

Comments

[sim3x]

Сколько у вас есть самплов с таким разбиением на дорожки?

Answer 1

[Рональд Макдональд]

Я вот не нейросетевик, но я бы просто собрал паттерны разных инструментов (спектрограммы) и искал на спектрограмме композиции похожие паттерны.