Ваши мысли по реализации подобной светомузыки?

Question

[VeyDlin]

Видно, как светомузыка различает инструменты и "чувствует" настроение музыки, как нечто подобное можно реализовать?

https://www.youtube.com/watch?v=yt2Drq1BmX8

UDT: Я знаю, что в видео светомузыку прописывали вручную, но я хочу добиться подобного программным методом, видео для демонстрации того, что хотелось бы получить

Answer 1

[game802]

Привет! Вот пост с пикабу. Она рассказывает о реализации идеи именно этой елки на видео.

И обрати внимание на ответ автора этой елки

Comments

[VeyDlin]

Это ничего не меняет, я хочу сделать такое, но программно, просто вместо кучи слов которыми я бы описывал, нашлось это видео, значение не имеет, программно там или вручную, я скинул его для демонстрации того, что хотелось бы получить

[game802]

ВэйДлин: ммм? www.ab-log.ru/smart-house/ethernet/sound-lights-et...

[VeyDlin]

HackOwnB: обычная светомузыка, в ней нет ничего умного

Answer 2

[Толстый Лорри]

чувствует инструменты

Опираясь на частотные диапазоны инструментов.

В разных стилях музыки есть определенные паттерны звучания, которые можно попытаться найти путем анализа и сравнения.

Но на видосе же ёлка просто моргает в такт ритму - это можно сделать, выделив низкие частоты ударных и баса. Когда они появляются на входе (превышают некоторое пороговое значение) - мы зажигаем светодиоды, потом медленно гасим. Это реализуемо даже на аналоговых схемах.

Comments

[VeyDlin]

Вы заметили как она меняет положение именно под пианино? Как она подсвечивает снизу именно под скрипку, как она делает вспышки именно под ударные? Как она меняет свою логику в процессе и когда решает использовать тот или иной подход? Простите, но ваш ответ похож на "Как сделать светомузыку? Просто сделайте светомузыку". Одна задача определить инструменты чего стоит, как это можно сделать? Распознать аккорды и, возможно, отдельные ноты в них, какие методы использовать? Какие фильтры? Преобразования? Библиотеки? Делал ли кто подобное? Есть ли статьи? Может лекции? Судя по вашим словам на видео просто эквалайзер прикрученный к гирлянде, но это не так

[Толстый Лорри]

ВэйДлин: А что это, если не светомузыка?)
Почему вам не понравилась идея с эквалайзером? Ведь иструменты - это ярко выраженые акценты в разных диапазонах частот, которые отлично поддаются фильтрации. Элементарно потому, что любой оркестр подбирает иструменты так, чтобы они друг друга не перекрывали (иначе это будет каша из звуков). Ведь едва ли вам потребуется отличать скрипку от другой скрипки, если они исполнают одну солирующую партию, но трамбон, скажем, нам бы там помешал. Это по частотам.
(Для начала хорошо бы найти семплы с интересующими иструментами и посмотреть на их графики, чтобы определить характеристики и найти закономерности.)

Кроме того, можно оценивать взаимодествие инструментов, выделять доминирующие партии и переходы. Это уже функции по инструментам и их амплитуды ко времени. То есть если весь звуковой диапазон мы поделили на группы ("инструменты"), то внезапно выросшая по одна группа над остальными будет "солирующей" и она захватит управление светом. Как это выражать - это уже творческий вопрос.

ЗЫ Я не делал этого никогда, но, как инженер, стараюсь поделиться своими идеями по этому поводу.