Как я могу отобразить искажение звука через изображения?

Итак, вопрос в том, как визуализировать звук? Если это так, процесс по существу:

1. Решите, чего вы хотите достичь (что-то абстрактное, как эти музыкальные скульптуры ? Что-то с практической полезной ценностью ? Что-то с двойной целью?)
2. Решите, какие звуковые переменные (частота, амплитуда и т. д.) наиболее полезны для этой цели — потребуется некоторое исследование, прямые вопросы в технические места, такие как Stack Exchange для производства аудио-видео.
3. Найдите способ превратить ваш источник звука в цифровые данные целевых переменных — технический вопрос, вероятно, лучше задать на Stack Exchange Audio-Video Production.

4. Сделайте вещь. Это может быть буквально что угодно, от диаграммы до феерии 3D-печати.

   • Чтобы узнать об интересных способах преобразования данных в визуальные эффекты, ознакомьтесь с такими проектами, как D3 , Processing , Cinder и openFrameworks — для большинства из них требуются некоторые навыки программирования, может помочь книга « Интерактивное программирование » (предназначенная для дизайнеров/творческих людей).

Вы найдете полезные вещи, выполнив поиск генеративного искусства , основанного на звуке. Вот хорошее введение в генеративное искусство , включая рекомендуемые инструменты, аналогичные приведенным выше. Он также ссылается на пару проектов, основанных на звуке:

• Цилиндр - Звук как объект
• Генеративный арт на основе аудио 2.0

Как вы увидите, все дело в настройке какого-то инструмента на основе сценариев для интерпретации потока данных (аудиоданных с течением времени) таким образом, который соответствует потребностям вашего проекта.

Также обратите внимание на визуализацию данных на основе аудио. Вот несколько примеров, основанных (приблизительно...) на аудио из популярных фильмов , цель которых - вызвать улыбку узнавания, а не инструмент анализа...

(Парк Юрского периода)

Вот изображение некоторых абстрактных скульптур, основанных на альбомах альтернативного рока, просто так.

В данном конкретном случае процесс изготовления выглядел так:

Это очень разнообразно. Общие компоненты: четкая цель, сбор данных, обработка данных, затем вывод, который может быть буквально любым.

Даже тогда бывают исключения. Вот пример, в котором вообще нет кода:

Их делают, натянув воздушный шар на динамик, затем капнув краску в центр, прежде чем взорвать его одной резкой нотой. Краска разбрызгивается, и камера, установленная на что-то вроде гравитационного аттракциона, вращается вокруг динамика, снимая со скоростью 5400 кадров в секунду.

Все дело в сборке механизма — вероятно, уникально построенного, аранжированного или закодированного для проекта — чтобы переменные в звуке формировали окончательный результат, а затем заканчивали его вручную.