Спектрограмма на память

Вы когда-либо видели звук?

Из физики мы знаем, что звук — физическое явление, представляющее собой распространение в виде упругих волн механических колебаний в твёрдой, жидкой или газообразной среде.

Как и любая волна, звук характеризуется амплитудой и спектром частот. Так вот, амплитуду и спектр можно увидеть. А раз можно увидеть, значит можно как-то и где-то это использовать.

Например, в качестве украшения на котором будет выгравирован "голос" вашего любимого человека. Согласитесь, это красиво звучит)

Или, например, "нарисовать" звук на картине:

Вот, только один "минус" - этот звук нельзя будет услышать, т.е вы его видите, но "прочитать" его не сможете. Хотя, можете, но для этого нужно произвести кучу манипуляций с картинкой и конвертированием этой картинки в звук, как, например в этой статье (англ). Кстати, почитайте и эту статью (англ), в ней рассказывается о декодировании самых первых "картинок" звукозаписи в том числе и древней нотной записи. Там же, есть и готовые расшифрованные звуковые файлы. Или, посмотрите видео-ролик по расшифровке картинок со звуком и примерами (англ):

Ну, или почитайте статью о "звукозаписи на бумаге" (рус), которую я писал ранее.

Вот, было бы классно не только увидеть звук, а и услышать, что записано на картине.

Знакомьтесь, приложение PhonoPaper (для Android, для iOS) или аналогичное, одного и того же автора, Music Night (для Android, для iOS). Приложения бесплатные.

PhonoPaper - это:

• формат изображения, в котором закодирован звук (в виде спектрограммы); иными словами - это звуковая метка, или двухмерный звуковой код (по аналогии с QR-кодом);   
• приложение-сканер для чтения PhonoPaper-кодов в реальном времени с камеры; при этом код может быть записан где угодно: на бумаге, на экране, на заборе и т.д.;     
• приложение-рекордер для конвертации 10 секунд звука в PhonoPaper-код.

На сайте автора можно почитать более детально, посмотреть фото и видео примеры

Если выше вы видели примеры с использованием амплитуды звука, то сейчас речь пойдет о спектрограмме звука.

В приведенных выше англоязычных статьях тоже упоминается о спектрограммах.

Кстати, вот так выглядит спектрограмма моего голосового сообщения. На картинке представлена одновременно и спектрограмма, и готовый пример для воспроизведения с использованием приложения PhonoPaper.

Но, сразу стоит отметить, что хай-фай качества звука вы не услышите, т.к градации серого невозможно передать и воспроизвести со 100% точностью, но вы все равно услышите как минимум "очертания" оригинального аналогового звука.

Как и с любой другой картинкой, эту вы можете редактировать в графическом приложении. Можно, к примеру, обратить звук не только по горизонтали (задом на перед), а и по вертикали.

Другими примерами использования PhonoPaper могут быть:

• голосовые подсказки или тематические куски музыки на визитках, рекламных плакатах, товарах;
• бумажные открытки с напечатанным звуковым посланием;
• аудио-примеры в учебниках или детских книжках;
• звуковые метки на пластинках, дисках, кассетах;
• звуковая подпись на обратной стороне бумажной фотографии;
• секретные послания, элемент квеста;
• арт-эксперименты;
• изучение основ построения спектральной музыки и звука через ручное рисование PhonoPaper-кодов.

Можно посмотреть ролик по примерам использования PhonoPaper:

И напоследок, музыкальное граффити на заборах :)