Проекты > Оптическое слышание Сведения об образовательной организации
Оптическое слышание

Автор проекта: Мария Молокова

Перформативная инсталляция (diy-зрительный протез, графика, звуковая фреска, сеанс)

 

Вы в комнате. Оглядитесь. Что вы слышите?

 

Пространство «Оптического слышания» состоит из двух комнат, специального устройства, и человека-проводника. Проводник показывает как работает устройство.  Вы учитесь слышать изображения сначала на азбуке. После обучения закрываете глаза и проходите во вторую комнату вместе с проводником. То что вы услышите – результат работы программы перевода оптического в звуковое.

 

Устройство

 

«Зрительный протез» создан на основе идеи создателя синтезатора АНС Евгения Мурзина. Протез преобразует оптическое изображение с веб-камеры в звуковое. Программа сканирует изображение как сонограмму, выделяет яркость и высоту каждого пикселя. Громкость зависит от яркости: самое темное пятно можно услышать как тишину, а самое яркое как громкий звук. Высота звука определяется значением по вертикали. Чем выше яркий пиксель – тем выше звук. Движение слева направо осуществляется панорамированием в стерео наушниках.

 

Сеанс и фреска

 

Звуковая фреска во второй комнате – это подготовленный технический рисунок, близкий к изображению звуковой сонограммы. Зрячий человек сможет увидеть начертания, но услышать и прочитать шифр возможно лишь с помощью устройства.

Проводник помогает совершить цельный звуковой маршрут. Синестетическое восприятие изменяет организм, адаптирует его под непривычные условия. Выбор сценария остается за зрителем: отказаться или довериться эксперименту, машине и проводнику.

Год: 2019.
Проекты > Оптическое слышание Сведения об образовательной организации