Звуковой дизайн взаимодействия - это изучение и использование звука как одного из основных каналов передачи информации, значения и эстетических / эмоциональных качеств. в интерактивном контексте. Дизайн звукового взаимодействия находится на пересечении дизайна взаимодействия и вычислений звука и музыки. Если дизайн взаимодействия предназначен для проектирования объектов, с которыми взаимодействуют люди, и такое взаимодействие осуществляется с помощью вычислительных средств, то в звуковом дизайне взаимодействия звук опосредует взаимодействие либо как отображение процессов, либо как средство ввода.
Исследования в этой области сосредоточены на экспериментальные научные данные о восприятии человеческого звука в интерактивных контекстах.
Во время взаимодействия с замкнутым циклом пользователи управляют интерфейсом, который производит звук, а звуковая обратная связь, в свою очередь, влияет на манипуляции пользователей. Другими словами, существует тесная связь между слуховым восприятием и действием. Прослушивание звуков может не только активировать представление о том, как был издан звук: оно также может подготовить слушателя к реакции на звук. Когнитивные представления звуков могут быть связаны со схемами планирования действий, а звуки также могут подсознательно вызывать дальнейшую реакцию со стороны слушателя.
Звуковые взаимодействия могут влиять на пользователей 'эмоции : качество звуков влияет на приятность взаимодействия, а сложность манипуляции влияет на то, чувствует ли пользователь контроль или нет.
Дизайн продукта в контексте дизайна звукового взаимодействия имеет дело с методами и опытом для разработки интерактивных продуктов, обладающих выдающимся звуковым поведением. Продукты в этом контексте - это либо материальные и функциональные объекты, которые предназначены для манипулирования, либо полезные имитации таких объектов, как в виртуальном прототипировании. Исследования и разработки в этой области основаны на исследованиях других дисциплин, таких как:
В исследовании дизайна звуковых продуктов набор методов был унаследован из различных областей. Такая практика была проверена в контексте естественного смешения исследований и педагогики. Среди этих практик достаточно упомянуть:
В контексте дизайна звукового взаимодействия, интерактивное искусство и музыкальные проекты разрабатывают и исследуют эстетические переживания, в которых звуковое взаимодействие находится в центре внимания. Творческий и выразительный аспекты - эстетика - более важны, чем передача информации через звук. Практики включают инсталляции, перформансы, паблик-арт и взаимодействие между людьми через объекты / среды с цифровым дополнением. Они часто объединяют такие элементы, как встроенные технологии, устройства, чувствительные к жестам, динамики или контекстно-зависимые системы.
В центре внимания переживание, которое показывает, как звук влияет на людей, и наоборот. Интерактивное искусство и музыка позволяют исследователям подвергать сомнению существующие парадигмы и модели того, как люди взаимодействуют с технологиями и звуком, выходя за рамки парадигм контроля (человек управляет машиной). Пользователи являются частью цикла, который включает действие и восприятие.
Интерактивные художественные и музыкальные проекты предполагают исследовательские действия и игровое взаимодействие. Существует также мультисенсорный аспект, особенно популярны тактильные аудио и аудиовизуальные проекты. Помимо многих других влияний, эта область связана с развитием ролей производителя инструментов, композитора и исполнителя.
Художественные исследования в дизайне звукового взаимодействия касаются производства в интерактивном искусстве и исполнительское искусство, использующее роль активизирующего взаимодействия со звуковыми интерактивными объектами.
Sonification - это зависимое от данных поколение звук, если преобразование является систематическим, объективным и воспроизводимым, чтобы его можно было использовать в качестве научного метода.
Для звукового дизайна взаимодействия ультразвуковая обработка предоставляет набор методов для создания звуков взаимодействия, которые кодируют соответствующие данные, чтобы пользователь может воспринимать или интерпретировать переданную информацию. Сонификация не обязательно должна представлять огромные объемы данных в звуке, но может передавать только одно или несколько значений данных в звуке. В качестве примера представьте себе выключатель света, который при активации издает короткий звук, зависящий от электроэнергии, потребляемой через кабель: большее количество энергозатратных ламп, возможно, систематически приводит к более раздражающим звукам выключателя. Этот пример показывает, что ультразвуковая обработка направлена на предоставление некоторой информации с помощью ее систематического преобразования в звук.
Интеграция управляемых данными элементов в звуке взаимодействия может служить различным целям:
В области обработки ультразвуком дизайн звукового взаимодействия признает важность человеческого взаимодействия для понимания и использования слуховой обратной связи. В звуковом интерактивном дизайне ультразвуковая обработка может помочь и предложить решения, методы и приемы, которые вдохновляют и направляют дизайн продуктов или интерактивных систем.