Последних 3 года небольшая группа исследователей из «McGill University» работает с хореографом, композитором, танцорами и музыкантами над проектом под названием «Instrumented Bodies» («Инструментальное туловище»).
Были разработаны 3 группы сенсорных, внутренне освещенных цифровых музыкальных контроллера, которые крепятся к костюму танцора, каждый из которых способен синтезировать беспроводный запуск музыки вовремя движений исполнителя по сцене. Звуки производятся путем нажатия или поглаживая прозрачных ребер или козырьков, или путем скручивания, поворачивания или перемещения позвонков.
“Проект начался из сотрудничества между членами нашей группы в лаборатории «Input Devices and Music Interaction Lab» (в частности, Joseph Malloch, Ian Hattwick и Marlon Schumacher под руководством Marcelo Wanderley), композитором (Sean Ferguson, также в McGill) и хореографом (Isabelle Van Grimde), – показывает Malloch. «В 2008 году мы работали с теми же сотрудниками в короткой пьесе для виолончели и танцовщицей, которая использовала разработанный нами цифровой музыкальный инструмент под названием «T-Stick». Мы решили подать заявку на грант для поддержки сотрудничества, для которого мы будем совершенствовать инструменты специально для танцоров, основанные на «T- Stick»”.
Цель заключалась в разработке инструментов, которые могли бы играть сами, или как часть тела танцора. Наброски и контуры стали первыми прототипами, сделанными из пены, а затем на рифленом пластике. Они прикреплялись к танцорам для исследования видов движений, которые сейчас именуются протезными инструментами. Дизайнеры остановились на 3 основных типах (козырек, ребро и позвоночник), и началась работа по изменению дизайна, интеграции сенсорных систем и выборе правильных материалов для рабочих прототипов.
“Использование цифровых технологий изготовления позволило нам быстро воспроизвести разные прототипы”, говорит Malloch. “Для начала мы использовали лазерные резаки в «McGill University School of Architecture» и 3D-принтер при Центре междисциплинарных исследований в области музыки, медиа и технологий. Когда мы перешли к их производству, мы перевели часть лазерной резки в коммерческие компании”.
Ребра и козырьки изготавливаются из прозрачного акрила (лазерной резки) и слоев поликарбоната, прочно приклеенных вместе с растворителем. Лазерный резак также использовался для создания 8 сенсорных площадок из прозрачной проводящей пленки. Они соединены с емкостной сенсорной схемой на базе инструментов при помощи тонкой проволоки, которая находится в выгравированных на акриле прорезах. Эта основа также является «домом» для радиопередатчика ZigBee, 3-осевого акселерометра, драйверов для встроенных светодиодов и аккумуляторов Li-Pol.
Процесс построения позвоночника – немного сложнее. Лазерный резак также создает прозрачные акриловые позвонки, которые прорезаются в ПВХ трубы. Тонкий пластиковый стержень PETG закреплен на обоих концах инструмента, который позволяет позвоночнику гнуться и скручиваться. Кроме того, на каждом конце позвоночника есть инерционное измерительное устройство, включающее 3-осевой акселерометр, 3-осевой гироскоп, 3-осевой магнитометр и микроконтроллер.
Последний использует дополнительный фильтр, чтобы преобразовать данные датчика в довольно хорошую ориентацию позвоночника, приближенную к реальной. “Таким образом, мы знаем ориентацию каждого конца инструмента и можем интерполировать между ними для отслеживания и отображения фигуры всего аппарата”, – объясняет Malloch.
Питание для позвоночника подается от аккумуляторов Li-Pol, и также есть радиопередатчик ZigBee. Данные датчика от всех активных инструментов передаются для обработки по wi-fi на компьютер до момента контроля синтезированных медиа через кроссплатформенную библиотеку ПО (под названием «libmapper»), поддерживаемую IDMIL с открытым исходным кодом.
Все 30 инструментов, выпускающиеся до сих пор, были разработаны с целью выдерживания длительных живых выступлений, и могут ровно прикрепляться, либо отделяться от костюма танцора 3D-печатными креплениями. “Нет никакой необходимости в специальных знаниях со стороны пользователей. Программное обеспечение, с другой стороны, требует большего внимания, и оно в центре внимания техперсонала, работающего в шоу” – говорит Hattwick.
Malloch рассказал нам, что сейчас текущий период финансирования подошел к концу и команда разработчиков надеется исследовать новые способы использования технологии с помощью нового сотрудничества. Также планируется работа над новыми отображениями телодвижения наряду с усовершенствованиями встроенной электроники, и проектирование новых методов крепления инструментов к исполнителю.