Нова технологія перетворює жестикуляцію в музику

Некоторие люди говорять за допомогою рук, використовуючи мову жестів. Дослідник з Університету Британської Колумбії вирішив довести, що завдяки сучасним технологіям і можливостям комп'ютерного проектування і моделювання "говорити руками" можна в буквальному сенсі цього виразу.

Сідней Фелс (Sidney Fels) та його науково-дослідна група оснастили пару звичайних рукавичок позіціонно-чутливими сенсорамі, які фіксували руху і видавали певні звуки, коли перебували в трьох вимірах. Різні жести рук виробляли всілякі типи звуків. Наприклад, стисла права долоня сприяла відтворенню приголосних звуків, а розкрита долоня видавала голосні звуки. Тим часом ліва рука виконувала регулювання таких коротких звуків, як, наприклад приголосні звуки B або P (в американському варіанті англійської мови).

Ідея, частково, полягала в дублюванні деяких рухів горла і мови при вимові тих чи інших звуків під час розмови. Голосні є відкритими звуками, які утворюються при відкритому горлі і губах, тому розкриті долоні виробляли такі ж типи звуків.

Для додаткового рівня контролю, права долоня відтворювала високу тональність звуків, перебуваючи в піднятому положенні, і знижувала тональність, набуваючи горизонтальне положення. Подібна технологія також може бути використана для створення музики. Серед колег Фелса, які взяли участь у розробці нового проекту, були професор з музичної школи Університету Британської Колумбії, Роберт Прітчард (Robert Pritchard) і Джонті Вонг (Johnty Wang), фахівець з комп'ютерного проектування і концертний піаніст. Вже було проведено кілька концертів, на яких винахід Фелса було використано в якості музичного інструмента.

Пока ця технологія стала втіленням в життя ідеї створення віртуального музичного інструменту, але професор Фелс переконаний, що його винахід може знайти своє застосування і в такій промисловій галузі, як машинобудування, зокрема в системі переміщення важкого обладнання. Так, кранами, які піднімають і переміщують об'єкти різної тяжкості, можна буде керувати за допомогою жестов.

Орігінал (на англ. Мовою): LiveScience

• Учёные предложили связывать удалённые кубиты колебаниями кристалла
• Учёные создали самые точные атомные часы в мире
• Учёные предложили превращать пластиковые отходы в бензин и дизельное топливо
• ИИ и смешанную реальность впервые объединили при установке зубного импланта
• Капли воды могут повреждать краску микроскопическими электрическими разрядами
• Умные часы завышают расход калорий: учёные проверили четыре популярные модели
• Учёные обнаружили, что сверхтонкие алмазные мембраны способны вырабатывать электричество
• Учёные разработали жевательную резинку, которая может снижать уровень HPV и опасных бактерий во рту