Использование технологии AR, чтобы оживить виртуального пианиста за реальным фортепиано.



AR как отличный инструмент для предоставления нового способа прослушивания фортепианной музыки на вашем смартфоне или AR как полезная гарнитура для музыкального образования

Вы можете направить камеру своего телефона на различные фортепиано и практически мгновенно создать AR пианиста, который способен играть произведения от разных исполнителей, а ноты соответственно  демонстрируются  внизу в режиме реального времени.

Приложение использует нейронные сети для обнаружения фортепиано, а затем вычисляет точное трехмерное положение и ориентацию в трехмерном пространстве с точностью до 1 см. Это достигается путем обработкой  нейронной сетью  каждого  кадра причем без использования специализированных 3D-камер.

Данное AR приложение работает с любой моделью или маркой пианино при любых условиях освещения, без необходимости использовать специальные мишени, маркеры изображения или необходимости сканировать модель фортепиано заранее.

Это приложение поможет многим пользователям в музыкальном образовании. Любой пользователь сможете замедлить песню до 100 раз, не теряя информацию о движении рук, что невозможно осуществить с традиционным записанным видео. 

Полная версия приложения также будет использовать микрофон вашего смартфона, чтобы слушать вас во время тренировки и с помощью искусственного интеллекта мгновенно получать обратную связь о вашей игре; плюс  использовать AR пианиста, чтобы дать вам советы о том, как точно двигать руками во время игры на фортепиано. 

Вернуться ко всем новостям

Инновации и AR

Новые технологии Digital площадок для наружной рекламы
26.05.2020

Новые технологии Digital площадок для наружной рекламы

Читать  
TikTok запускает AR brand effect
15.05.2020

TikTok запускает AR brand effect

Читать  
AR очки становятся все более доступными
08.05.2020

AR очки становятся все более доступными

Читать  
Шедевры искусства в виртуальной реальности
01.05.2020

Шедевры искусства в виртуальной реальности

Читать  
AR станет одним из основных маркетинговых инструментов в 2020 году
30.03.2020

AR станет одним из основных маркетинговых инструментов в 2020 году

Читать