Yamaha Corporation представила технологию искусственного интеллекта Yamaha (AI), которая позволяет танцовщику «играть» на пианино с помощью танцевальных движений.

С помощью Yamaha (AI) танцовщик Кайджи Морияме уже подготовил концертную программу. Концерт «Mai Hi Ten Yu» состоялся в Токио 22 ноября 2017 года, и был спонсирован Токийским университетом искусств и Токийским университетом искусств COI.

Yamaha предоставила оригинальную систему, которая может перевести человеческие движения в музыку, используя технологию искуственного интеллекта.

Опираясь на систему, предоставленную Yamaha, Морияма дал блестящее представление с синхронизированным аккомпанирующим фортепиано. Кроме того, спектакль сопровождали другие музыканты, Берлинский филармонический оркестр «Шарун Ансамбль».

Концерт показал «форму выражения, которая сплавляет движения тела и музыку».

Yamaha полагает, что эта работа представляет собой прогресс в поиске новых форм художественного выражения и будет продолжать развивать эту технологию для дальнейшего расширения возможностей человеческого самовыражения.

Обзор технологий

ИИ может идентифицировать движение танцора в реальном времени, анализируя сигналы от четырех типов датчиков, прикрепленных к телу танцора. Эта система имеет оригинальную базу данных, которая связывает мелодию и движения, и с на основе этой базы данных ИИ в системе мгновенно создает подходящие мелодии (в виде MIDI-сообщений) из движений танцора. Затем система отправляет MIDI-данные на пианино Yamaha Disklavier и они преобразуются в собственно музыку.

Для преобразования танцевальных движений в музыку, Yamaha Disklavier незаменим, потому что он может воспроизводить широкую вариативность звуков с предельной точностью благодаря очень небольшим технологическим дополнениям в пианино. Кроме того, на концерте используется специальный Disklavier, который был сконфигурирован на основе концертного рояля Yamaha флагманской модели CFX, чтобы полностью выразить спектакль Мориямы.

Источник публикации Yamaha