Человек и робот сыграли дуэтом на пианино

Музыкальный робот, который может играть на фортепиано в тандеме с человеком, был награжден на конференции «Центр искусственного интеллекта, вдохновленного человеком» 2024 года в Сан-Франциско.

Разработку — робота под названием «Harmony Robot» — представил аспирант Кембриджского университета Хуэйцзян Ван. Это устройство оснащено антропоморфной рукой, которая повторяет движения человека при игре на фортепиано. Исследование, опубликованное в журнале IEEE Xplore, показало, что робот способен точно предсказать аккорды с точностью до 93%.

Система Harmony Robot использует алгоритмы искусственного интеллекта для анализа мелодии, исполняемой человеком, в реальном времени, подбирая аккомпанемент. Адаптивный контроллер обеспечивает синхронизацию игры робота и исполнителя, благодаря чему их совместное исполнение звучит гармонично. Роботизированная рука может двигаться не только вертикально, нажимая клавиши, но и горизонтально, играя различные аккорды.

— Наш робот «слушает» музыку и применяет методы машинного обучения, чтобы подобрать правильные аккорды, обеспечивая гармоничное звучание», — отметил Хуэйцзян Ван. Он добавил, что робот точно синхронизируется с темпом исполнителя и подстраивается под его ритм.