«Гармоничный робот»: человекоподобный механизм, который умеет играть на пианино

Музыкальный робот, который умеет играть на фортепиано в дуэте с человеком и моментально генерировать качественное сопровождение, получил награду на конференции в 2024 году. Докторант Хуэйцзян Ван из Кембриджа получил эту награду за своего робота «Гармоничный робот».

Это человекоподобный робот с руками, одна из которых настроена на игру на аккордеоне. Робот обучается «на ходу» и способен предсказывать аккорды, которые человек будет играть дальше. Он подстраивается под игру человека и создает гармоничное сопровождение.

Робот умеет двигать руками вверх и вниз, нажимая на клавиши пианино, и в стороны, переключая аккорды. Это позволяет ему играть разные мелодии. Робот и человек играют вместе как дуэт. Робот «слушает» мелодию человека и использует машинное обучение, чтобы предугадать следующие аккорды.