Projeto Dear Glenn, da Yamaha, revela sistema de IA que reproduz o estilo do lendário pianista Glenn Gould no Ars Electronica Festival
A Yamaha Corporation apresentará o primeiro sistema de piano*1 de Inteligência Artificial (AI) do mundo, baseado na tecnologia de aprendizagem profunda (Deep Learning)*2, capaz de tocar qualquer peça musical no estilo do lendário e falecido pianista Glenn Gould, enquanto interage com seres humanos de um grupo musical. O evento será no dia 7 de setembro, terceiro dia do Ars Electronica Festival, um dos maiores festivais de artes midiáticas do mundo, realizado em Linz, na Áustria. O sistema de IA fará um concerto junto com vários artistas de renome da atualidade. Também haverá um painel sobre o futuro da música e da IA. O projeto também foi reconhecido como um dos vários eventos para comemorar os 150 anos de relações nipo-austríacas.
Pontos principais
- A Yamaha divulga o primeiro sistema de IA do mundo capaz de tocar qualquer peça musical estilo do lendário pianista Glenn Gould, com a interação entre um pianista de AI e músicos humanos
- A inteligência artificial deve tocar um concerto com artistas de renome da atualidade, incluindo peças nunca tocadas por Gould
- A discussão explorará as possibilidades de cocriação entre IA e humanos e como a execução musical
Site oficial do Dear Glenn:
Site e vídeo de making of disponíveis a partir de 4 de setembro.
Com o total apoio da Fundação Glenn Gould, a Yamaha analisou mais de 100 horas das gravações de Gould para entender o seu estilo e empregou algoritmos de aprendizagem profunda com base nos dados coletados para criar o sistema de IA. Os dados de aprendizagem da IA também incluíram gravações em áudio de vários pianistas admiradores de Gould, intimamente familiarizados com o estilo dele, o que elevou a qualidade da reprodução como nunca.
Além disso, o sistema inclui a tecnologia AI Music Ensemble original da Yamaha, que analisa a execução de outros pianistas humanos quase instantaneamente e toca preditivamente enquanto interage com músicos humanos. Mais do que uma simples execução automatizada, o sistema reproduz o toque magistral de Glenn Gould e oferece uma cocriação inspiradora e interativa entre um pianista IA e músicos humanos.
O sistema de IA será revelado no terceiro dia do festival, sábado, dia 7 de setembro, durante um painel que explorará o futuro da música com o uso da IA na apresentação musical. O painel incluirá o renomado pianista contemporâneo Francesco Tristano; Brian M. Levine, da Fundação Glenn Gould; e o desenvolvedor Akira Maezawa, da Yamaha Corporation, que ajudou a criar o sistema de IA.
A seguir, o sistema de IA fará sua primeira apresentação pública junto a renomados artistas contemporâneos no mosteiro de St. Florian. As apresentações incluirão um dueto de piano com Francesco Tristano e um trio de sopro com membros da Bruckner Orchestra Linz. O programa incluirá a obra-prima representativa de Glenn Gould: Variações Goldberg (BWV 988), Além de Fuga inversa a 2 Clavicembali, de A Arte da Fuga (BWV 1080/18), e Trio Sonata em Sol Maior (BWV 1038), todas de JS de Bach. Nenhuma das duas últimas jamais foi tocada por Gould. Como nenhuma das peças está incluída nos dados de aprendizagem da IA, o sistema terá o desafio de executá-las sem imitar os dados de áudio de origem.
Glenn Gould também era conhecido pela devoção à gravação com mídias digitais e pelo interesse em repensar a relação entre o artista e o público. O nome do projeto, “Dear Glenn”, é uma homenagem à atitude do artista, que ajudou a revelar as possibilidades de novas tecnologias e também inspirou a ideia por trás do projeto. Com este projeto, a Yamaha espera apresentar novas possibilidades na expressão musical por meio da cocriação e da inspiração mútua entre músicos humanos e a moderna tecnologia de IA.
Comentários de Koichi Morita, gerente-geral sênior da Divisão de Pesquisa e Desenvolvimento da Yamaha Corporation
No mundo dos instrumentos e da música, promovidos pela história e pela tradição, o avanço técnico sempre atualizou e ampliou as possibilidades da expressão musical. Um exemplo importante é o piano, que continua a evoluir mesmo após se tornar um instrumento difundido na sua forma atual, graças à revolução industrial. A evolução da tecnologia da informação no século 20 nos proporcionou uma revolução não apenas no hardware do piano, mas também no software, incluindo a tecnologia de IA. A Yamaha acredita que a IA tem o potencial de expandir os limites da criatividade musical do ponto de vista da emoção e da sensibilidade humana. Estamos ansiosos para explorar novas possibilidades, exibindo e compartilhando alguns dos nossos resultados em andamento com os entusiastas da música na Ars Electronica, em setembro.
Tecnologia - Visão Geral
O sistema de IA é capaz de tocar piano no estilo de Glenn Gould se distingue pela capacidade de também tocar, na hora, peças nunca executadas pelo artista, desde que haja dados de partituras disponíveis. Esse feito é possível graças a uma avançadíssima tecnologia de aprendizagem profunda. O sistema consiste em um piano e no software de IA, que gera instantaneamente dados de execução no estilo de Glenn Gould e, em seguida, fornece esses dados ao piano.
Figura 1: O processo de aprendizagem da IA. Além de analisar o toque de Glenn Gould no piano, com base nas gravações de áudio de suas execuções musicais (Etapa 1), a IA também usou dados de outros pianistas intimamente familiarizados com Gould. Em seguida, ela usou uma profunda rede neural para aprender a tocar no estilo de Glenn Gould, com o uso opcional de partituras (Etapa 2). Como resultado, a IA reproduz o estilo de Gould mesmo enquanto executa peças nunca gravadas pelo artista (Etapa 3).
Figura 2: Operação da IA Glenn Gould em um conjunto. Com a análise em tempo real de músicos humanos via câmera e microfone, a IA de Glenn Gould interage com eles durante a apresentação.
Painel (apresentação da IA)
Data:
7 de setembro de 2019 (sáb) às 19h ~ 19h30
Local:
Mosteiro de St. Florian (Linz, Áustria)
Panelistas:
Francesco Tristano (pianista), Brian M. Levine (Fundação Glenn Gould), Norbert Trawoger (Brucker Orchester Linz), Akira Maezawa (P&D da Yamaha Corporation)
Tema:
Possibilidades de cocriação entre artistas e IA
Concerto
Data:
7 de setembro de 2019 (sábado) às 20h30 ~ 21h
Local:
Mosteiro de St. Florian (Linz, Áustria)
Coartistas:
Francesco Tristano (pianista), Norbert Trawoger (Flauta; Brucker Orchester Linz), Maria Elisabeth Kostler (violinista da Bruckner Orchester Linz)
Peças:
Variações Goldberg de JS Bach (BWV 988), Fuga inversa a 2 Clavicembali, de A Arte da Fuga (BWV 1080/18)*, Trio Sonata em Sol Maior(BWV 1038)* *Nunca tocada por Glenn Gould
Glenn Gould
Nascido em 1932 em Toronto, no Canadá, Glenn Gould foi um lendário pianista que faleceu em 1982, aos 50 anos. Gould recebeu extraordinários elogios e é conhecido pelas magistrais execuções das músicas de JS Bach, começando com seu disco de estreia, Bach: As Variações Goldberg, lançado em 1956. Em 1964, Gould anunciou o fim da carreira nos concertos e se concentrou nas gravações, dedicando-se a lançamentos em mídias digitais. Gould também era conhecido pelos hábitos não convencionais e característicos na execução, que incluíam se sentar em uma cadeira baixa e se inclinar sobre o teclado do piano, bem como cantarolar enquanto tocava, mesmo durante as gravações. Em seus últimos anos, Gould gravou três discos, incluindo Bach: As Variações Goldberg, em um piano de concerto da Yamaha.
Ars Electronica Festival
O Ars Electronica Festival é centrado nas últimas novidades na arte, tecnologia e ciência. É realizado pela Ars Electronica, instituto de pesquisa de arte em Mídias com sede em Linz, na Áustria. Realizado pela primeira vez em 1979, o festival se tornou um dos maiores eventos de arte midiática do mundo. Durante o festival, especialistas de todo o mundo se reúnem em exposições, apresentações, eventos e conferências internacionais, tudo nos arredores de Linz, além de participarem de discussões e criarem novas conexões.
Fundação Glenn Gould
A missão da Fundação Glenn Gould é honrar o espírito e o legado de Glenn Gould, enaltecendo o brilhantismo, promovendo a criatividade e transformando vidas pelo poder da música e das artes com as atividades exclusivas da Fundação, incluindo o Prêmio Glenn Gould.
Comunicados relacionados à imprensa
・ IA da Yamaha reproduz toque do mestre pianista Sviatoslav Richter e se apresenta com a Orquestra Filarmônica de Berlim
・ A Inteligência Artificial da Yamaha (AI) transforma um dançarino em pianista
・ A IA da Yamaha se junta a músicos humanos no Piano Duet, Wind Ensemble
・ Yamaha e HAKUHODO expõem a instalação experimental de música em IA no SXSW
*1: Agosto de 2019; pesquisa interna da Yamaha Corporation.
*2: A aprendizagem profunda é um método de aprendizagem de máquina caracterizado pelo uso de modelos matemáticos em várias camadas, chamados redes neurais, para processar informações.