Projeto Dear Glenn da Yamaha
A Yamaha prepara-se para apresentar o primeiro sistema de piano*1 de Inteligência Artificial (AI) do mundo, baseado na tecnologia de aprendizagem profunda (Deep Learning)*2, capaz de tocar qualquer obra musical com o estilo do lendário pianista Glenn Gould, enquanto interage com seres humanos de um ensemble. O evento terá lugar no dia 7 de setembro, terceiro dia do Ars Electronica Festival, um dos maiores festivais do mundo de media arts, em Linz, na Áustria. O sistema de IA fará um concerto junto com vários artistas de renome da atualidade. Também haverá um painel sobre o futuro da música e da IA. O projeto também foi reconhecido como um dos vários eventos para comemorar os 150 anos de relações nipo-austríacas.
Pontos chave
- A Yamaha apresenta o primeiro sistema de IA do mundo capaz de tocar qualquer obra musical com o estilo do lendário pianista Glenn Gould, com a interação entre um pianista de AI e músicos humanos
- A inteligência artificial deve tocar um concerto com artistas de renome, incluindo peças nunca tocadas por Gould
- A discussão explorará as possibilidades de cocriação e interpretação entre inteligência artificial e humana
Site oficial de Dear Glenn:
Site e vídeo do making of disponíveis a partir de 4 de Setembro.
Com o total apoio da Fundação Glenn Gould, a Yamaha analisou mais de 100 horas das gravações de Gould para desenvolver uma total compreensão do seu estilo e empregou algoritmos de aprendizagem profunda com base nos dados obtidos para criar o sistema de IA. Os dados de aprendizagem da IA incluíram também gravações em áudio de vários pianistas admiradores de Gould, intimamente familiarizados com o estilo dele, o que elevou a qualidade da reprodução.
Além disso, o sistema inclui a tecnologia AI Music Ensemble original da Yamaha, que permite analisar o rendimento de outros músicos de forma quase instantânea e toca de forma preditiva enquanto interage com estes. Mais do que uma simples interpretação automatizada, o sistema reproduz o toque magistral de Glenn Gould e oferece uma cocriação inspiradora e interativa entre um pianista de IA e músicos ao vivo.
O sistema de IA será apresentado no terceiro dia do festival, sábado, dia 7 de setembro, durante um painel que explorará o futuro da música com o uso da IA na apresentação musical. O painel incluirá o famoso pianista contemporâneo Francesco Tristano; Brian M. Levine, da Fundação Glenn Gould; e o programador Akira Maezawa, da Yamaha Corporation, que ajudou a criar o sistema de IA.
Posteriormente, o sistema de IA fará o seu primeiro concerto público juntamente com artistas contemporâneos de renome no mosteiro de St. Florian. Estes concertos incluirão um dueto de piano com Francesco Tristano e um trio de sopro com músicos da Bruckner Orchestra Linz. O programa incluirá a obra-prima representativa de Glenn Gould: Variações Goldberg de JS Bach (BWV 988), Fuga inversa a 2 Clavicembali, de A Arte da Fuga (BWV 1080/18) e Trio Sonata em Sol Maior(BWV 1038)
Variações Goldberg (BWV 988), estas duas últimas jamais interpretadas por Gould e que, portanto, não estão incluídas nos dados de aprendizagem da IA, quer dizer que, o sistema terá um enorme desafio de as executar sem necessidade de imitar os dados de áudio da fonte.
Glenn Gould era conhecido também pela devoção à gravação por meios digitais e pelo interesse em repensar a relação entre o artista e o público. O nome do projeto, “Dear Glenn”, é uma homenagem à atitude do artista, que ajudou a desenvolver as possibilidades de novas tecnologias e que inspirou também a ideia por detrás do projeto. Com este projeto, a Yamaha espera apresentar novas possibilidades na expressão musical por meio da cocriação e da inspiração mútua entre músicos e a moderna tecnologia de IA.
Comentário de Koichi Morita, Diretor Geral do Departamento de Pesquisa e Desenvolvimento da Yamaha
No mundo dos instrumentos e da música, potenciados pela história e pela tradição, os avanços técnicos foram sempre um foco potenciador de novas possibilidades da expressão musical. Um dos melhores exemplos é o piano, que continua a evoluir mesmo depois de se ter convertido num instrumento amplamente difundido na sua forma atual, graças à revolução industrial. A evolução da tecnologia da informação no século XX proporcionou-nos não apenas uma revolução no hardware do piano, mas também no software, incluindo a tecnologia de IA. A Yamaha acredita que a IA tem o potencial de expandir os limites da criatividade musical desde o ponto de vista da emoção e da sensibilidade humana. Estamos ansiosos para explorar novas possibilidades, exibindo e partilhando alguns dos nossos resultados com os entusiastas da música na Ars Electronica, em setembro.
Tecnologia - Visão Geral
O sistema de IA é capaz de tocar piano com o estilo de Glenn Gould e distingue-se pela capacidade de também tocar peças nunca antes interpretadas pelo artista, desde que as partituras estejam devidamente disponíveis. Esse feito é possível graças a uma avançadíssima tecnologia “Deep learning”. O sistema é composto por um piano e pelo software de IA, que gera instantaneamente dados de reprodução com o estilo de Glenn Gould.
Figura 1: O processo de aprendizagem da IA. Além de analisar a forma paino de Glenn Gould, com base nas gravações de áudio das suas performances (Etapa 1), a IA também utilizou dados de outros pianistas intimamente familiarizados com Gould. Em seguida fez uso de uma profunda rede neural para aprender a tocar com o estilo de Glenn Gould, com o uso opcional de partituras (Etapa 2). Como resultado, a IA reproduz o estilo de Gould mesmo enquanto executa peças nunca gravadas pelo artista (Etapa 3).
Figura 2: Funcionamento da IA Glenn Gould com um ensemble. Com a análise em tempo real dos músicos participantes através de uma câmara e um microfone, a IA de Glenn Gould interage com eles durante a performance.
Painel (apresentação da IA)
Data:
7 de setembro de 2019 (sáb) às 19h ~ 19h30
Local:
Mosteiro de St. Florian (Linz, Áustria)
Participantes:
Francesco Tristano (pianista), Brian M. Levine (Fundação Glenn Gould), Norbert Trawoger (Brucker Orchester Linz), Akira Maezawa (P&D da Yamaha Corporation)
Tema:
Possibilidades de cocriação entre artistas e IA
Concerto
Data:
7 de setembro de 2019 (sábado) às 20h30 ~ 21h
Local:
Mosteiro de St. Florian (Linz, Áustria)
Músicos colaboradores:
Francesco Tristano (pianista), Norbert Trawoger (Flauta; Brucker Orchester Linz), Maria Elisabeth Kostler (violinista da Bruckner Orchester Linz)
Peças:
Variações Goldberg de JS Bach (BWV 988), Fuga inversa a 2 Clavicembali, de A Arte da Fuga (BWV 1080/18)*, Trio Sonata em Sol Maior(BWV 1038)* *Nunca tocada por Glenn Gould
Glenn Gould
Nascido em 1932 em Toronto, no Canadá, Glenn Gould foi um lendário pianista que faleceu em 1982, aos 50 anos. Gould recebeu extraordinários elogios e é conhecido pelas magistrais execuções da obra de JS Bach, começando com seu disco de estreia, Bach: As Variações Goldberg, lançado em 1956. Em 1964, aos 26, anos, Gould anunciou o fim da carreira como concertista e passou a dedicar-se exclusivamente à gravação por meios digitais. Gould era também conhecido pela forma muito pouco convencional de tocar, que incluía sentar-se numa cadeira baixa e inclinar-se sobre o teclado do piano, assim como cantarolar ao mesmo tempo que tocava, mesmo durante as gravações. Nos seus últimos anos, Gould gravou três discos, incluindo Bach: As Variações Goldberg, num piano de concerto da Yamaha.
Ars Electronica Festival
O Ars Electronica Festival tem como foco as mais recentes novidades na arte, tecnologia e ciência. É organizado pela Ars Electronica, instituto de pesquisa de arte multimédia com sede em Linz, na Áustria. Realizado pela primeira vez em 1979, o festival tornou-se num dos maiores eventos de arte e tecnologia do mundo. Durante o festival, especialistas de todo o mundo reúnem-se em exposições, espetaculos, eventos e conferências internacionais nos arredores de Linz para participar em debates e criar novas sinergias.
Fundação Glenn Gould
A missão da Fundação Glenn Gould é honrar o espírito e o legado de Glenn Gould, enaltecendo o brilhantismo, promovendo a criatividade e transformando vidas pelo poder da música e das artes com as atividades exclusivas da Fundação, incluindo o Prémio Glenn Gould.
Notícias Relacionadas
・A Inteligência Artificial Yamaha reproduz o toque do Mestre Sviatoslav Richter, com a Berlin Philharmonic Orchestra
・A Inteligência Artificial Yamaha transforma um bailarino num pianista
・A Inteligência Artificial Yamaha em Piano Duet com Ensemble de Sopros
・A Yamaha e a HAKUHODO i-Studio expõem instalação de música experimental de IA no SXSW
*1: Agosto de 2019; pesquisa interna da Yamaha Corporation.
*2: “Deep Learning” é um método de aprendizagem automático caracterizado pelo uso de modelos matemáticos em várias camadas, chamados redes neurais, para processar informações.