O pianista de jazz Heo Dae-uk, à esquerda, e o pianista de inteligência artificial (IA) Scott, durante a 23ª edição do Festival de Jazz Jarasum, realizada no condado de Gapyeong, província de Gyeonggi, entre os dias 9 e 11 de outubro. Cortesia do Instituto Coreano Avançado de Ciência e Tecnologia Modelos de inteligência artificial (IA) desenvolvidos por uma equipe liderada pelo professor Nam Ju-han do Instituto Coreano Avançado de Ciência e Tecnologia (KAIST) fizeram sua estréia em um dos principais festivais de jazz da Coreia, executando jazz improvisado ao lado de artistas humanos. Segundo a universidade nesta sexta-feira, a equipe apresentou tecnologia de colaboração musical humano-IA que analisa o fluxo de performances humanas em tempo real, permitindo que a IA assuma as execuções ou gere acompanhamento improvisado durante a 23ª edição do Festival de Jazz Jarasum, realizada no condado de Gapyeong, província de Gyeonggi, entre os dias 9 e 11 de outubro. No total, 12 artistas de jazz humanos participaram do evento, colaborando com a IA em 26 peças ao longo de 12 apresentações. A tecnologia é diferente dos serviços de música por IA existentes, pois permite colaboração com músicos de jazz, um gênero caracterizado pela improvisação. Músicos de jazz frequentemente alteram o andamento ou criam novas melodias com base em como se sentem no momento. Como a mesma peça pode ser executada de forma diferente a cada vez, os músicos devem ouvir uns aos outros e ajustar sua execução conseqüentemente. Para que a IA participe de performances de jazz, ela deve ir além de tocar música pré-composta e ser capaz de ouvir músicos humanos e responder às mudanças em suas execuções. Uma tela mostra o personagem de realidade aumentada do pianista de inteligência artificial Scott durante uma apresentação com o pianista de jazz Heo Dae-uk durante a 23ª edição do Festival de Jazz Jarasum, realizada no condado de Gapyeong, província de Gyeonggi, entre os dias 9 e 11 de outubro. Cortesia do Instituto Coreano Avançado de Ciência e Tecnologia A equipe apresentou dois modelos de IA — um modelo de pianista chamado Scott e o acompanhante DeepPocket. Scott comparou as performances dos músicos humanos com a partitura em tempo real para assumir o controle em momentos apropriados e gerar novos solos que refletem as melodias e ritmos dos músicos. A música gerada por Scott foi transmitida para um piano acústico Yamaha Disklavier reprodutor, que tocou a música através de movimentos reais das teclas e pedais. No palco, um personagem de realidade aumentada foi sobreposto ao vídeo da câmera ao vivo usando dados de movimento gerados por tecnologia que simula os movimentos das mãos de um pianista. O DeepPocket analisou o trabalho de músicos humanos e gerou acompanhamento de piano, baixo e bateria em tempo real, ajustando-se às suas notas, ritmos e andamento. Ele produziu música junto com pianistas e guitarristas sem qualquer preparação prévia, adaptando-se continuamente ao seu estilo de execução. Em 2023, a equipe de pesquisa apresentou tecnologia de IA que ajustou o tempo do acompanhamento de piano durante uma performance da soprano Sumi Jo. Desta vez, a equipe levou a tecnologia um passo adiante, permitindo que a IA gerasse seus próprios solos e acompanhamentos em um palco de jazz. "As performances demonstraram que a IA pode ouvir músicos humanos e criar música ao lado deles respondendo ao fluxo de suas apresentações, marcando um avanço significativo em relação a simplesmente tocar músicas pré-definidas", disse Nam. "Continuaremos nossas pesquisas para desenvolver a IA como uma parceira musical capaz de trocar inspiração criativa com músicos humanos, em vez de simplesmente servir como uma ferramenta."
