Questa boy band K-pop con problemi di udito usa l’intelligenza artificiale per aiutarli a cantare

Nel scintillante mondo del K-pop, dove coreografie sincronizzate e armonie perfette regnano sovrane, una boy band composta interamente da membri con problemi di udito sta rompendo gli schemi.

Tra i membri dei Big Ocean, Jiseok è nato con una perdita di udito, mentre Hyunjin e Chanyeon hanno perso parte dell’udito rispettivamente all’età di tre e 11 anni.

Prima di allenarsi per diventare idoli del K-pop, i membri dei Big Ocean avevano percorsi completamente diversi: Jiseok era uno sciatore alpino, Hyunjin era uno YouTuber e Chanyeon era un audiologo.

Eppure tutti coltivavano il sogno di diventare star e di sfidare i pregiudizi nei confronti delle persone con disabilità.

La loro nuova band ha debuttato il 20 aprile, in concomitanza con la Giornata delle persone con disabilità celebrata in Corea del Sud.

“La nostra missione non è rivolta solo a persone con abilità uniche. È rivolta a tutti coloro che affrontano le proprie sfide”, ha detto Hyunjin, il cantante principale dei Big Ocean, a Euronews Next.

“Vogliamo che tu sappia che, qualunque cosa tu stia attraversando, non sei solo”, ha aggiunto Hyunjin.

Bisogno di segnali visivi

Il percorso verso la celebrità nel K-pop è notoriamente difficile, e spesso richiede anni di allenamento estenuante. Per Big Ocean, queste sfide sono state amplificate dal desiderio di cambiare le percezioni.

I membri della band e la sua società di gestione, Parastar Entertainment, affermano che la tecnologia ha avuto un ruolo significativo nell’aiutare i Big Ocean a diventare artisti K-pop.

Tutti e tre i membri dei Big Ocean indossano apparecchi acustici e due di loro hanno subito interventi di impianto cocleare. Gli impianti cocleari funzionano bypassando l’orecchio interno danneggiato e stimolando direttamente il nervo uditivo con segnali elettrici, consentendo al cervello di percepire il suono, mentre gli apparecchi acustici sono dispositivi indossabili che amplificano i suoni esterni.

Una delle sfide consisteva nel sincronizzare i loro passi di danza, poiché ogni membro utilizzava apparecchi acustici diversi.

“Se ballassero uno alla volta, sarebbero quasi perfetti. Ma quando ballano insieme, è tutto completamente diverso”, ha detto a Euronews Next Haley Cha, CEO di Parastar Entertainment.

Frustrato, l’istruttore di danza di Big Ocean cominciò a battere forte le mani a ritmo, e Cha notò che i membri del gruppo erano più sincronizzati.

“[We] in seguito abbiamo scoperto che non era per il suono del battito delle mani, ma per la visuale del battito delle mani. Quindi avevamo un indizio che si sentivano meglio con segnali visivi. Ecco come abbiamo inventato uno schermo per dargli la luce lampeggiante”, ha detto Cha.

Da allora, Big Ocean ha iniziato a esercitarsi nella coreografia utilizzando metronomi a vibrazione sugli smartwatch e metronomi con torcia sullo schermo.

“Abbiamo utilizzato un sistema di metronomo visivo e sensoriale perché non riuscivano a sentire la musica perfettamente. Abbiamo creato una luce lampeggiante in modo che potessero vedere i beat in modo visivo”, ha detto Cha.

Un debutto reso possibile grazie all’intelligenza artificiale e alle tecnologie avanzate

Per le persone con problemi di udito, cantare può rappresentare una sfida nel percepire correttamente l’intonazione e il ritmo.

Per garantire che la voce di ogni membro rispettasse gli standard del settore, Big Ocean ha utilizzato la tecnologia di conversione vocale per modificare e migliorare le performance vocali in collaborazione con le società di produzione musicale coreane Muble e Samsong E&M.

“Dato che tutti i membri dei Big Ocean sono sordi, era fisicamente difficile per loro cantare con una pronuncia o un tono precisi”, ha detto a Euronews Next Hans Choo, produttore capo di Muble. “Abbiamo trasformato le voci dei membri dei Big Ocean in modelli di intelligenza artificiale e poi abbiamo utilizzato questi modelli per dedurre voci che potessero catturare le loro caratteristiche individuali”.

La prima canzone dei Big Ocean è stata realizzata applicando i modelli di intelligenza artificiale a una guida vocale registrata dal rapper coreano Mac Curly.

Secondo Muble, il suo servizio di conversione vocale tramite intelligenza artificiale sfrutta la tecnologia di apprendimento automatico per convertire o generare voci.

“Utilizzandolo, è possibile imparare a riprodurre la voce di una persona specifica o creare voci completamente nuove mai ascoltate prima”, ha affermato Choo.

“Per Big Ocean, ad esempio, abbiamo utilizzato l’intelligenza artificiale per imparare la voce di ogni membro e poi abbiamo creato alcune sezioni che trovavano difficili da cantare da soli”.

Secondo la Parastar Entertainment, ci sono voluti quasi tre mesi per raccogliere le voci parlate, conversazionali, cantate e persino rap dei membri dei Big Ocean sia in coreano che in inglese per raggiungere il risultato desiderato, ovvero cantare per la prima canzone, che è stato ridotto a poche settimane per le canzoni successive.

Durante due sessioni presso lo studio di registrazione di Muble, la band ha registrato circa 500 take per addestrare modelli di intelligenza artificiale di alta qualità per ogni membro. In genere, la produzione di nuovi album può richiedere fino a 200-300 take, secondo Muble.

“Per Big Ocean, l’obiettivo era produrre un suono naturale e coeso, quindi non ci siamo affidati esclusivamente alla tecnologia”, ha affermato Choo.

“Attualmente sono disponibili molte tecnologie di intelligenza artificiale, ma ci sono ancora limitazioni significative nel rendere il suono naturale semplicemente raccogliendo [recorded vocal] dati”, ha aggiunto Hoseon Lee, fondatore di Samsong E&M e Muble. “Ciò è particolarmente vero per la lingua coreana, dove è estremamente impegnativo e quasi impossibile”.

La società di produzione musicale ha creato modelli separati per le diverse lingue e le varie parti del brano, per perfezionare il prodotto finale.

“Quando abbiamo ascoltato la versione completa, è stata incredibilmente toccante a livello personale. Abbiamo sentito che molte persone che l’hanno ascoltata si sono sentite profondamente toccate e hanno persino pianto”, ha detto Choo.

Cha di Parastar paragona l’uso della conversione vocale tramite intelligenza artificiale da parte di Big Ocean all’aggiornamento digitale del suono della canzone, nonostante le crescenti preoccupazioni a livello mondiale sulla perdita di posti di lavoro per i doppiatori e sui problemi di copyright legati a queste tecnologie.

A maggio, ad esempio, la modalità vocale ChatGPT di Open AI è stata oggetto di polemiche perché somigliava molto a quella dell’attrice Scarlett Johansson.

“Nella storia della musica, quando la Digital Audio Workstation (DAW) fu introdotta per la prima volta per sostituire il processo manuale, si discusse anche in pubblico se ciò avrebbe potuto compromettere l’autenticità della musica”, ha scritto Cha in una e-mail.

“Finché l’intelligenza artificiale non viola i diritti attuali di alcun artista e viene utilizzata in un sistema organizzato, personalmente penso che diventerà presto una nuova normalità”, ha aggiunto.

Ha aggiunto che tutte le parti che prendono parte alla produzione vengono riconosciute per il loro ruolo e retribuite per esso.

Gli esperti ritengono che tecnologie emergenti come la conversione vocale tramite intelligenza artificiale aumenteranno l’accessibilità alla musica.

“Se consideriamo la musica come un linguaggio comune che può elevarci e unirci, allora la disponibilità di strumenti come l’intelligenza artificiale per artisti di tutte le identità può ampliare notevolmente la diversità delle voci nella musica”, ha detto a Euronews Next Rachel Alina, professoressa associata presso il Dipartimento di produzione musicale e ingegneria del Berklee College of Music.

“Big Ocean è un esempio lampante di come la tecnologia possa consentire a coloro che potrebbero essere stati esclusi dai tradizionali processi di creazione musicale di condividere le proprie storie e i propri talenti con il mondo”, ha affermato.

Tuttavia, gli esperti avvertono che, sebbene il futuro della tecnologia sia entusiasmante, comporta anche importanti responsabilità, in particolare per quanto riguarda le conseguenze di un accesso diseguale.

“Man mano che queste tecnologie diventano più ampiamente accessibili, il divario tra coloro che vi hanno accesso e coloro che non vi hanno accesso si allargherà rapidamente”, ha detto Ben Camp, professore di composizione di canzoni al Berklee College of Music, a Euronews Next in una e-mail. “Spero che la disponibilità e l’accessibilità siano considerate prioritarie tanto quanto lo sviluppo”, hanno aggiunto.

Alina ha osservato che esiste anche il rischio che un eccessivo affidamento all’intelligenza artificiale possa portare alla perdita di quel “tocco umano sfumato” che rende la musica così emotivamente potente.

“Ma come abbiamo visto con altri progressi tecnologici in tutte le attività creative, questi nuovi strumenti probabilmente daranno origine a nuove competenze e forme di espressione”, ha aggiunto. “È emozionante pensare a dove questo potrebbe portare e, in definitiva, ciò che risuona di più con il pubblico ci mostrerà cosa funziona meglio”.

Abbracciare la diversità nel K-pop

Parastar Entertainment afferma di aver cercato di non trascurare nulla durante la preparazione del debutto dei Big Ocean, dallo sviluppo della presenza scenica della band alle lezioni di linguaggio dei segni.

“Una delle sfide previste era adattare i nostri metodi di allenamento per soddisfare le esigenze specifiche di ogni membro”, ha affermato Cha.

“Ma quello che non avevamo previsto era la crisi finanziaria dietro la scena degli idol. Qualunque cosa ci aspettassimo con il budget preparato, le spese sono state più grandi”, ha aggiunto.

Il K-pop, un fenomeno globale, ha registrato una crescita enorme negli ultimi dieci anni. Un rapporto Uno studio condotto da Allied Market Research ha dimostrato che il solo mercato degli eventi K-pop è stato valutato 7,4 miliardi di euro nel 2021 e si stima che raggiungerà i 18 miliardi di euro entro il 2031.

Nel 2021, l’etichetta K-pop HYBE, la società di gestione della band BTS, ha acquisito la società di gestione del cantante Justin Bieber, Ithaca Holdings.

In un settore spesso criticato per i suoi standard rigidi e la mancanza di diversità, Big Ocean cerca di raggiungere un pubblico globale.

Secondo la sua società di gestione, il gruppo ha raggiunto un totale di 1,1 milioni di follower su tre diverse piattaforme di social media.

“Per essere onesti, più le persone sono aperte alla diversità e all’inclusione, migliore è la reazione a Big Ocean”, ha detto Cha. “Ad esempio, negli Stati Uniti o nei paesi europei dove hanno una percezione sociale molto buona della disabilità, tendono ad essere più appassionati di Big Ocean. Quindi, un mercato ancora migliore rispetto al mercato coreano. Volevamo raggiungere quell’area in cui possiamo essere più benvenuti”.

Big Ocean afferma di incorporare sempre il linguaggio dei segni nelle loro performance per rendere più facile per tutti apprezzare la musica. La band ha pubblicato il suo primo singolo ‘Glow’ eseguito nel linguaggio dei segni coreano e il suo secondo ‘Blow’ nel linguaggio dei segni americano.

“I membri stessi hanno avuto così tanti momenti difficili e varie avversità, che le nostre canzoni e i testi che contengono queste idee sono più facilmente riconoscibili da molte persone”, ha detto Cha.

Big Ocean afferma di sperare di poter essere un giorno accettati come normali idoli del K-pop.

“Voglio essere riconosciuto non solo per le nostre abilità uniche, ma anche per il nostro talento e il nostro duro lavoro, proprio come qualsiasi altro idol. E riuscendo in questo, penso che possiamo naturalmente rompere i pregiudizi sociali e creare grande musica insieme”, ha detto Hyunjin.

“Il mio sogno più grande sarebbe esibirmi di fronte ai nostri fan con la mia voce. I membri e io ci stiamo dedicando molto all’allenamento vocale e speriamo di mostrare a tutti i nostri progressi e miglioramenti”, ha detto Jiseok.

Big Ocean pubblicherà un nuovo album in concomitanza con le Paralimpiadi del 2024.

Per saperne di più su questa storia, guarda il video nel lettore multimediale qui sopra.