CREDITO: Georgia Tech
Immagina se “Every Little Thing She Does Is Magic” dei Police aprisse “Beat It” di Michael Jackson, quindi il riff di “Bodak Yellow” di Cardi B si fondesse con Jackson. Questo mix non è una fantasia impossibile, ma una realtà con Mixboard, un’applicazione per tablet che consente agli utenti senza esperienza musicale o di editing di creare le canzoni dei loro sogni.
L’app nasce dal Center for Music Technology del Georgia Institute of Technology , il cui direttore, il professor Gil Weinberg , e i suoi studenti hanno sviluppato per anni uno strumento di mashup. Ora, la tecnologia ha finalmente raggiunto la loro visione originale. Con l’aiuto dell’intelligenza artificiale (AI), l’app trova artisti che l’utente potrebbe non accoppiare naturalmente e trova le parti migliori della canzone per il mashup.
“Penso che tutti possano diventare creativi con la musica”, ha detto Weinberg. “Forse non tutti conoscono tutta la teoria necessaria per comporre un brano musicale a livello di note, ma a quasi tutte le persone piace la musica. Se diamo loro un modo molto semplice per mettere le canzoni in posti diversi, possono creare qualcosa di unico”.
I ricercatori hanno presentato il loro lavoro nel documento “Mixboard – A Co-Creative Mashup Application for Novices” alla Conferenza internazionale delle nuove interfacce per l’espressione musicale (NIME 2023) a maggio.
Fare mashup
Per creare un mashup, gli utenti trascinano e rilasciano fino a quattro brani da Spotify o dalla libreria musicale Mixboard in segmenti di voce, basso, accordi e batteria per un massimo di 32 battute. L’esperienza è intrinsecamente visiva e consente agli utenti di seguire mentre l’app mescola le loro scelte musicali, rendendole in pochi secondi. Al termine, gli utenti possono scaricare e condividere la loro traccia unica.
“Ho lavorato praticamente su tutte le parti del progetto, dall’interfaccia web e back-end alla creazione di una nuovissima app iOS”, ha affermato Raghavasimhan Sankaranarayanan, Ph.D. studente di tecnologia musicale. “Sono appassionato di costruire cose che siano robuste e pronte per la produzione.”
DJ AI
L’intelligenza artificiale consente agli utenti di concentrarsi sullo sviluppo della canzone invece di preoccuparsi degli aspetti tecnici e della teoria musicale. L’app utilizza librerie di recupero di informazioni musicali open source per determinare il tempo, le chiavi e le parti musicali del brano, che aiutano a suddividere il brano in singoli mix. L’algoritmo può allungare il suono in modo che corrisponda al tempo o trasporre le chiavi per garantire che entrambe le canzoni siano nella stessa tonalità. I ricercatori forniscono anche modelli di strutture di canzoni di base per aiutare gli utenti a creare una traccia accattivante.
“Più ci concentriamo sullo sviluppo dell’intelligenza artificiale per scopi creativi, più può essere stimolante e vista come un input unico che gli esseri umani non potrebbero fornire”, ha affermato Weinberg. “Insieme, con la tua creatività e l’input creativo dell’IA, il mashup può essere qualcosa di unico e nuovo che non creeresti solo da solo.”
Mescolare il feedback degli utenti
Per garantire che Mixboard fosse funzionante, i ricercatori hanno condotto sondaggi sugli utenti, guidati dallo studente del master di interazione uomo-computer Tommy Ottolin. I loro studi hanno valutato l’interfaccia web con 45 soggetti di età compresa tra 18 e 27 anni, escludendo chiunque avesse più di un anno di esperienza nel missaggio musicale o nella composizione. Ai partecipanti sono stati concessi 30 minuti per testare Mixboard. Successivamente, hanno completato un’intervista semi-strutturata con i ricercatori seguita da un sondaggio di 20 domande utilizzando una scala Likert a cinque punti che chiedeva cose come quanto controllo creativo gli utenti sentivano di avere o quanto fosse facile usare l’app.
“Osservare le persone interagire con il nostro Mixboard evoca in me una serie di emozioni, tra cui orgoglio, nervosismo ed eccitazione”, ha affermato Qinying Lei, laureata in tecnologia musicale. “Sono così felice di vedere gli utenti affascinati da Mixboard e sorpresi dalla musica unica che producono.”
Il futuro di Mixboard
Mentre i ricercatori continuano a perfezionare l’automazione dell’app e a migliorare la funzionalità di iOS, vedono anche un potenziale molto più grande di un semplice esperimento di laboratorio. Sperano di commercializzare l’app, ma sono limitati meno dalla tecnologia e più dai vincoli di licenza. Weinberg si è consultato con Kobi Abayomi, ex vicepresidente senior per Data Science presso Warner Music Group, ora capo di Science for Gumbel Demand Acceleration e membro del comitato consultivo dell’Ivan Allen College of Liberal Arts.
“I detentori dei diritti musicali dovrebbero vedere app come Mixboard come opportunità di marketing, non riproduzioni in licenza”, ha affermato. “Fare in modo che le persone abbiano una maggiore affinità per la musica, o in particolare per il tuo tipo di musica, è ciò che riguarda il marketing musicale lungimirante”.
Alla fine, però, Mixboard riguarda la democratizzazione dell’accesso alla produzione musicale e la dimostrazione che chiunque può essere creativo.
“Ascoltare i mashup generati che miglioravano sempre di più con ogni modifica al nostro algoritmo è stato sorprendente”, ha affermato Nitin Hugar, laureato in tecnologia musicale. “È stato anche divertente provare a mescolare le canzoni più improbabili: una canzone indiana con ritmi africani e alcuni accordi jazz non era sicuramente quello che pensavo potesse suonare bene insieme, ma molte volte sono stato smentito. Questo progetto mi ha fatto apprezzare come la musica di diverse regioni del mondo sia interconnessa”.