La IA ha estat creant música i els resultats són... estranys

A finals de maig, una petita multitud a l'església de St. Dunstan al districte de Stepney a l'est de Londres es va reunir durant dues hores de música tradicional irlandesa. Però aquest esdeveniment va ser diferent; les melodies que presentava estaven compostes, en part, per un algorisme d'intel·ligència artificial (IA), anomenat folk-rnn, un recordatori clar de com la IA d'avantguarda està impregnant gradualment tots els aspectes de la vida i la cultura humanes, fins i tot la creativitat.



Desenvolupat per investigadors de la Universitat de Kingston i la Universitat Queen Mary de Londres, folk-rnn és un dels nombrosos projectes que exploren la intersecció de la intel·ligència artificial i les arts creatives. L'actuació de Folk-rnn es va trobar amb una barreja de fascinació, admiració i consternació en veure màquines sense ànima conquerir una cosa àmpliament considerada com el domini exclusiu de la intel·ligència humana. Però aquestes expedicions estan descobrint noves maneres en què l'home i la màquina poden cooperar.

Com la IA crea art?

Com molts altres productes d'IA, folk-rnn fa servir aprenentatge automàtic algorismes, a subconjunt de la intel·ligència artificial . En lloc de basar-se en regles predefinides, l'aprenentatge automàtic ingereix grans conjunts de dades i crea representacions matemàtiques dels patrons i correlacions que troba, que després utilitza per realitzar tasques.





Folk-rnn es va formar amb un repertori públic de 23.000 transcripcions de música irlandesa abans de començar a crear les seves pròpies cançons. Des dels seus inicis l'any 2015, folk-rnn ha passat tres iteracions i ha produït més de 100.000 cançons, moltes de les quals s'han recopilat en un Compendi en línia de 14 volums .

Màquines de flux , un projecte de cinc anys finançat pel Consell Europeu de Recerca i coordinat pels Laboratoris de Ciències de la Computació de Sony, també va aplicar algorismes d'IA a la música. El seu assoliment més notable —i estrany— és ' El cotxe del pare ,' una cançó generada per un algorisme que es va entrenar amb fulls de plom de 40 de les cançons d'èxit dels Beatles.



Benvinguts errors

Els algorismes poden imitar l'estil i la sensació d'un gènere musical, però sovint cometen errors bàsics que un compositor humà no faria. De fet, la majoria de les peces interpretades al debut de folk-rnn van ser modificades per músics humans.

'L'art no és un problema ben definit, perquè mai saps exactament què vols', diu Francois Pachet, que va exercir com a investigador principal de Flow Machines i ara és director del Creator Technology Research Lab de Spotify. Però, afegeix alegrement, 'és bo que l'art no estigui ben definit. En cas contrari, no seria art'.

El full de plom generat per a 'Daddy's Car' també va ser editat per un músic humà, i algunes cançons es van afegir a mà. 'Hi havia pràcticament molta intel·ligència artificial allà dins, però no tot', diu Pachet, 'incloses les lletres de veu i l'estructura, i, per descomptat, tota la barreja i la producció'.

'El benefici real és aconseguir seqüències que no s'esperaven i que donen lloc a idees musicalment interessants', diu Bob Sturm, professor de mitjans digitals a Queen Mary, Universitat de Londres, que va treballar en folk-rnn. 'Volem que el sistema creï errors, però el tipus correcte d'errors'.

vaixell mare rog (gz700)

Daren Banarsë, un músic irlandès que va examinar i tocar algunes de les melodies generades pel folk-rnn, va donar fe dels beneficis d'errors interessants. 'Hi havia un rodet que em va intrigar', diu. 'La melodia va seguir oscil·lant entre major i menor, d'una manera una mica aleatòria. Estilísticament, era incorrecte, però era peculiar, una cosa que no hauria pensat en mi mateix”.

Pachet de Spotify explica que aquests girs inesperats poden ajudar a millorar la qualitat de la música pop. 'Preneu les 30 o 50 cançons més populars de YouTube. Si mireu la melodia, l'harmonia, el ritme i l'estructura, són extremadament convencionals, la qual cosa és força depriment. Només tens tres o quatre acords, i sempre són els mateixos. La IA creativa és molt interessant, no només perquè és divertida, sinó també perquè aporta esperança. Espero que puguem canviar o afectar la qualitat de les cançons més populars d'avui.'

No hi ha respostes correctes

'El que fa que l'art sigui meravellós per a la humanitat és que no hi ha una resposta correcta; és completament subjectiu', diu Drew Silverstein, CEO i cofundador de Amb prou feines Música , una startup d'IA amb seu a Nova York. 'Tu i jo podríem escoltar exactament la mateixa peça de música, i potser t'agradi, i jo potser l'odi, i cap de nosaltres tenim raó o equivocat. Simplement és diferent.

Revisió de l'hp elitebook 840 g4

'El repte en el món modern és construir una IA que sigui capaç de reflectir aquesta subjectivitat', afegeix. 'Curiosament, de vegades, les xarxes neuronals i els enfocaments purament basats en dades no són la resposta correcta'.

Oded Ben-Tal, professor sènior de tecnologia musical a la Universitat de Kingston i investigador de folk-rnn, assenyala un altre repte al qual s'enfronta l'IA pel que fa a la creació de música: les dades no ho representen tot.

'En certa manera, es pot dir que la música és informació. Escoltem molta música i, com a compositor, m'inspiro amb el que escolto per fer música nova', diu Ben-Tal. 'Però la traducció a dades és un gran obstacle i un gran problema en aquesta analogia. Perquè cap dada en realitat capta tota la música.'

Per dir-ho simplement, la interpretació i comprensió de la música i les arts d'un algorisme d'IA és molt diferent de la dels humans.

'En el cas del nostre sistema, és massa fàcil caure en el parany de dir que s'està aprenent l'estil o que s'està aprenent aspectes de la música irlandesa, quan en realitat no ho està fent', diu Sturm. “És aprendre representacions molt abstractes d'aquest tipus de música. I aquestes representacions abstractes tenen molt poc a veure amb com s'experimenta la música, com un compositor les uneix en el context d'aquesta música dins de la tradició.

'Els humans són necessaris en la recerca perquè, al cap i a la fi, hem de prendre decisions sobre si incorporem certes coses produïdes per l'ordinador que gestionem a partir d'aquesta sortida i crear nova música', diu Sturm.

DeepDream de Google

En les arts visuals, la divisió entre la percepció dels humans i les màquines és encara més accentuada. Per exemple, preneu DeepDream, una versió de l'interior de l'algoritme de classificació d'imatges supereficient de Google. Quan li doneu una foto, busca patrons coneguts i modifica la imatge perquè s'assembla més a les coses que ha identificat. Això pot ser útil per convertir esbossos aproximats en dibuixos més millorats, però produeix resultats inesperats quan es deixa a les seves pròpies mans. Si proporciones a DeepDream una imatge de la teva cara i troba un patró que s'assembla a un gos, convertirà una part de la teva cara en un gos.

'És gairebé com si la xarxa neuronal estigués al·lucinant', va dir un artista que va fer una internada al laboratori d'IA DeepMind de Google sobre el programari en una entrevista amb Amb cable l'any passat. 'Ve gossos per tot arreu!'

Però l'art generat per IA sovint sembla impressionant i pot acumular milers de dòlars a les subhastes. En una mostra d'art de San Francisco celebrada l'any passat, les pintures creades amb l'ajuda de DeepDream de Google es van vendre per fins a 8.000 dòlars.

què veure a lsd

El negoci de la IA creativa

Tot i que els investigadors i científics continuen explorant la IA creativa, un bon grapat de startups ja s'han traslladat a l'espai i ofereixen productes que resolen casos d'ús empresarial específics. Un és Amper Music de Silverstein, que descriu com un 'compositor, productor, intèrpret que crea música professional única adaptada a qualsevol contingut en qüestió de segons'.

Per crear música amb Amper, especifiqueu l'estat d'ànim, la durada i el gènere desitjats. La IA produeix una composició bàsica en pocs segons que podeu ajustar i ajustar. Amper també ofereix una interfície de programació d'aplicacions (API), perquè els desenvolupadors puguin incorporar el poder creatiu de la plataforma al seu programari.

Jukedeck , una startup amb seu a Londres creada per dos antics estudiants de la Universitat de Cambridge, ofereix un servei similar. Igual que Amper, els usuaris proporcionen al Jukedeck els paràmetres bàsics i els proporciona una pista musical original.

Els principals clients d'ambdues empreses són empreses que requereixen 'música funcional', el tipus que s'utilitza en anuncis, videojocs, presentacions i vídeos de YouTube. Jukedeck ha creat més de 500.000 cançons per a clients, com ara Coca-Cola, Google i el Museu d'Història Natural de Londres. Els compositors també estan aprenent a utilitzar les eines per millorar la música que creen per als seus clients.

Una tercera startup, amb seu a Austràlia Popgun , està construint un músic d'IA que pugui tocar música amb humans. Anomenada Alice, l'IA escolta el que jugues i després respon a l'instant amb una creació única que s'adapta al que has jugat.

A la indústria de les arts visuals, els casos d'ús empresarial estan sorgint gradualment. L'any passat, Adobe va presentar Sensei , una plataforma d'IA destinada a millorar la creativitat humana. Sensei ajuda els artistes de diverses maneres, com ara eliminar automàticament el fons de les fotos o trobar imatges d'arxiu basades en el context d'un pòster o esbós.

Col·laboració entre IA i artistes humans

Potser no és sorprenent que aquestes startups estiguin fundades i gestionades per persones amb una sòlida formació com a artistes. Silverstein d'Amper va estudiar composició musical i teoria a la Universitat de Vanderbilt i va compondre música per a televisió, pel·lícules i videojocs. Ed Newton-Rex, fundador i CEO de Jukedeck, també és un compositor de música amb experiència.

Però no tothom està convençut del paper positiu de la intel·ligència artificial en les arts. Alguns dels assistents a l'esdeveniment de folk_rnn van descriure les peces generades per IA com a mancades d''esperit, emoció i passió'. Altres es van mostrar preocupats per 'l'impacte cultural i la pèrdua de la bellesa humana i la comprensió de la música'.

'No he conegut cap músic al qual hagi parlat d'això que no hagi reaccionat amb alguna cosa semblant al costat negatiu de les coses', va dir Úna Monaghan, compositora i investigadora implicada en folk-rnn que va parlar amb Invers . 'La seva reacció ha estat des d'una mica negativa fins a un 'per què fas això?'

Els desenvolupadors d'algoritmes creatius d'IA generalment no comparteixen aquestes preocupacions. 'No crec que els humans es tornin redundants en la creació de música', diu Newton-Rex. “Per començar, com a oients ens preocupem molt més que la música que escoltem; ens importa l'artista i la seva història. Sempre serà així”.

Prediccions d'automatització i IoT

'Pensem en la música funcional com una música que es valora pel seu cas d'ús i no per la creativitat o la col·laboració que es va fer per fer-la', diu Silverstein. Però la música artística, explica Silverstein, 'és molt més sobre el procés que el cas d'ús. Steven Spielberg i John Williams escrivint la partitura de Star Wars, això és sobre una col·laboració humana.'

Monitor de jocs Dell de 24 polzades

'Els casos d'ús clau que veiem es troben en col·laboració amb músics', diu Jack Nolan, cofundador de Popgun. 'Els artistes poden utilitzar Alice com a font d'inspiració creativa o per ajudar-los a crear melodies i progressions d'acords a la seva música. No creiem que la gent mai deixarà de voler crear els seus propis sons. Creiem que la IA els ajudarà a fer-ho, en lloc de substituir-los'.

Daren Banarsë està d'acord en els beneficis de la col·laboració. “Sempre em sembla descoratjador quan he de començar una composició a gran escala. Potser li podria donar alguns paràmetres a l'ordinador: el nombre de jugadors, l'estat d'ànim, fins i tot els noms d'alguns dels meus compositors preferits, i podria generar-me una estructura bàsica', diu. 'No m'esperaria que funcionés fora de la caixa, però seria un punt de partida. O podria emetre una selecció d'idees melòdiques o progressions d'acords perquè les mirés. I en algun lloc, hi haurà un problema informàtic o una peculiaritat aleatòria, que em podria portar en una direcció completament inesperada.

Ben-Tal admet que alguns llocs de treball es podrien veure afectats. 'Els músics que treballen s'hauran d'adaptar', diu. 'Ensenyo això als meus estudiants i dic: 'Heu de millorar el vostre joc'. Això significarà que alguns dels llocs de treball de nivell inicial a la indústria de la música no hi seran d'aquí a cinc o deu anys, o haureu de fer les coses d'una manera diferent o tenir un conjunt d'habilitats diferent.

'Democratització de la creativitat'

La creativitat de la IA també pot ajudar les persones sense talent inherent o habilitats guanyades amb esforç a expressar-se artísticament. Agafeu la plataforma de dibuix d'IA de Vincent, que ajuda a transformar esbossos aproximats en pintures d'aspecte professional, i les plataformes de música d'IA que creen música decent amb una entrada mínima.

El Newton-Rex de Jukedeck ho descriu com una creativitat 'democratitzadora'. 'Les persones amb una educació musical menys formal poden familiaritzar-se amb els conceptes bàsics de la música i utilitzar la IA per ajudar-los a fer música', diu.

Pachet coincideix. Fa una analogia entre els desenvolupaments recents de la IA i l'arribada dels primers sintetitzadors digitals als anys 80, seguits dels samplers digitals. En aquell moment, hi havia una por semblant que els músics perdessin la feina a causa dels ordinadors. 'Però el que va passar va ser exactament el contrari, en el sentit que tothom es va endur aquestes màquines i maquinari nous i va aprendre a utilitzar-los de manera productiva', diu. 'La indústria musical va explotar en cert sentit'.

'Hi haurà més gent fent música i, amb sort, música més interessant', afegeix, reflexionant sobre la creativitat de l'IA. 'No puc predir el futur, però no em preocupa que l'IA substitueixi els artistes. Em preocupa totes les altres coses, els problemes ben definits, com l'assistència sanitària automatitzada i els vehicles autònoms. Aquestes coses realment destruiran llocs de treball. Però pel que fa als dominis creatius, no crec que passi'.

Recomanat