Disse umulige instrumentene kan endre musikkens fremtid

Daniel Zender

Da Gadi Sassoon møtte Michele Ducceschi backstage på en rockekonsert i Milano i 2016, var han ennå ikke i tankene om å lage musikk med milelange trompeter blåst av drageild, eller gitarer klimpret av nåletynne romvesen-fingre. På den tiden ble Sassoon rett og slett imponert over hverdagslydene til de klassiske instrumentene som Ducceschi og kollegene hans gjenskapte.

Da jeg først hørte det, kunne jeg ikke tro realismen. Jeg kunne ikke tro at disse lydene ble laget av en datamaskin, sier Sassoon, en musiker og komponist basert i Italia. Dette var helt banebrytende ting på neste nivå.

Denne historien var en del av november 2021-utgaven vår

• Se resten av saken
• Abonnere

Det Sassoon hadde hørt var de tidlige resultatene av et nysgjerrig prosjekt ved University of Edinburgh i Skottland, hvor Ducceschi var forsker på den tiden. De Neste generasjons lydsyntese , eller NESS, hadde teamet samlet matematikere, fysikere og datavitere for å produsere den mest naturtro digitale musikken som noen gang er laget, ved å kjøre hyperrealistiske simuleringer av trompeter, gitarer, fioliner og mer på en superdatamaskin.

Sassoon, som jobber med både orkestermusikk og digital musikk, prøver å knuse de to sammen, ble hekta. Han ble fast komponist hos NESS, og reiste frem og tilbake mellom Milano og Edinburgh de neste årene.

Det var en bratt læringskurve. Jeg vil si at det første året gikk med til å bare lære. De var veldig tålmodige med meg, sier Sassoon. Men det lønnet seg. På slutten av 2020 ga Sassoon ut Multivers , et album laget ved hjelp av lyder han kom opp med under mange lange netter som hacket seg bort i universitetslaboratoriet.

En ulempe er at færre vil lære å spille fysiske instrumenter. På den annen side kan datamaskiner begynne å høres mer ut som ekte musikere – eller noe helt annet.

Datamaskiner har laget musikk like lenge som det har vært datamaskiner. Det går før grafikk, sier Stefan Bilbao, hovedforsker på NESS-prosjektet. Så det var egentlig den første typen kunstnerisk aktivitet som skjedde med en datamaskin.

Men for velstemte ører som Sassoons, har det alltid vært en kløft mellom lyder generert av en datamaskin og de som er laget av akustiske instrumenter i det fysiske rommet. En måte å bygge bro over dette gapet er å gjenskape fysikken, simulere vibrasjonene produsert av ekte materialer.

NESS-teamet tok ikke prøve av noen faktiske instrumenter. I stedet utviklet de programvare som simulerte de nøyaktige fysiske egenskapene til virtuelle instrumenter, sporing av ting som skiftende lufttrykk i en trompet når luften beveger seg gjennom rør med forskjellige diametre og lengder, den nøyaktige bevegelsen av plukkede gitarstrenger, eller friksjonen til en bue. på en fiolin. De simulerte til og med lufttrykket inne i det virtuelle rommet der de virtuelle instrumentene ble spilt, ned til kvadratcentimeter.

Å takle problemet på denne måten lar dem fange opp nyanser som andre tilnærminger savner. For eksempel kunne de gjenskape lyden av messinginstrumenter som spilles med ventilene holdt nede bare en del av veien, som er en teknikk jazzmusikere bruker for å få en spesiell lyd. Du får et stort utvalg av rare ting som kommer ut som ellers ville vært ganske umulig å spikre, sier Bilbao.

Sassoon var en av 10 musikere som ble invitert til å prøve det NESS-teamet bygde. Det tok ikke lang tid før de begynte å fikle med koden for å strekke grensene for hva som var mulig: trompeter som krevde flere hender for å spille, trommesett med 300 sammenkoblede deler.

Relatert historie

Hvordan teknologi hjalp arkeologer med å grave dypere

Digitale verktøy kan hjelpe oss å forstå eldgamle byer og menneskene som bodde i dem.

Først ble NESS-teamet overrasket, sier Sassoon. De hadde brukt år på å lage de mest realistiske virtuelle instrumentene noensinne, og disse musikerne brukte dem ikke engang riktig. Resultatene hørtes ofte forferdelige ut, sier Bilbao.

Sassoon hadde det like mye moro som noen andre, og kodet opp en milelang trompet der han tvang enorme mengder luft oppvarmet til 1000 °K – a.k.a. dragebrann. Han brukte dette instrumentet på Multivers , men Sassoon ble snart mer interessert i mer subtile umuligheter.

Ved å justere variabler i simuleringen var han i stand til å endre de fysiske reglene for energitap, og skape forhold som ikke eksisterer i universet vårt. Han spilte gitar i denne fremmede verdenen, og så vidt rørte gripebrettet med nålespiss fingre, kunne få strengene til å vibrere uten å miste energi. Du får disse harmonikkene som bare bruser for alltid, sier han.

Programvaren utviklet av NESS fortsetter å forbedre seg. Algoritmene deres har økt ved hjelp av universitetets parallelle datasenter, som driver Storbritannias superdatamaskin Archer. Og Ducceschi, Bilbao og andre har spunnet ut en oppstart kalt Fysisk lyd , som selger plug-ins som kan kjøres på bærbare datamaskiner.

Sassoon tror denne nye generasjonen digital lyd vil endre fremtiden til musikk. En ulempe er at færre vil lære å spille fysiske instrumenter, sier han. På den annen side kan datamaskiner begynne å høres mer ut som ekte musikere – eller noe helt annet. Og det er styrkende, sier han. Det åpner for nye typer kreativitet.

gjemme seg