GIF
Shimon—een vier-armige marimba spelen van robot—is er al jaren, maar de ontwikkelaars aan de Georgia Tech hebben onlangs deze futuristische muzikale machine naar het volgende niveau. Met behulp van diep leren, de robot kan nu studeren grote datasets van bekende muzikanten en vervolgens het produceren van en het uitvoeren van haar eigen composities.
Shimon is oorspronkelijk ontwikkeld door Gil Weinberg, directeur van Georgia Tech Center voor Muziek-Technologie. Onder haar oorspronkelijke programmering, de robot was in staat om te improviseren, muziek gespeeld, naast de menselijke performers, met behulp van een “interestingness” algoritme om ervoor te zorgen het was niet alleen het kopiëren van zijn bandleden. Maar nu, dankzij de inspanningen van Ph. D. student Mason Bretan, Shimon is uitgegroeid tot een volleerd componist, die in staat van het zelfstandig genereren van de melodische en harmonische structuur van een song. En weet je wat? Shimon ‘ s songs zijn eigenlijk heel goed!
Om de beurt Shimon in een autonome muziek-maak-machine, de onderzoekers draaide zich om naar kunstmatige intelligentie. Met behulp van diep leren, de bot studeerde een database van bijna 5.000 pre-bestaande liedjes, waaronder composities van Beethoven, de Beatles, Miles Davis, en Lady Gaga. De robot was ook toegang tot meer dan twee miljoen muzikale motieven, riffs en licks van muziek. Om kickstart een samenstelling, Bretan zou bieden Shimon het starten van een “zaad” van de muziek, die ook de eerste vier maatregelen. Vanaf daar was het een en al Shimon.
“Zodra Shimon leert de vier maatregelen die wij bieden, het creëert zijn eigen reeks van concepten en componeert zijn eigen stuk,” zei Bretan in een persbericht. “Shimon’ s composities geven hoe de muziek klinkt en eruit ziet als een robot maakt gebruik van diepe neurale netwerken om te leren alles wat hij weet over de muziek van miljoenen menselijke-en-klare segmenten.”
De onderzoekers zeggen dat het de eerste keer dat een robot heeft gebruikt diep leren om muziek te maken. U kunt luisteren naar Shimon de eerste twee composities, die ongeveer 30 seconden in de lengte, recht hier:
Eerder, Shimon was alleen in staat om te spelen van het gedeelte monofoon (één noot tegelijk), maar nu kan spelen harmonieën en akkoorden—en het is het begin tot het componeren meer als een mens. In plaats van alleen te focussen op de volgende opmerking, Shimon is nu het nemen van een holistisch beeld van de samenstelling, het bedenken van zinvolle maatregelen en hogere muzikale semantiek.
“Dit is een sprong in Shimon’ s muzikale kwaliteit omdat het gebruik van diep leren maken van een meer gestructureerde en coherente compositie,” zei Weinberg. “We willen onderzoeken of robots kunnen worden muzikaal creatieve en het genereren van nieuwe muziek die wij mensen kunnen vinden van mooie, inspirerende en vreemd.”
Luisteren naar de composities, het is duidelijk dat Shimon is een goede student, geïnspireerd door de uitgebreide database het is gegeven. “[Stuks] klinkt als een mix van jazz en klassiek,” zei Bretan. “Ik heb zeker meer horen in de klassieke, vooral in de harmonie. Maar dan hoor ik chromatische bewegende stappen in het eerste stuk, dat is zeker iets wat je hoort in de jazz.”
Ik moet zeggen, dit is vrij netjes. De bot is het produceren van zinvolle, originele muziek grotendeels zonder menselijke tussenkomst. Het is ook een zeer innovatieve manier van het creëren van nieuwe composities (de jongens van Kraftwerk zou dit zeker houden). Maar op uit zijn om de voor de hand liggende, deze machine is nog lichtjaren verwijderd van het produceren van muziek dat voelt echt menselijk. Simpel gezegd, Shimon ‘ s muziek mist een beetje soul.
[Georgia Tech]