Questa incredibile GANsynth demo su google colab mostra la generazione dinamica di sample con l'uso del machine learning ed il loro utilizzo nell'esecuzione di un brano MIDI.
Il modello GANsynth viene generato con un training di 3, 4 giorni con una singola scheda TESLA V100 elaborando il NSYNTH dataset, un archivio disponibile che contiene 69 GB di sample sonori di alta qualità.
Una volta imparato, il modello è in grado di eseguire un brano qualsiasi in tempo reale, generando al contempo i sample sonori necessari, il tutto direttamente operabile via browser.
Oltre ad essere piuttosto stupefacente, per la profondità e l'efficacia della simulazione e la facilità di utilizzo, la cosa davvero sbalorditiva è la rapidità con la quale questi modelli di intelligenza artificiale migliorino di mese in mese, soppiantando potenzialmente intere filiere di software.
Unendo i puntini non è difficile intravvedere l'avvento della più grande rivoluzione della storia umana.
Pipe:
1) si parte da un qualsiasi midi file (o da un sid convertito con sid2midi)
2) si carica l'ambiente GAN nel colab notebook e si generano e scelgono i sample
3) si ottiene un brano con timbri che derivano dai sample NSYNTH.
GANsynth
GANSynth: Adversarial Neural Audio Synthesis