Plongez dans la magie du machine learning avec cette simulation casual qui transforme plus de 44 000 échantillons audio Freesound en un nuage sonore 3D navigable. Les joueurs explorent les embeddings t-SNE du dataset, sélectionnent des clips marquants et les rejouent pour créer des instruments personnalisés, comme un piano à partir de notes synthétiques ou un marimba issu de pops et de crépitements.
Des mécaniques simples libèrent une créativité infinie : déplacez-vous sur l'immense carte 3D, choisissez des sons à conserver et déclenchez leur lecture pour des moments rythmiques fun. Cette expérience indie dévoile la maîtrise de l'ordinateur sur les données sonores, idéale pour les explorateurs qui préfèrent la découverte à la construction. Les passionnés d'audio et les bricoleurs occasionnels y trouvent un terrain de jeu fascinant grâce à son échelle colossale et sa diversité sonore.
Feel the magic of Machine Learning in this new experiment that combines over 44,000 sounds from Freesound, a data set created by Kyle McDonald and a touch of Cabbibo weirdness.
Run your hands through a cloud of sound, learn the shape of the computers mind, select your favorite audio delicacies and make a drum set from this decadent aural smorgasbord.
The mechanics may be simple ( navigate through a 3D map of sounds , select individual sounds to keep, and hit those sounds again to play them ), but because of absolutely massive size of the data set, the possibilities are endless!
Want to create your own piano out of synth notes? Go ahead!
How about a marimba of pops and crackles? Be my guest!
And if you are just the exploring type, the data is beautiful enough to begin with! There is no need to make an instrument, or play it, because in from of you lies a tool for discovering and understanding a beautiful algorithm, and even more beautiful data: Sound
This project would not be possible without the amazing community of FreeSound.org
As well as Kyle McDonald, who scraped audio from freesound.org & made t-SNE embeddings of the data!
Created during Unity Artist in Residency 2017
