Scratch-to-Speech (Turntablism) - AI - Matthieu Crimersmois

2023

Matthieu Crimersmois

Turntablism - AI

Video art

Parlons Scratch #2 - Intelligence Artificielle - Matthieu Crimersmois

 

Mars 2023

Turntablism et Intelligence Artificielle : étude sur la musique scratch et sur sa capacité à être représentée en parole.

///////////////////////////////////////////////////////////////////////////

Turntablism and Artificial Intelligence: Study on scratch music and its ability to be represented in speech.

Parlons Scratch #1 - Let's Talk Scratch #1 - By Matthieu Crimersmois

 

website : mattcrime.com crimersmois.blospot.com Bonjour à tous, aujourd'hui je vous présente une vidéo vraiment passionnante où l'on explore les possibilités de l'intelligence artificielle dans l'art et la musique. Dans cette vidéo, je vais vous montrer comment j'ai utilisé l'IA pour faire parler une image générée elle-même par l'intelligence artificielle. Vous vous demandez peut-être comment cela est possible ? Eh bien, grâce aux avancées technologiques récentes, nous avons maintenant la possibilité de créer des images à partir de rien, en utilisant des algorithmes d'IA. Et ce n'est pas tout, nous pouvons également utiliser l'IA pour leur donner une voix. Dans cette vidéo, je vais vous montrer comment j'ai utilisé ces outils pour créer une expérience visuelle et auditive unique. Tout d'abord, j'ai créé une image à partir de zéro à l'aide de l'IA. Ensuite, j'ai utilisé un autre algorithme d'IA pour lui donner une voix. Mais ça ne s'arrête pas là. Pour ajouter encore plus de couches à cette expérience, j'ai également intégré des éléments de sémiotique et de langage. Et pour couronner le tout, j'ai ajouté des scratches réels aux platines, ce qui crée une fusion unique entre l'art numérique et la musique. Cette vidéo est la première de son genre à inclure des éléments aussi variés, et je suis vraiment fier du résultat final. Je pense que cela montre vraiment les possibilités infinies de l'IA dans l'art et la création de contenu. Alors, si vous êtes intéressé par l'art numérique, la musique et l'IA, ne manquez pas cette vidéo unique en son genre. Je suis sûr que vous allez être captivé par ce que vous allez voir et entendre. Merci de m'avoir regardé, et à bientôt ! Ce texte lui-même est généré par une IA. /////// Hello everyone, today I present to you a truly exciting video where we explore the possibilities of artificial intelligence in art and music. In this video, I will show you how I used AI to make an image generated by artificial intelligence speak for itself. You may be wondering how this is possible? Well, thanks to recent technological advances, we now have the ability to create images from scratch using AI algorithms. And that's not all, we can also use AI to give them a voice. In this video, I will show you how I used these tools to create a unique visual and auditory experience. First, I created an image from scratch using AI. Then, I used another AI algorithm to give it a voice. But it doesn't stop there. To add even more layers to this experience, I also integrated elements of semiotics and language. And to top it all off, I added real scratches to the turntables, creating a unique fusion of digital art and music. This video is the first of its kind to include such diverse elements, and I'm really proud of the final result. I think it really showcases the infinite possibilities of AI in art and content creation. So, if you're interested in digital art, music, and AI, don't miss out on this one-of-a-kind video. I'm sure you'll be captivated by what you see and hear. Thank you for watching, and see you soon!

Amélie Poulain - Comptine d'un autre été - intelligence artificielle Par Matthieu Crimersmois

 

L'étude présentée par l'artiste Matthieu Crimersmois en mars 2023 s'intéresse à la capacité de l'intelligence artificielle à proposer une autre représentation de la musique. Plus spécifiquement, cette étude explore l'utilisation de l'outil d'IA "Text-to-audio/video" pour animer un avatar dont la bouche se meut en fonction du son de la musique. Bien que cette méthode puisse présenter des limitations pour représenter des notes de musique qui s'ajoutent les unes aux autres, l'analyse de la bouche de l'avatar permet tout de même de lire clairement les notes aiguës et bien rondes. Cette étude pourrait être approfondie en explorant d'autres outils d'IA, tels que l'apprentissage automatique, pour améliorer la précision de la représentation des notes de musique et proposer des animations plus réalistes de l'avatar.

Le Phonoptique - Extrait

 

Il y a une histoire fascinante et improbable autour de l'objet vinyle, de sa beauté et de ses caractéristiques techniques, de la mécanique des platines et de leur mouvement cyclique, ainsi que de l'analogique et de la numérisation du set de DJ.

La multimodalité est présente à tous les niveaux : en programmation, en concert, en performance visuelle ou sonore. On retrouve des turntablism en galerie, en musée, sur des scènes alternatives ou lors de concerts. Le Turntablism est le seul à pouvoir passer d'un média à l'autre, à rester dans le rétro ou à incorporer n'importe quelle nouvelle technologie. Pour moi, la poétique se trouve dans : Le son du scratch (lorsqu'on ne le considère pas simplement comme une ornementation ou une transition) est assimilable à un son de voix qui chante sur une rythmique. La gestuelle du DJ ressemble particulièrement au mouvement robotique, industriel, des robots. //////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////// There is a fascinating and improbable story surrounding the vinyl object, its beauty, and its technical characteristics, the mechanics of turntables and their cyclical movements, as well as the analog and digital conversion of DJ sets. Multimodality is present at all levels: in programming, in concerts, in visual or sound performances. Turntablism can be found in galleries, museums, alternative scenes, or during concerts. Turntablism is the only one that can jump from one medium to another, to stay in the retro or to incorporate any new technology. For me, the poetic lies in: The sound of the scratch (when it's not simply considered as an ornamentation or a transition) is comparable to a voice singing on a rhythm. The DJ's gestures particularly resemble the robotic, even industrial, movements of robots.