Les IA : qui sont-elles ? Quels sont leurs réseaux ?

[Macbesse]

Mais en concert ça doit être moins bien que de vrais humains

Méfie toi, on aura sûrement des robots imitant les mouvements dans pas si longtemps...

[Archiduc Fifi]

Udio est une site extrêmement intéressant. Sur ENWORLD j'ai vu passer des gens qui produisaient des OST complètes pour leurs parties uniquement à partir de Udio.
Comme d'habitude avec les IA, les meilleurs résultats sont obtenus quand on passe beaucoup de temps à travailler les prompts et, ici, les paroles.

Le logiciel n'en parle pas explicitement, mais il est possible de renseigner de nombreux paramètres, par exemple le forcer à intégrer un solo de saxophone en mettant quelque chose du style [solo sax] dans les paroles.

Perso j'attend que des IA équivalentes soient développées en open source pour fonctionner ne local, car ça me gêne toujours de devoir payer un abonnement pour ça.

[Zachary Zeydh]

Elles sont bien tes paroles !

Ah ah merci 
De toute façon, si ça parle de Cthulhu, c'est forcément bien... sinon c'est du blasphème 

Les deux s'écoutent, mais restent très convenus par contre.

Je trouve ça personnellement assez rafraîchissant comparé à la soupe hyper calibrée qu'on nous sert partout depuis quelques années.
J'étais même surpris de certains arrangements que me proposait l'IA comparé à la musique que j'imaginais par avance dans ma tête.
C'est peut être aussi "convenu" à cause des choix que j'ai fait et des prompts que j'ai saisis  Pour un premier test, je trouve quand même ça concluant.

Comme certains musiciens/chanteurs... mais beaucoup moins que ce que nous pourrions faire, simples quidam.

Oui, j'ai vraiment la satisfaction et l'impression d'avoir composé "ma" chanson. Un nouveau moyen d'expression dont je n'aurais jamais imaginé disposer un jour dans la musique... à moins de tout plaquer, passer 30 ans à maîtriser tous les instruments d'un groupe de métal (ou d'un autre genre musical), écrire les partitions adéquates, acquérir le matériel de sono, enregistrer, remixer, etc. 

Beaucoup moins convenu que beaucoup de choses qui passent à la radio...

...qui sont calibrées via des recettes marketing et des algos pour "plaire" au maximum de gens. Un bon exemple c'est "I Ain’t Worried" de OneRepublic, avec ses six notes sifflées qui rentrent dans la tête, sa ligne de basse et sa caisse claire "posey". Des tricks repris dans un certain nombre d'autres hits.

Mais en concert ça doit être moins bien que de vrais humains

Ça dépend du prix de la place de concert j'imagine 
 

[Zachary Zeydh]

Udio est une site extrêmement intéressant. Sur ENWORLD j'ai vu passer des gens qui produisaient des OST complètes pour leurs parties uniquement à partir de Udio.

Tu aurais un lien à partager ? 

Comme d'habitude avec les IA, les meilleurs résultats sont obtenus quand on passe beaucoup de temps à travailler les prompts et, ici, les paroles.

C'est vrai. Si les paroles sont mal écrites (mauvaise rythmique des mots, sonorités peu homogènes, etc.), ça ne rend pas bien. Le résultat de l'IA ne dépassera pas la qualité de ce qu'on lui fournit...
 

[Macbesse]

Je trouve ça personnellement assez rafraîchissant comparé à la soupe hyper calibrée qu'on nous sert partout depuis quelques années. [...]
...qui sont calibrées via des recettes marketing et des algos pour "plaire" au maximum de gens. Un bon exemple c'est "I Ain’t Worried" de OneRepublic, avec ses six notes sifflées qui rentrent dans la tête, sa ligne de basse et sa caisse claire "posey". Des tricks repris dans un certain nombre d'autres hits.

C'est hélas tout à fait vrai, et c'est la raison pour laquelle les productions IA (quel que soit le domaine) ne détonnent pas dans le paysage. On pourrait avoir la même remarque dans le digital painting, qui est hyper normé.

[Altay]

Rappelons toutefois que comme pour les générateurs d'image, la bataille juridique concernant les droits d'auteur ne fait probablement que commencer. Udio a été pris la main dans le sac à produire des échantillons très proches de chansons connues.

[Archiduc Fifi]

Une des limitations serait (d'après l'auteur de la vidéo) le fait que ces moteurs d'IA se basent sur des fichiers "à plat" (où tous les instruments sont mélangés sur une piste finale) et non pas en multi-pistes correctement tagguée

Un des problèmes de l'IA générative à mon sens est que nos algos se basent encore trop sur le signal. C'est assez flagrant pour la musique : la quasi-totalité des outils génère directement de l'audio (forme d'onde échantillonnée à 22kHz ou 44kHz)*. Donc aucune différenciation entre les instruments et la voix. Ça oblige de fait à ce que les modèles intègrent un synthétiseur vocal, pour différents timbres, et tout un tas de synthés d'instruments assez complexes. Résultat, c'est assez difficile à manipuler et à modifier. En plus, c'est compliqué d'avoir une cohérence globale à long terme de façon efficace, parce que les séquences à générer sont très longues si on produit toute la forme d'onde. En comparaison, un⋅e compositeur⋅ice manipule de la musique de façon symbolique avec un langage précis (la notation musicale) sur laquelle c'est l'interprète qui vient plaquer... ben une interprétation. Il y a quelques modèles qui produisent du MIDI, qui fait un peu l'intermédiaire entre le MP3 et la partition, mais c'est encore assez rudimentaire parce que les bases de données sont bien fournies**.

Mon rêve ce serait d'avoir deux générateurs : un générateur qui produit la partition, et un générateur qui est capable de me produire des audios correspondant à différentes interprétations de cette partition. Mais ça nécessite de faire de l'IA capable de manipuler les symboles d'une partition musicale (et des grands corpus de partoches sur lesquels s'entraîner), ce qui est encore assez difficile. Cela dit, je pense que c'est la direction vers laquelle ça va aller à terme, produire du signal brut me semble vraiment être une impasse à long terme.

* on peut faire le même raisonnement avec l'image : on génère directement les matrices de pixels et pas les différents couches vectorielles séparément, alors que ça représenterait mieux le fonctionnement des artistes qui composent une image à partir de blocs abstraits dessinés avec une certaine interprétation.

** enfin, y a pas de base de données de MIDI à scraper en loucedé aussi massives que Youtube/Spotify/etc. et autres dumps de musique plus ou moins légaux.

Je viens d'apprendre l'existence de cette IA qui prétend pouvoir prendre un fichier audio constitué d'une seule piste, et le diviser en plusieurs pistes différentes (instruments, vocaux, etc. ...)
Je viens d'essayer sur des musiques générées par Udio, ça fonctionne mais j'imagine que la qualité ne sera pas très élevée pour un vrai amateur de musique (ce que je ne suis pas)
Evidemment, c'est payant et très cher.
https://www.lalal.ai/fr/
 

[Altay]

Je viens d'apprendre l'existence de cette IA qui prétend pouvoir prendre un fichier audio constitué d'une seule piste, et le diviser en plusieurs pistes différentes (instruments, vocaux, etc. ...)
Je viens d'essayer sur des musiques générées par Udio, ça fonctionne mais j'imagine que la qualité ne sera pas très élevée pour un vrai amateur de musique (ce que je ne suis pas)
Evidemment, c'est payant et très cher.
https://www.lalal.ai/fr/

C'est un problème qui s'appelle la séparation de sources, c'est étudié des depuis des dizaines d'années. Il y a quelques années, Deezer avait publié un outil en open-source pour faire ça. C'est pas complètement mauvais, ça suffit pour produire une version "karaoké" d'une chanson par exemple, mais c'est très loin de ce qui est attendu pour du mastering audio.

[cdang]

Laura Sibony, ancienne Lab Coordinator à Google Arts & Culture, autrice de Fantasia, Contes et légendes de l'intelligence artificielle, était l'invitée de Jusqu'ici tout va bien sur Inter hier :

https://www.radiofrance.fr/franceinter/ ... 24-8041391

[ChicEmir]

Je me suis amusé à faire ces chansons avec Udio, qui produit aussi des "clips" en mp4 :
https://www.youtube.com/watch?v=4oVi-1oh1n4&list=PLORUyr4SoQSpXEEkhfWYH_ui9wCjjDKGy

Cela m'a permis de bien tester l'utilisation de cette IA, qui reste encore un peu frustrante car les rendus ont régulièrement de petits défauts.

[Macbesse]

Laura Sibony, ancienne Lab Coordinator à Google Arts & Culture, autrice de Fantasia, Contes et légendes de l'intelligence artificielle, était l'invitée de Jusqu'ici tout va bien sur Inter hier :

https://www.radiofrance.fr/franceinter/ ... 24-8041391

J'aime bien sa conclusion sur les choix à faire quant au travail dont on va se passer.
Je trouve ça par exemple très dommage de se passer de la partie fun du travail créatif.

[Rui]

Une série est lancée avec l'intégralité du doublage assumé par une IA

"Nous y sommes. Aujourd’hui la saison deux d’un dessin animé My Little poney est sortie. Le doublage est fait par une IA et outre le fait que ce soit nul (pour l’instant) je vois que ça ne fait AUCUN bruit. Le doublage est initialement fait en Belgique"
https://x.com/LilianAzemonPro/status/17 ... 1497683213

Update : il y a aussi des pubs qui arrivent =>
https://x.com/BastienDruker/status/1795825995544715708

[Qui Revient de Loin]

Une série est lancée avec l'intégralité du doublage assumé par une IA

"Nous y sommes. Aujourd’hui la saison deux d’un dessin animé My Little poney est sortie. Le doublage est fait par une IA et outre le fait que ce soit nul (pour l’instant) je vois que ça ne fait AUCUN bruit. Le doublage est initialement fait en Belgique"
https://x.com/LilianAzemonPro/status/17 ... 1497683213

Des doublages sans bruits ?!?

Plus sérieusement, j'ai vu passé sur FB une pétition pour obliger que le doublage en français soit exclusivement fait à la bouche, avec des bouches française qui ont appris la langue depuis la naissance. De la langue de terroir en somme, en tout cas l'argumentaire m'a fait furieusement penser à tous ces petits métiers que défendait Perneau.

Mais, bon, pour les films et séries coréennes, on avait surtout des teams de subtitles anglophones, puis y a eu netflix (en anglais surtout). Du coup, je me pose la question de cet argumentaire quand il n'y a pas de locuteur du terroir maitrisant la langue d'outre-frontières.

(Et suis-je surpris de voir Hasbro s'engouffrer là-dedans ?)

[Gridal]

une pétition pour obliger que le doublage en français soit exclusivement fait à la bouche

[Killing Joke]

Que vont dire ceu.i.ell.e.x.s qui exigeaient qu'un personnage d'une origine quelconque soit uniquement et obligatoirement doublé par un acteur de la même origine (dans "les Simpson", etc.).