Aller au contenu
Première fiche gratuite dans chaque formation Cours guidés, à votre rythme Contenus gratuits dès 8 ans Fait en France

Du texte aux notes, en jetons

Comment l'IA crée de la musique

Comprendre comment une IA fabrique une chanson entière à partir d'une simple description, sans baguette magique.

  • Durée11 min
  • NiveauIntermédiaire

À la fin, tu saisÀ la fin, tu saisÀ la fin, vous savez

expliquer que la machine coupe le son en perles et devine laquelle vient après pour fabriquer une chanson.

expliquer comment le son devient des jetons que le modèle prédit, comme un texto qui devine le mot suivant.

décrire la chaîne codec neuronal, prédiction de jetons, décodage, et la distinguer de l'approche par diffusion audio.

Profil de lecture

Une devinettePour commencerCas d'ouverture

Réfléchis une secondeEssaie de répondrePosez votre intuition

Tu demandes une chanson rigolote sur les dinosaures et la machine la chante. Elle joue d'un instrument, ou elle fait autre chose ?

Pense à ta réponse, même si tu n'es pas sûr. La suite te dira si tu avais vu juste.

Tu tapes « drill sombre, refrain accrocheur » et un son sort en 30 secondes. Quel rapport avec le clavier qui devine tes mots ?

Prends dix secondes pour répondre dans ta tête. Tu compareras avec la suite.

Suno génère une chanson chantée en quelques secondes. Est-ce le principe du LLM appliqué au son, ou une autre mécanique ?

Formulez d'abord votre réponse, même approximative : la comparer à la suite fixe bien mieux les acquis.

Une image pour comprendreL'image mentaleL'image mentale

Une image pour comprendreL'idée en une imageL'idée en une image

Une image pour retenir
C'est comme un collier de perles : l'IA enfile des perles de son une par une pour faire une chanson.
L'image à garder en tête
C'est comme le clavier prédictif de ton tel, mais au lieu de deviner le mot suivant, il devine le bout de son suivant.
L'image mentale
C'est un collier de perles sonores : l'IA enfile des jetons audio dans l'ordre, puis on relit le collier pour entendre le morceau.

Comment ça marcheComment ça marcheLa mécanique

Une étape à la foisLe mécanisme, étape par étapeLe mécanisme, étape par étape

Le son découpé en petits morceaux

  1. L'IA coupe le son en tout petits morceaux, comme des perles sonores.

  2. Elle a écouté des milliers de musiques pour deviner quelle perle vient après.

  3. Tu lui dis ce que tu veux et elle enfile les perles dans le bon ordre.

  4. Une autre machine rassemble les perles pour faire la vraie chanson.

Le son devient des jetons, comme le texte

  1. Un encodeur découpe le son en « jetons audio », des codes numériques.

  2. Tu donnes une description (style, ambiance) et parfois des paroles.

  3. Le modèle prédit la suite des jetons, comme un texto qui devine le mot suivant.

  4. Un décodeur reconstruit l'onde sonore pour que tu puisses l'écouter.

Codec neuronal + modèle séquentiel (ou diffusion)

  1. Un codec neuronal (EnCodec, SoundStream) compresse l'onde en jetons audio discrets.

  2. Une description textuelle et des paroles alignées servent de conditionnement.

  3. Un transformeur prédit la séquence de jetons, comme un LLM sur du texte.

  4. Un décodeur reconstruit le signal ; la diffusion audio offre une voie alternative (débruitage).

Des exemples pour toiDes exemples concretsExemples concrets

Tu l'as déjà croiséOù tu le retrouvesOù vous le retrouvez en situation

  • Tu demandes « une chanson rigolote sur les dinosaures » et elle te la chante.

  • Tu dis « une musique douce pour dormir » et elle fabrique un morceau calme.

  • L'âne IA s'y croit : « IA! IA! house ! » et il met un casque de DJ trop grand pour lui.

  • Tu tapes « drill sombre, refrain accrocheur » sur Suno et tu obtiens un son en 30 secondes.

  • Tu écris tes propres paroles et l'IA les chante dans le style que tu choisis.

  • Tu demandes les pistes séparées (stems) pour mettre ta voix par-dessus dans un montage.

  • Suno ou Udio génèrent une piste complète avec voix chantée en quelques secondes.

  • MusicGen (Meta) produit de l'instrumental conditionné par texte ou mélodie.

  • Stable Audio et Riffusion illustrent l'approche par diffusion sur spectrogramme.

Attention aux piègesÀ éviterÀ éviter

Ce qu'on croit, et ce qui est vraiIdées reçues et pièges à éviterIdées reçues et risques à anticiper

  • On croit que

    On croit que l'IA invente la musique dans sa tête comme un vrai musicien.

    En vrai

    En vrai, non. Elle devine les morceaux de son qui vont ensemble, comme un jeu de devinettes.

  • On croit que

    On croit qu'elle fabrique tout toute seule à partir de rien.

    En vrai

    En vrai, elle a d'abord écouté plein de musiques faites par des humains.

Les pièges à retenir

  • Sur une longue chanson, elle peut s'emmêler et faire n'importe quoi.
  • Elle ne ressent pas la musique, elle ne fait que deviner.
  • Elle utilise des chansons d'autres gens pour apprendre, et ça pose problème.
  • On croit que

    « La musique IA, c'est gratuit et sans danger pour les droits. »

    En réalité

    Non. Les modèles ont appris sur des chansons existantes : Suno et Udio sont poursuivis en justice depuis 2024.

  • On croit que

    « Imiter la voix de mon artiste préféré avec l'IA, c'est OK. »

    En réalité

    Risqué. Reproduire la voix de quelqu'un sans accord soulève de vraies questions de droits.

  • On croit que

    « Si ça sonne bien, c'est que l'IA a du goût. »

    En réalité

    Faux. Elle recombine ce qu'elle a entendu et ne ressent rien : le « goût », c'est ta sélection à toi.

Les pièges à retenir

  • Sur un morceau long, la structure (couplet, refrain) peut partir en vrille.
  • L'originalité est limitée : ça recycle des patterns déjà entendus.
  • Le réflexe critique : demande-toi sur quelles musiques le modèle a été entraîné, et qui en touche les droits.
  • Idée reçue

    « L'IA compose avec une intention artistique. »

    Réalité

    Non. Elle maximise la vraisemblance de la suite de jetons d'après son entraînement ; aucune intention ni ressenti.

  • Idée reçue

    « Pas de copie littérale, donc pas d'enjeu de droits. »

    Réalité

    Faux. L'entraînement sur catalogues existants est au cœur des procès RIAA vs Suno et Udio (2024).

  • Idée reçue

    « Cloner une voix d'artiste est un détail technique. »

    Réalité

    C'est un point juridique sensible : droits voisins, droit à la voix, déjà contestés en justice.

Points de vigilance

  • Cohérence longue durée fragile : dérive de structure et fins maladroites sur les morceaux étendus.
  • Originalité bornée par la distribution d'entraînement : recombinaison plutôt que création.
  • Zone grise juridique majeure : entraînement sur musique protégée et imitation de voix (RIAA vs Suno/Udio, 2024).

Ce que je retiensÀ retenirÀ retenir

L'essentiel, en quatre idéesL'essentiel, en quatre idéesL'essentiel, en quatre points

La phrase à garder

L'IA ne joue pas d'un instrument : elle devine les morceaux de son qui vont ensemble, à partir de ce qu'elle a entendu.

  1. Le son en perles L'IA coupe la musique en tout petits bouts.
  2. Elle devine la suite Quelle perle vient après quelle perle.
  3. Tu lui dis quoi faire Tu décris la chanson que tu veux.
  4. On rassemble À la fin, on relit toutes les perles pour entendre le son.

La phrase à garder

Générer de la musique, c'est découper le son en jetons puis prédire la suite : le même principe que le texte, version audio.

  1. Le son en jetons Un codec neuronal transforme l'audio en codes discrets.
  2. Prédire la suite Le modèle devine le jeton suivant, comme un clavier prédictif.
  3. La consigne guide Style, ambiance et paroles orientent la génération.
  4. On reconstruit l'onde Un décodeur retransforme les jetons en vrai son.

Message clé

La génération musicale applique au son la recette du texte : tokeniser via un codec neuronal, puis prédire la suite, ou débruiter en diffusion, sous conditionnement.

  1. Codec neuronal EnCodec/SoundStream transforment l'onde en jetons discrets.
  2. Prédiction séquentielle Un transformeur génère la suite des jetons audio.
  3. Conditionnement Texte et paroles orientent la séquence produite.
  4. Diffusion alternative Débruiter un spectrogramme/une onde au lieu de prédire des jetons.

Je m'entraîneJe valideÉvaluation

Je teste ce que j'ai comprisJe teste ce que j'ai comprisValidez vos acquis

Quiz noté

Valider : Comment l'IA crée de la musique

4 questions. Il faut 70 % de bonnes réponses pour maîtriser la fiche. Tu as le droit de te tromper et de réessayer.

  1. Comment une IA comme Suno génère-t-elle une chanson ?
  2. Vrai ou faux ? À propos de « Comment l'IA crée de la musique »La musique IA, c'est gratuit et sans danger pour les droits.
  3. Vrai ou faux ? À propos de « Comment l'IA crée de la musique »Sur un morceau long, la structure (couplet, refrain) peut partir en vrille.
  4. Vrai ou faux ? À propos de « Comment l'IA crée de la musique »Imiter la voix de mon artiste préféré avec l'IA, c'est OK.

Pour les curieuxPour aller plus loinPour aller plus loin

Si tu veux en savoir plusCreuser le sujetApprofondir et poursuivre

Sous le capot, pour les curieux

Les perles

Le son coupé en petites perles

Une chanson, c'est trop gros pour la machine d'un coup. Alors elle la coupe en tout petits bouts, comme des perles sonores sur un fil. Chaque perle, c'est un mini-morceau de son. La machine adore les perles parce que c'est plus facile de jouer avec des petits bouts qu'avec une grosse chanson entière.

La devinette

Deviner la perle suivante

La machine a écouté énormément de musiques. Du coup, elle est devenue super forte à un jeu : « quelle perle vient après celle-là ? ». C'est comme une comptine que tu connais par cœur : dès que j'en dis le début, tu devines la suite tout seul. L'IA fait pareil avec les perles de son.

Le chef d'orchestre

Tu lui dis ce que tu veux

Avant qu'elle enfile les perles, tu lui donnes la consigne : « une chanson joyeuse de pirates ». C'est toi le chef d'orchestre ! Elle va alors choisir des perles joyeuses de pirates, et pas des perles toutes tristes. Si tu changes la consigne, elle change les perles.

On recolle

Recoller les perles pour entendre

Une fois toutes les perles enfilées dans le bon ordre, une autre machine les recolle pour fabriquer le vrai son que tes oreilles entendent. L'âne IA, lui, met son casque de DJ et crie « IA! IA! house ! » en croyant qu'il a tout fait tout seul. En vrai, c'est juste plein de perles bien rangées.

Sous le capot

Codec neuronal

Le son transformé en jetons

Pour manipuler du son, un réseau appelé codec neuronal (comme EnCodec de Meta ou SoundStream de Google) compresse l'onde en une suite de codes numériques : les jetons audio. C'est exactement l'idée des tokens pour le texte, mais appliquée au son. Une fois le son devenu une liste de symboles, un modèle de langage peut le traiter comme une phrase.

Conditionnement

Ta consigne pilote la génération

Ta description (« trap mélancolique, voix auto-tune ») et tes paroles sont encodées et données au modèle comme guide. C'est ce qu'on appelle le conditionnement : le modèle ne génère pas des jetons au hasard, il génère ceux qui collent à ta consigne, un peu comme un prompt oriente une image générée.

Diffusion

L'autre méthode : nettoyer du bruit

Tout n'est pas fait avec des jetons. Une deuxième famille, la diffusion audio, part d'un bruit aléatoire (du grésillement) et le nettoie petit à petit jusqu'à obtenir un son net, guidée par ta description. Stable Audio et Riffusion marchent comme ça. Deux recettes différentes, le même objectif : du son à partir d'une consigne.

Droits et voix

Le vrai débat : à qui appartient le son ?

Ces modèles ont appris sur d'immenses catalogues de musique réelle. En 2024, l'industrie du disque (RIAA) a attaqué Suno et Udio en justice pour ça. Autre point chaud : cloner la voix d'un artiste sans son accord. Avant de publier un morceau IA, le réflexe malin est de te demander sur quoi le modèle s'est entraîné, et qui pourrait avoir des droits dessus.

Sous le capot : les briques techniques

Jetons audio

Le son devient des codes discrets

Un codec neuronal (EnCodec, SoundStream) apprend à compresser l'onde en une suite de codes entiers, les jetons audio. C'est l'équivalent des tokens du texte : une fois le son devenu une séquence de symboles, un modèle de langage peut le manipuler.

Conditionnement

Le texte et les paroles pilotent la génération

La description de style, d'ambiance et les paroles sont encodées et injectées comme conditionnement. Le modèle ne génère pas n'importe quels jetons : il génère ceux qui collent le mieux à ta consigne, comme un prompt guide une image.

Diffusion audio

L'autre voie : débruiter au lieu de prédire

Plutôt que prédire des jetons un par un, la diffusion part d'un bruit et le nettoie progressivement vers un spectrogramme ou une onde, guidée par le texte (Stable Audio, Riffusion). Deux familles techniques pour un même but : du son à partir d'une consigne.

Stems

Séparer pour pouvoir éditer

Pour rendre le morceau modifiable, certains systèmes produisent ou re-séparent des pistes : voix, batterie, basse, autres. C'est ce qui permet de remixer ou de remplacer un instrument sans tout régénérer.

Questions fréquentes

C'est quoi un « jeton audio » ?
Un petit code numérique produit par un codec neuronal qui compresse le son. C'est l'équivalent, pour l'audio, des tokens utilisés pour le texte.
Suno crée-t-il vraiment une chanson de zéro ?
Il génère une suite de jetons sonores à partir de ta consigne, puis reconstruit l'onde. Il ne copie pas un morceau précis, mais il a appris sur de la musique existante.
Et la diffusion audio, c'est différent ?
Oui. Au lieu de prédire des jetons, la diffusion part d'un bruit et le débruite vers un son, guidée par le texte (Stable Audio, Riffusion). Même but, autre méthode.
Peut-on séparer la voix et les instruments ?
Souvent oui : on parle de stems (pistes séparées). Cela permet de remixer ou de remplacer un instrument sans tout régénérer.

Pour continuer

SourcesSourcesSources vérifiées

D'où viennent ces informationsD'où viennent ces informationsRéférences consultables

Fin de la leçon

Comment l'IA crée de la musique

Pas encore commencée
  1. J'ai lu et compris la fiche

    Quand tu as fait le tour, marque la leçon comme terminée.

  2. Je valide avec le quiz noté

    Au moins 70 % de bonnes réponses pour maîtriser la fiche.

    Passer le quiz

Prochaine étape : Dense vs mixture-of-experts. Marque cette leçon comme terminée pour y passer en un clic.

Voir mon tableau de bord