YuE2 : ma composition de 30 ans reprend vie, en local

Merci à Sébastien Rama pour la découverte. Dans mon message sur X, j’ai parlé de « la tuerie du moment ». Je garde cet enthousiasme : pour revisiter ses propres morceaux, YuE2 est assez bluffant. Avec Wan2GP sur Pinokio, l’installation se lance en un clic, ce qui rend l’essai beaucoup plus accessible.

Voici le deuxième clip préparé à partir de mes essais du 15 septembre. La chanson vient de ma vieille composition personnelle, réinterprétée avec YuE2. J’ai ensuite confié la création du clip à Hermes, mon agent IA, en lui laissant les choix visuels. Cette V2 utilise la seconde variante musicale, avec un montage et des inserts 3D recalés sur cette bande-son.

Missing Song, version 2. Clip intégral de 3 min 51 s. La musique a été générée avec YuE2 ; la vidéo est une création distincte orchestrée par Hermes. YuE2 génère le morceau, pas les images du clip.

YuE2 transforme des paroles et une description de style en chanson chantée, avec accompagnement. Le projet publie son code et ses poids téléchargeables. Il produit de l’audio stéréo à 48 kHz et peut fonctionner sur votre ordinateur, sans passer par un service musical hébergé.

Sa particularité est de pouvoir préparer une mélodie et des accords avant de fabriquer l’audio. Cette composition intermédiaire existe sous une forme lisible et modifiable, notamment en notation ABC. On peut donc travailler sur les notes et l’harmonie, puis demander une nouvelle interprétation.

Pour quelqu’un qui a des maquettes dans un dossier depuis des années, l’intérêt est immédiat : repartir d’une chanson qui existe déjà et essayer d’autres arrangements. C’est précisément ce qui m’a accroché avec Missing Song.

Dans Wan2GP, le mode « Extract Score from Source Song » analyse un enregistrement avec SheetSage2/MERT2 pour en extraire une partition. Vous fournissez les paroles séparément, en gardant l’ordre des couplets et des refrains. L’analyse musicale ne transcrit pas automatiquement les mots chantés.

Le mode « Melody only » laisse davantage de liberté au nouvel accompagnement. Le mode « Melody and chords » conserve aussi la contrainte harmonique. C’est un choix intéressant : garder surtout la mélodie pour changer franchement d’ambiance, ou guider davantage la reprise avec les accords.

Il s’agit d’une nouvelle interprétation. On ne récupère pas l’enregistrement original avec quelques instruments remplacés, ni une garantie de retrouver exactement la même voix. Il faut écouter les propositions, vérifier les paroles et choisir celle qui sert le mieux le morceau.

J’avais aussi signalé sur X la présence d’un fichier MIDI dans les sorties de mon essai. L’intégration actuelle de Wan2GP précise le réglage à activer : « Save ABC and MIDI Score ». Il enregistre les fichiers .abc et .mid à côté du morceau, avec le même nom de base.

Ce MIDI décrit la composition utilisée pour guider la génération : plan créé par le modèle, partition fournie ou transcription du morceau source. Ce n’est pas une transcription complète de tous les instruments entendus dans le résultat final. L’option est désactivée par défaut et le mode de génération directe, sans partition, n’exporte pas de score.

Il y a de quoi expérimenter : ouvrir ce MIDI dans son logiciel musical, reprendre une mélodie, changer un instrument ou retravailler des accords. Je vois surtout une piste à explorer, pas la promesse d’une session multipiste prête à mixer.

Mon avis vient d’abord de cet essai sur une composition personnelle : les reprises m’ont suffisamment plu pour multiplier les variantes. Le clip vous donne un exemple concret pour vous faire votre propre idée.

L’équipe de YuE2 présente aussi des résultats compétitifs avec Suno v5/v6 sur WildSongBench. La comparaison publiée porte sur 192 prompts. Attention à la mention « best-of-8 » : elle désigne une sélection parmi huit générations, et non la qualité garantie du premier morceau produit. Même le réglage standard évalué sélectionne une proposition parmi deux.

Ces mesures automatiques, publiées par les auteurs, sont encourageantes. Elles ne prouvent ni une supériorité sur tous les styles ni une préférence générale des auditeurs. Pour moi, le vrai test reste simple : est-ce que j’ai envie de garder et de réécouter la version obtenue ?

Pinokio annonce YuE2 dans WanGP avec 4,5 Go de mémoire vidéo. C’est le chiffre que j’ai relayé sur X. Il concerne cette intégration ; il ne faut pas le confondre avec les besoins du parcours officiel non quantifié.

La fiche officielle YuE2-3B recommande, pour son installation de référence, une carte NVIDIA de 24 Go et 24 Go de RAM disponible. Elle rapporte environ 71 secondes pour générer une chanson de 3,6 minutes sur RTX 4090, après préchauffage, hors chargement initial et sauvegarde. Ce n’est pas un chronométrage de mon PC, ni une promesse de cette vitesse avec 4,5 Go de VRAM.

Le matériel, les réglages et la durée du morceau comptent. L’annonce basse mémoire de Pinokio rend l’outil particulièrement intéressant à essayer, mais ne garantit pas le fonctionnement sur n’importe quelle carte. Une fois les composants téléchargés, le calcul musical se fait localement ; le premier téléchargement demande bien une connexion.

YuE2 est intégré à WanGP depuis la version 13.00. WanGP est le nom désormais utilisé par le projet, toujours connu comme Wan2GP. Pinokio propose son lanceur « 1-click » : il automatise l’installation de l’application et de ses dépendances, au lieu de vous faire enchaîner les commandes à la main.

1. Installez et ouvrez Pinokio, puis recherchez le lanceur Wan2GP de pinokiofactory/wan.
2. Lancez Install et laissez les téléchargements et la préparation se terminer. Si Wan2GP est déjà installé, mettez-le à jour pour disposer de YuE2.
3. Démarrez Wan2GP, sélectionnez YuE2, puis renseignez les paroles et le style musical souhaité.
4. Pour une reprise, ajoutez votre enregistrement source et lancez l’extraction de partition. Activez l’export ABC/MIDI si vous souhaitez conserver cette composition.

Le « un clic » décrit le lancement de l’installation automatisée. Il ne supprime ni les téléchargements, ni le besoin d’un matériel compatible et de pilotes à jour. Le lanceur peut d’ailleurs vous demander de mettre à jour le pilote NVIDIA. Mais pour commencer, c’est nettement plus simple qu’une installation manuelle.

Le code actuel de YuE2 est sous Apache 2.0. Les poids du modèle sont, eux, sous CC BY-NC 4.0, avec une restriction non commerciale. La distinction figure explicitement dans le dépôt officiel et dans l’aide de Wan2GP. Parler de code open source et de poids téléchargeables est donc plus précis que promettre un modèle libre pour tous les usages.

Avant un usage professionnel, une commande client ou un projet monétisé, vérifiez les conditions applicables auprès des auteurs. Le fonctionnement en local ne vaut pas autorisation commerciale. Pour une reprise, il faut aussi tenir compte des droits sur la composition, les paroles et l’enregistrement source ; ici, je suis reparti de ma propre composition.

YuE2 m’a donné envie de rouvrir mes vieux projets musicaux. Pouvoir écouter plusieurs versions d’une composition personnelle, en local, avec un outil accessible dans Wan2GP, c’est déjà une très bonne raison de s’y intéresser. Le MIDI et la partition ajoutent une possibilité de retravail qui mérite quelques soirées de tests. Les vieux dossiers de maquettes risquent de reprendre du service.