L'automatisation de la synchronisation labiale dans Harmony peut permettre de gagner beaucoup de temps lors de l'animation. Même si cette automatisation n'est pas toujours parfaite, elle constitue une base solide que vous pouvez facilement modifier.
Cet article explique comment configurer une synchronisation labiale automatique dans Harmony.
Étape 1 : Préparation des dessins
Avant d'automatiser la synchronisation labiale, les dessins des bouches doivent être préparées comme suit :
- Tous les éléments graphiques de chaque bouche doivent se trouver sur un seul calque distinct. Veillez à donner à ce calque un nom qui vous permettra de le reconnaître facilement.
- Chaque dessin de bouche doit correspondre à l'une des bouches du tableau des bouches de Toon Boom. Renommer chacun des dessins en fonction de cette correspondance facilitera la synchronisation labiale. Vous pouvez effectuer cette opération à l'aide de la vue « Drawing Substitutions ».
- Si vous disposez de bouches exprimant différentes émotions et perspectives, utilisez des conventions de nommage pour les distinguer les unes des autres. Par exemple, une bouche souriante dans la vue de face 3/4 pourrait être nommée « 34F_S_C ».
| NOTE: La synchronisation labiale automatique est le plus souvent utilisée avec l'animation par découpage, car le processus de séparation et les illustrations prêtes à l'emploi s'avèrent particulièrement adaptés dans ce cas. Cela dit, la synchronisation labiale automatique peut également fonctionner avec l'animation sans papier, à condition que la bouche soit toujours séparée. Dans ce cas, la synchronisation labiale sert davantage de référence que d'application finale, en raison de la nature dessinée à la main de l'animation sans papier. |
Étape 2 : Importer et détecter le fichier audio
Avant de pouvoir effectuer la synchronisation labiale, vous devez importer et détecter la piste audio afin qu'Harmony puisse analyser les sons utilisés.
- Dans le menu du haut, sélectionnez File > Import > Sound… et sélectionnez votre fichier audio.
- Le fichier audio sera importé en tant que nouveau calque dans la vue « Timeline ».
- Pour détecter le signal audio, procédez de l'une des manières suivantes :
Dans la vue « Timeline », cliquez avec le bouton droit n'importe où sur la piste audio et sélectionnez Lip-Sync > Auto Lip-Sync Detection.
Dans la vue « Xsheet », cliquez avec le bouton droit de la souris sur la colonne « audio » et sélectionnez Lip-Sync > Auto Lip-Sync Detection.
- Le son sera détecté.
| NOTE: Il est recommandé d'utiliser le format audio .wav lors de l'importation, car le format .mp3 est fortement compressé et peut ne pas offrir la meilleure qualité possible. |
| CONSEIL: Une fois le son détecté, vous pouvez voir quels dessins de bouche seront attribués dans la vue « Xsheet » en cliquant avec le bouton droit de la souris sur la colonne audio et en sélectionnant Sound Display > Mouth Shapes. |
Étape 3 : Synchroniser les bouches
Une fois le son détecté, vous pouvez désormais indiquer à Harmony quelles formes de bouche attribuer à chaque son.
- Pour ouvrir la fenêtre « Lip-Sync Mapping », procédez de l'une des manières suivantes :
Dans la vue « Timeline », cliquez avec le bouton droit n'importe où sur la piste audio et sélectionnez Lip-Sync > Map Lip-Sync...
Dans la vue Xsheet, cliquez avec le bouton droit de la souris sur la colonne « audio » et sélectionnez Lip-Sync > Map Lip-Sync...
- La fenêtre « Lip-Sync Mapping » s'ouvre :
- Dans le champ « Audio », vous verrez le nom du calque audio à partir duquel vous avez ouvert la fenêtre. Si ce n'est pas le calque audio que vous souhaitez mapper, fermez simplement cette fenêtre et ouvrez-la à partir du bon calque audio.
- Dans le champ « Destination Layer », utilisez le menu déroulant pour sélectionner le calque auquel vous souhaitez appliquer le mappage. Il est recommandé de nommer toutes les calques en conséquence avant de procéder au mappage, afin de pouvoir retrouver facilement celui dont vous avez besoin.
- Dans le champ « Symbols in Layer », vous ne devrez effectuer une sélection que si les dessins que vous souhaitez utiliser se trouvent dans un symbole. Si ce n'est pas nécessaire, ne modifiez rien.
- Dans la section « Mapping » , la partie gauche affiche les noms des formes de bouche du tableau, tandis que la partie droite doit contenir les noms de vos dessins de bouche. Vous devrez associer des dessins de bouche spécifiques à certaines formes de bouche du tableau. Saisissez le nom de chaque dessin qui doit correspondre à une forme de bouche du tableau. Si vous avez préalablement nommé vos dessins en fonction du tableau, cette étape devrait être assez simple.
- Une fois que vous avez terminé, cliquez sur OK.
- Lancez la lecture de l'animation pour voir la synchronisation labiale.
| NOTE: La précision du résultat de la synchronisation labiale peut dépendre de nombreux facteurs : la vitesse du dialogue, la clarté du dialogue, la qualité du son et la langue. |
Étape 4 : Régler manuellement la synchronisation labiale
En fonction du résultat de la synchronisation labiale automatique, vous souhaiterez peut-être ajuster certains passages en changeant manuellement les images :
- Cliquez sur le bouton « Scrubbing »
dans la barre d'outils de lecture pour écouter chaque son au fur et à mesure que vous effectuez le scrubbing/balayage sur la piste audio.
- Repérez le calque de la bouche et identifiez les passages de la synchronisation labiale qui nécessitent une attention particulière.
- Dans le calque « bouche », modifiez manuellement les dessins de la bouche en sélectionnant sur la vue Timeline le dessin que vous souhaitez modifier, puis en effectuant l'une des opérations suivantes :
Dans la vue « Drawing Substitutions », repérez la bouche que vous souhaitez utiliser et sélectionnez-la.
Dans la vue « Library », utilisez le curseur miniatures situé en haut à gauche pour faire défiler les dessins disponibles.
- Dans la vue « Timeline », utilisez les crochets du clavier ( [ et ] ) pour passer au dessin suivant ou précédent.
Q&R
Question :
Pourquoi la synchronisation labiale n'a-t-elle pas fonctionné ?
Réponse :
Vérifiez les points suivants :
- Que la piste audio a été détectée.
- Vérifiez que tous les champs obligatoires de la fenêtre « Lip-Sync Mapping » sont remplis correctement. Assurez-vous de mapper le bon calque audio, d’avoir sélectionné le bon calque de destination et que les champs de mappage contiennent les noms des dessins correspondants aux noms du tableau. Si vos dessins de bouche sont nommés « 1 », « 2 », « 3 », etc., ce sont ces noms-là qui doivent être saisis.
- Que vous ne visionnez pas la scène en mode « Render ».
Question :
Mon play-back a bien fonctionné, mais pourquoi ne rend-il pas bien à l'écran ?
Réponses :
- La qualité de la synchronisation labiale peut être influencée par les caractéristiques audio suivantes :
- Les fichiers audio de mauvaise qualité peuvent « brouiller » le son, ce qui rend difficile la détection de sons spécifiques par Harmony.
- Un dialogue très rapide peut donner lieu à des mouvements de bouche « saccadés ».
- Une élocution indistincte peut empêcher Harmony de distinguer certains sons.
- Même si les langues autres que l'anglais peuvent donner de bons résultats, celles qui comportent des phonèmes très particuliers peuvent amener Harmony à essayer de trouver la correspondance la plus proche. Dans ce cas, il est préférable d'ajuster manuellement ces segments audio.
- Assurez-vous que les noms utilisés dans le mappage de synchronisation labiale sont corrects et orthographiés exactement de la même manière que le nom du dessin.
Question :
Pourquoi n'entends-je pas le son lorsque je lance la lecture de ma scène ?
Réponses :
- Assurez-vous que le bouton « Son »
est activé dans la barre d'outils de lecture.
- Vérifiez vos haut-parleurs, votre casque et le volume.