1. Comprendre les fondamentaux
* Audio spatial vs audio stéréo ordinaire: L'audio stéréo ordinaire a des canaux gauche et droit qui fournissent un sens de base de largeur. L'audio spatial, d'autre part, utilise plusieurs canaux audio et algorithmes complexes pour créer un paysage sonore 3D. La position de la source sonore par rapport à la tête du spectateur détermine l'audio entendu dans chaque oreille.
* ambisonics: Ambisonics est une technique de son surround pleine sphère. Il enregistre et reproduit le son de toutes les directions, ce qui le rend parfait pour une vidéo à 360 °. Le format le plus courant utilisé pour le codage de l'audio ambisant est Ambisonics de premier ordre (FOA) , qui utilise quatre canaux (w, x, y, z) pour représenter la pression saine et les informations directionnelles. Des ordres plus élevés (par exemple, des ambisonics du troisième ordre) existent pour un placement sonore encore plus précis, mais sont plus exigeants par calcul.
* Audio binaural: L'audio binaural recrée la façon dont nous entendons le son à travers des écouteurs en capturant et en reproduisant le son à l'aide d'une tête factice avec des microphones placés à l'intérieur des oreilles. Il simule la fonction de transfert liée à la tête (HRTF), qui explique la façon dont notre tête et nos oreilles se forment et filtrent le son. Bien qu'il ne soit pas strictement un format lui-même, l'audio binaural est souvent la dernière étape du traitement de l'audio spatial pour la lecture du casque. L'Ambisonic Audio est généralement décodé en audio binaural pour l'écoute des casques.
2. Enregistrement de l'audio spatial
* Microphones ambisés: Ces microphones spécialisés sont conçus pour capturer le son de toutes les directions simultanément. Les options populaires incluent:
* Rode NT-SF1
* Zoom H3-VR
* Sennheiser Ambeo VR micro
* Zylia ZM-1
* tableaux multi-microphones: Vous pouvez également créer un microphone ambisant bricolage à l'aide de plusieurs microphones directionnels disposés dans un motif spécifique. Cela nécessite une expertise plus technique dans le traitement des signaux audio.
* Enregistrement sur le plateau Meilleures pratiques:
* placement: Considérez soigneusement le placement du microphone ambisant par rapport à l'action. Placez-le au centre de la scène, ou où le spectateur est «censé» être.
* Acoustique: Faites attention à l'acoustique de la pièce. La réverbération peut brouiller l'effet audio spatial. Utilisez un traitement acoustique (panneaux, diffuseurs) si nécessaire.
* Synchronisation: Synchroniser avec précision l'audio et la vidéo. Même les petites divergences de synchronisation peuvent briser l'illusion.
* Monitor lors de l'enregistrement: Surveillez l'audio ambiséque lors de l'enregistrement pour vous assurer qu'il n'y a pas de bruits ou de problèmes inattendus.
* bruit ambiant: Essayez de minimiser le bruit ambiant indésirable. Le bruit du vent peut être un problème majeur; Utilisez un pare-brise.
3. Post-production et encodage
* Partations de travail audio spatiales (SAW): Vous aurez besoin de logiciels pour traiter et mélanger votre audio spatial. Les options populaires incluent:
* Dearvr Pro (plugin pour Daws): Un poste de travail audio spatial complet qui offre un mélange ambisé, un codage binaural et un placement précis d'objets sonores.
* FB360 Spatial Workstation (Suite de plugin gratuite pour DAWS): Développé par Meta (Facebook), cela comprend des plugins pour le codage, le décodage et la surveillance de l'audio spatial. Bon pour les débutants.
* nuendo: Une DAW professionnelle qui a une prise en charge intégrée pour les ambisonics et la production audio VR.
* Reaper (avec plugins): Reaper est une DAW puissante et personnalisable qui peut être utilisée avec une variété de plugins audio spatiaux.
* Logic Pro X (avec plugins): Logic Pro X peut également être adapté avec des plugins pour le traitement audio spatial.
* workflow:
1. Importer l'audio: Importez votre audio ambisant enregistré dans votre DAW choisie.
2. Décodage ambiséique (si nécessaire): Si votre enregistrement est dans un format Ambisonique brut (comme le format A), vous devrez peut-être le décoder dans un format plus utilisable comme B-Format (FOA - Ambisonics de premier ordre). Certains logiciels le font automatiquement.
3. Design sonore et mixage:
* Placez les objets sonores: Utilisez les outils audio spatiaux de votre DAW pour positionner des objets sonores (par exemple, dialogue, effets sonores, musique) dans le paysage sonore à 360 °. Vous pourrez spécifier l'azimut (angle horizontal), l'élévation (angle vertical) et la distance de chaque source sonore.
* Automatisation: Animez la position des objets sonores pour créer du mouvement et du dynamisme dans l'audio. Par exemple, une voiture qui passe devrait sembler comme elle se déplaçait de gauche à droite.
* Réverb et effets: Utilisez la réverbération et d'autres effets pour créer un sentiment d'espace et de réalisme. Différents paramètres de réverbération peuvent simuler différents environnements.
* occlusion: Simulez comment les objets du bloc vidéo ou étouffent le son. Si une source sonore est derrière un mur, elle devrait sembler plus silencieuse et plus étouffée.
* Gain et panoramique: Ajustez soigneusement le gain et le panoramique de chaque objet sonore pour créer un mélange équilibré et à consonance naturelle.
4. codage binaural: Encoder le mélange ambiséique dans l'audio binaural pour la lecture du casque. Cette étape crée la spatialisation basée sur HRTF. Utilisez le codeur binaural dans votre plugin DAW ou audio spatial.
5. Encodage pour la distribution: Encoder l'audio final dans un format compatible avec la plate-forme vidéo que vous utilisez (par exemple, YouTube, Facebook, VR HeadSets). important: YouTube nécessite un conteneur audio spécifique avec des métadonnées ambisées.
* métadonnées audio spatiales YouTube: YouTube exige que votre fichier audio contient des métadonnées audio spatiales pour qu'elle soit traitée correctement. Vous pouvez injecter ces métadonnées en utilisant:
* Injecteur de métadonnées médiatiques spatiales de YouTube: Un outil gratuit fourni par YouTube.
* plugins audio spatiaux: De nombreux plugins intégrent automatiquement les métadonnées.
* Facebook 360: Facebook prend en charge l'audio spatial, mais les exigences de format et de codage spécifiques peuvent différer de YouTube. Consultez la documentation de Facebook.
4. Tests et itération
* Surveillance du casque: Surveillez toujours l'audio à l'aide d'écouteurs pendant le processus de mélange. Cela vous donnera la représentation la plus précise de l'effet audio spatial. Utilisez des écouteurs de haute qualité pour les meilleurs résultats.
* Test de casque VR: Testez l'audio dans un casque VR pour vous assurer qu'il semble correct dans l'environnement de visualisation réel. Faites tourner la tête et écoutez comment le son change.
* itérer: Ajustez le mélange en fonction de vos tests d'écoute. L'audio spatial est souvent un processus itératif, et vous devrez peut-être effectuer plusieurs ajustements pour obtenir le son juste.
Conseils pour créer une expérience plus immersive:
* Faire correspondre audio aux visuels: La chose la plus importante est que l'audio devrait correspondre à ce que le spectateur voit. S'il y a un chien qui aboie sur le côté gauche de l'écran, le son devrait provenir de la gauche.
* Subtillant: N'oubliez pas les effets audio spatiaux. Le placement sonore subtil et réaliste est souvent plus efficace que les effets exagérés.
* Utilisez l'ambiance: Créez un paysage sonore riche et crédible en utilisant des sons ambiants. Le vent, la pluie, le gazouillis des oiseaux et les sons de la ville peuvent tous ajouter à l'immersion.
* Focus sur les sons clés: Mettez en évidence les sons les plus importants de la scène. Cela aidera à attirer l'attention du spectateur et à créer une expérience plus engageante.
* Considérez la perspective de l'utilisateur: Pensez à l'endroit où le spectateur est "censé" être dans la scène et concevez l'audio en conséquence.
* Suivi du mouvement: Certains systèmes haut de gamme utilisent le suivi de la tête en temps réel pour ajuster davantage l'audio spatial en fonction de la position exacte de la tête du spectateur. Cela offre l'expérience la plus précise et la plus immersive.
Pièges communs à éviter:
* mauvaise synchronisation: Comme mentionné précédemment, une mauvaise synchronisation entre l'audio et la vidéo est un disjoncteur d'immersion majeur.
* Soundscape statique: Un paysage sonore statique peut sembler contre nature et non engagé. Utilisez le mouvement et l'animation dans l'audio pour créer une expérience plus dynamique.
* sur-délation sur la stéréo: Évitez simplement le panoramique audio stéréo autour de l'espace à 360 °. Cela ne crée pas un véritable effet audio spatial. Utilisez des techniques de mélange ambisantes ou basées sur des objets.
* réverbération excessive: Trop de réverbération peut embrouiller le son et rendre difficile la localisation des sources sonores.
* Niveaux sonores incohérents: Maintenir des niveaux sonores cohérents pour éviter de choquer l'auditeur ou de rendre difficile la compréhension du dialogue.
* ne pas tester sur plusieurs appareils: Ce qui sonne bien sur vos écouteurs de studio peut ne pas sembler bon sur une paire d'écouteurs bon marché ou les haut-parleurs intégrés d'un casque VR. Tester sur une variété d'appareils.
En suivant ces étapes, vous pouvez créer une expérience vraiment immersive et engageante pour vos téléspectateurs avec l'audio spatial dans vos vidéos sphériques. N'oubliez pas d'expérimenter, d'écouter de manière critique et d'itérer pour obtenir les meilleurs résultats. Bonne chance!